어느 기상 모델이 가장 정확한가: 세계 예보 모델을 매일 공개 채점합니다

한눈에 보기

비드래프트가 허깅페이스에 두 가지를 공개했습니다. 기상 예측 시스템 Darwin-Prediction-Weather와, 세계 예보 모델을 실제 날씨와 비교해 매일 채점하는 공개 순위표 Global Weather Model Leaderboard입니다. 2026년 누적 기록에서 Darwin-Prediction-Weather는 채점하는 네 요소 모두, 1일부터 7일 예보까지 전 구간에서 오차가 가장 낮습니다. 전체 글은 허깅페이스 블로그에 있습니다.

질문은 하나입니다. AI인가, 물리 모델인가

예보가 1도 더 정확해지거나 하루 더 일찍 나오면 실제 결정이 달라집니다. 농부는 수확 시기를 정하고, 전력 운영자는 전력 구매량을 정하고, 항공사는 어느 편을 대기시킬지 정합니다.

지난 수십 년 동안 예보는 슈퍼컴퓨터로 대기 방정식을 푸는 물리 모델에서 나왔습니다. 최근 3년 사이 과거 날씨로 학습한 AI 모델이 세계 기상 센터에 함께 자리 잡았습니다. 내일, 사흘 뒤, 일주일 뒤 예보는 어느 쪽을 믿어야 할까요. 논문은 지난 해들에 대해 답합니다. 이 순위표는 올해에 대해, 매일 갱신하면서, 누구나 자료를 확인할 수 있게 답합니다.

채점 방식

항목	규칙
대상 모델	ECMWF IFS·AIFS, NOAA GFS·AIGFS, 독일 DWD ICON, 일본 JMA GSM, 캐나다 ECCC GEM, 노르웨이 MET Norway, Darwin-Prediction-Weather
요소	일 최고기온, 일 최저기온, 일 최대풍속, 일 강수량
범위	6개 대륙 24개 도시, 최대 10일 앞
정답	ERA5 재분석 자료 (코페르니쿠스 기후변화서비스)
점수	평균제곱근오차(RMSE), 낮을수록 좋음
공정성	모든 모델이 예보를 낸 날짜와 도시만, 같은 사례로 채점
기록	2026년 1월 1일부터, 하루 한 번 갱신

2026년 기록이 보여 주는 것

두 가지가 뚜렷합니다.

AI 모델이 앞섭니다. 각국 기상 센터의 모델 가운데 ECMWF의 AI 모델 AIFS는 같은 기관의 물리 모델 IFS보다 모든 예보 일수에서 오차가 낮습니다. NOAA의 AIGFS도 GFS보다 모든 예보 일수에서 오차가 낮습니다.

융합은 한 걸음 더 나갑니다. Darwin-Prediction-Weather는 네 요소 모두, 1일부터 7일까지 모든 예보 일수에서 오차가 가장 낮습니다.

ERA5 기준 RMSE, 24개 도시, 2026년 누적(2026-11-07까지 검증). 괄호 안은 바로 다음 순위 모델이며 모든 칸에서 ECMWF AIFS입니다.

요소	1일	3일	5일	7일
일 최고기온 [°C]	0.84 (1.35)	1.17 (1.59)	1.59 (1.90)	2.09 (2.41)
일 최저기온 [°C]	0.91 (1.50)	1.09 (1.63)	1.42 (1.85)	1.81 (2.17)
일 최대풍속 [km/h]	2.25 (3.60)	2.70 (4.07)	3.43 (4.76)	4.39 (5.69)
일 강수량 [mm]	4.15 (4.33)	5.18 (5.24)	6.80 (6.99)	7.11 (7.30)

어디서 누가 이기는가

전 세계 평균 숫자 하나로는 많은 것이 가려집니다. 순위표는 기록을 기간별, 예보 일수별, 도시별로 나눠 보여 줍니다. 도시마다 흐르는 시간표도 있습니다. 지난 7일의 실제 값과 가장 가까웠던 모델, 오늘 현재, 앞으로 10일 예보가 한 줄에 놓입니다. 매일 아침 어제의 예보가 오늘의 결과가 되고, 바로 채점됩니다.

Darwin-Prediction-Weather는 어떻게 동작하는가

Darwin은 비드래프트의 모델 계열입니다. 원리는 하나입니다. 강한 모델 여러 개의 장점을 합쳐 어느 하나보다 강한 모델을 만듭니다. Darwin-Prediction-Weather는 이 원리를 대기에 적용했습니다.

예보 엔진. 전 세계 예보를 실력에 따라 가중 융합해 하나의 예보를 만들고, 기온과 바람은 지역 보정을 더합니다. 채점 대상 예보보다 먼저 관측값이 확정된 날만 학습에 씁니다. 미래 정보는 들어가지 않습니다.
판단 코어. 보정된 판독기를 갖춘 Darwin-27B 모델이 예보 값을 결정으로 바꿉니다. 진행 여부, 기준치 초과 여부, 범주별 확률을 냅니다.

같은 엔진을 구글 리서치가 운영하는 AI 기상 모델 표준 벤치마크 WeatherBench 2로도 평가했습니다. 2020년 결정론 프로토콜에서 평가한 15칸 전부(2m 기온, 500hPa 지위고도, 850hPa 기온 × 1·3·5·7·10일)에서 가장 낮은 오차를 기록했습니다. 예보 파일은 공개했고 WeatherBench 2 팀에 제출했습니다.

WeatherBench 2, 2020	1일	3일	5일	7일	10일
2m 기온 [K]	0.468	0.743	1.107	1.531	1.984
공식 점수표 최고값	0.488	0.786	1.125	1.552	2.022
Z500 [m2/s2]	33.7	108.5	240.6	400.3	595.4
공식 점수표 최고값	36.8	113.8	250.7	415.1	606.5
T850 [K]	0.503	0.901	1.406	2.000	2.699
공식 점수표 최고값	0.518	0.922	1.435	2.041	2.737