AI・信頼性・評価
AI天気予報は平均で勝ち、決定論型は記録破りで負ける
要点: 天気予報のAIが、研究デモから運用へと踏み込んだ。ヨーロッパ中期予報センター(ECMWF)は2025年2月、機械学習モデル AIFS を本番運用に載せ、多くの指標で物理モデルを上回り、台風・熱帯低気圧の進路では最大2割改善、消費電力は物理計算の約1000分の1だと報告する1。DeepMind の GenCast は、2019年を対象にした検証で、世界最高峰である ECMWF のアンサンブル予報を、1320通り(変数×リードタイム×気圧面)の97.2%で確率スコア(CRPS)が上回ったと報告する2。だが手放しでは済まない。2025年に公表され翌年査読を通った検証は、記録破りの熱波・寒波・強風——最も警報が要る場面——では、検証対象となった決定論型のAIモデル3種に対して、いまも物理モデルが勝つと示した3。理由は根が深い。AIは安全な「平均」を出すよう報われ4、訓練したデータの外へ外挿できない3。平均では勝ち、記録更新の領域では負ける。
越えた閾値:AI予報が「運用」に入った
ここ数年、天気予報AIは加速してきた。GraphCast、Pangu-Weather、そして GenCast のような拡散モデルが、物理シミュレーションに迫り、追い抜く数字を次々に出した。決定的だったのは、物理予報の総本山が、自ら本番に載せたことだ。ECMWF は2025年2月25日、AIFS(AI Forecasting System)を運用化し、物理モデル IFS と並走させ始めた1。
数字も速度も本物だ。AIFS は多くの指標で物理モデルを上回り、台風進路では最大2割改善。しかも 28km 格子で高速に走り、9km の物理モデルに対し電力は約1000分の1という(ECMWF の発表は increased speed and a reduction of approximately 1,000 times in energy use とするだけで、実行時間の数値は出していない)。GenCast はさらに攻めた。0.25度・15日先までの確率的アンサンブルを8分で生成し、ECMWF のアンサンブル予報を 1320の検証指標のうち97.2%で上回ったと報告する2。速く、安く、そして平均的には正確——この三拍子が、運用化を後押しした(→予報の限界は計算機でなく天気の側にある)。
だが、記録破りでは物理が勝つ
平均ではなく、記録を塗り替える規模の極端気象に的を絞ると、評価は逆転する。Zhang・Fischer・Zscheischler・Engelke は、この極端気象で AIモデル(GraphCast・Pangu-Weather・FuXi)と物理モデル HRES を比べた3。ここでの「記録破り」は、格子点ごと・暦月ごとに 1979〜2017 年の最高/最低を更新した事例を指し、対象変数は 2m 気温と 10m 風速、検証年は 2018 年と 2020 年だ。結果は一方向だった。HRES が、ほぼ全リードタイムでAIを上回る——5日を超えると差は縮まるが、それでも概ね物理が優位だ。AIは記録破りの発生頻度も強度も過小評価し、暑い記録は低く、寒い記録は高く見積もる。しかも悪いことに、記録の更新幅が大きいほど、AIの誤差は膨らむ。
著者らの診断は、訓練の外へ外挿できないことだ。主要なAI天気モデルは1979〜2017年のデータで学んでおり、温暖化が進む世界の前例のない極端を、過去に観測した範囲へ引き戻してしまう。彼らは、早期警戒や災害対応のような高stakesの用途を、いまのAIだけに委ねることに警鐘を鳴らす。平均の勝ちは、記録を塗り替える領域では通用しない。
なぜ極端で外すのか——「平均への回帰」
弱点は偶然ではなく、学習のさせ方に根がある。多くのAI天気モデルは、予報と実況の点ごとの誤差(平均二乗誤差など)を最小化するよう訓練される。すると、はっきり committすると外したとき罰が大きいので、モデルは安全に平均へ寄せる方が得になる。結果、予報は空間的にぼやけ(blurring)、先の予報ほど滑らかになり、小さなスケールの構造が消える4。台風の目のような鋭い峰は、平均化されて丸くなる。
これが、平年から離れた場面でAIが鈍る一因だ。ただし記録破りでの敗北を著者らが帰すのは、ぼやけそのものではなく訓練領域の外へ外挿できないことである3。物理モデルが強いのは、逆に変わらない物理法則に従うからだ。方程式に従う分、見たことのないシナリオでも破綻しにくい——ただし対流や雲の扱いには経験的に調整されたパラメタリゼーションが入っている。事実、HRES も風速記録では弱い過小評価を示す(原典はこの偏りをパラメタリゼーションに帰してはいない)3。物理側も無条件ではない。GenCast が「極端に強い」と言えたのも、あくまで観測された分布の裾での話で、その外——記録更新の領域——は別の土俵だった。ぼやけるモデルは、平年並みの明日はうまく当て、50年に一度の朝を丸めてしまう。
この報告を、どう割り引くか
どちらの側にも留保がいる。AIFS や GenCast の勝ちは総合スコアや平均での話で、モデル・季節・変数によってばらつく。評価は物理モデルと並走させての話だ1。なおここで引く ECMWF の発表は2025年2月の AIFS Single 運用化時点のもので、その後 AIFS ENS(確率的アンサンブル)が2025年7月に、AIFS v2 が2026年5月に運用入りしている。決定論か確率かという本稿の軸から見れば、ECMWF 自身の確率的AIが運用に入っている事実がいちばん効く反例であり、本稿の検証対象はそこを含んでいない。極端の検証にも条件がある。両者とも遡及検証であり、AIは ERA5 再解析で初期化・検証、HRES は自前の運用解析で検証という非対称な土俵だ——実時間には手に入らない最良解析をAIに渡してなお負けた、とも読める。検証されたのは GraphCast・Pangu-Weather・FuXi という点ごとの誤差(MSE や L1)を最小化する決定論モデルであって、GenCast のような確率的モデルや AIFS は対象外だ。GraphCast と Pangu-Weather については運用版も検証されている。研究に関与していない外部の研究者からは、検証対象は「一世代前」のAIモデルだという評も出ている5。訓練領域という設定にも依存する(ただし同論文は1979〜2019年学習版や、運用解析にもとづく版(GraphCast の運用版は HRES-fc0 で微調整済み)も検証しており、いずれも劣った)。著者らは改善経路として、気候モデル由来の極端事例によるデータ拡張、極値統計に基づく損失、ハイブリッド化を挙げる3。ぼやけ自体も、スペクトルや水平勾配を損失に組み込む設計で抑えられると報告され始めた4。「AIは極端に弱い」も、永久の性質ではなく現行方式の限界だ。
とはいえ、二つを重ねた結論は変わらない。平年並みの明日は、AIが速く安く当てる。だが記録破りの朝は、まだ物理方程式の出番だ。「AIが天気予報で物理モデルを超えた」という一行は、半分だけ本当だ——どの分布のどこを予報しているかを言わなければ、勝敗は決まらない。
出典
-
[positive] European Centre for Medium-Range Weather Forecasts(ECMWF), “ECMWF’s AI forecasts become operational”(2025年2月公表)。機械学習予報システム AIFS(AI Forecasting System)の決定論版を2025年2月25日に運用化し、物理モデル IFS と並走。多くの指標で物理モデルを上回り、熱帯低気圧・台風の進路では最大20%改善。格子間隔は28km(IFSは9km)で、予報生成の消費電力は物理計算の約1000分の1と報告する。ECMWF 自身がAI予報を本番運用に載せた側の一次資料。https://www.ecmwf.int/en/about/media-centre/news/2025/ecmwfs-ai-forecasts-become-operational ↩ ↩2 ↩3
-
[positive] Ilan Price, Alvaro Sanchez-Gonzalez, Ferran Alet, Tom R. Andersson ほか (Google DeepMind), “GenCast: Diffusion-based ensemble forecasting for medium-range weather”(arXiv:2312.15796, 2023年12月公開/2024年改訂・Nature掲載)。拡散モデルで、0.25度・15日先までの確率的アンサンブル(80超の地上・大気変数)を8分で生成。世界最高峰である ECMWF のアンサンブル予報 ENS を、評価した1320指標の97.2%で上回ったと報告(97.2%は Nature 掲載版 “Probabilistic weather forecasting with machine learning”, 2024年12月4日, doi:10.1038/s41586-024-08252-9 の値。arXiv プレプリント版は97.4%と記載しており、本稿は査読版の数値を採る)。観測された分布の裾での極端気象や台風予報、風力発電予測でも優位を主張する。AI予報が平均スコアで物理を上回りうる側の一次証拠。https://arxiv.org/abs/2312.15796 ↩ ↩2
-
[negative] Zhongwei Zhang, Erich Fischer, Jakob Zscheischler, Sebastian Engelke, “Physics-based models outperform AI weather forecasts of record-breaking extremes”(Science Advances, 2026, doi:10.1126/sciadv.aec1433。プレプリントは arXiv:2508.15724「Numerical models outperform…」として2025年8月21日公開、査読掲載時に改題)。記録を塗り替える規模の熱波・寒波・強風に的を絞り、AIモデル(GraphCast・Pangu-Weather・FuXi、および GraphCast・Pangu-Weather の運用版)と物理モデル HRES を比較。ほぼ全リードタイムで HRES が一貫してAIを上回り、AIは記録破りの頻度も強度も過小評価(暑い記録は低く・寒い記録は高く)、記録の更新幅が大きいほど誤差が拡大。原因を訓練領域(1979〜2017年)外への外挿の失敗とし、早期警戒など高stakes用途をAI単独に委ねることに警鐘を鳴らす。物理が極端でなお勝つ側の一次証拠。https://arxiv.org/abs/2508.15724 ↩ ↩2 ↩3 ↩4 ↩5 ↩6
-
[negative] “FastNet: Improving the physical consistency of machine-learning weather prediction models through loss function design”(arXiv:2509.17601, 2025年9月公開/Artificial Intelligence for the Earth Systems(AMS)2026掲載)。AI天気予報モデルが、平均二乗誤差の最小化により「安全に平均へ寄せた」予報を出すよう報われ、空間的にぼやけ(blurring)、先の予報ほど滑らかになって小スケール構造やスペクトル解像度を失う問題を扱う。修正球面調和(MSH)損失でスペクトル振幅の誤差を罰し、水平勾配項で非物理的アーティファクトを抑えることで、細かな構造の平滑化を軽減できると報告。極端の過小評価の背後にある「平均への回帰=ぼやけ」の機構と、その緩和策を示す一次証拠。https://arxiv.org/abs/2509.17601 ↩ ↩2 ↩3
-
[positive] Carbon Brief「Traditional models still ‘outperform AI’ for extreme weather forecasts」。同研究の解説記事。研究に関与していないウプサラ大の博士課程研究者 Leonardo Olivetti は、検証された3つのAIモデルは「一世代前(older generation)」のものだと述べており、極端の再現を掲げる新しい確率的モデルは評価対象に入っていない。 https://www.carbonbrief.org/traditional-models-still-outperform-ai-for-extreme-weather-forecasts/ ↩
この記事はAIが執筆しています。内容には誤りが含まれる可能性があります。ご注意ください。