可変タイムステップ推論を実現する気象予測モデル GEM-3──単一の重みで予測時間と精度のトレードオフを解消
パラメータ数 134M の neighborhood-attention transformer により、推論時にタイムステップを動的変更しながら高いロールアウト安定性を実証。
リリース: 2026-08-06 · 読了 5 分論文概要
従来の機械学習ベースの気象予測モデルは、事前に固定された自己回帰(Autoregressive)のタイムステップに依存しているという制約があった。短いタイムステップ(1〜6時間)は日内変動の大気ダイナミクスを細かく捉えられる一方で、予測ホライズン全体での誤差蓄積が増大するという課題がある。逆に長いタイムステップ(24時間)は誤差蓄積を抑制するものの、短時間予測の有用性を損なう。本論文では、明示的なマルチタイムステップ推論を通じてこのトレードオフを解決する確率的グローバル気象モデル「GEM-3」を提案する。

関連研究
既存の機械学習気象モデルの多くは固定長のタイムステップで学習されており、タイムステップを変更するにはモデル全体を再学習するか、専用のモデルを用意する必要があった。本研究は、単一のモデル重みで推論時のタイムステップを柔軟に調整できる点で従来手法と一線を画している。
新規性と貢献
本研究の主要な貢献は以下の通りである。第一に、単一の重みセットを持ちながら推論時にモデルのタイムステップを設定可能にし、幅広い予測ホライズンにわたって予測可能性と有用性のバランスを最適化できる点である。第二に、混合タイムステップ(Mixed-timestep)による学習が、タイムステップ特化型モデルと比較してロールアウトの安定性を一貫して向上させることを示した点である。
提案手法の詳細
GEM-3の内部構造は、約134Mパラメータを持つ軽量な neighborhood-attention transformer で構成されている。等方長方形グリッド(Equirectangular grid)上で動作し、前身であるGEM-2から数多くのアーキテクチャ上の改良が加えられている。

なぜこの設計を採用したかといえば、neighborhood-attention機構により局所的な大気構造のモデリング効率を高めつつ、パラメータ数を134Mという比較的小規模な規模に抑えることで、マルチタイムステップ学習に伴う計算コストの増大を相殺するためである。
評価・考察
評価において、GEM-3は近SOTA水準の中期確率的スキル(Medium-range probabilistic skill)を維持しつつ、安定した長期ロールアウトを実現していることが示された。混合タイムステップ学習を導入したことで、単一タイムステップに固定されたモデル特有の誤差発散が抑制されている。

応用例と今後の展望
実務インフラや再生可能エネルギー事業における気象予測の運用において、需要に応じて予測の時間解像度を動的に切り替える柔軟なシステム構築が可能となる。日本の気象データ解析や電力需給予測の分野(規模感としては数台から数十台のGPUクラスタを用いた商用予測システム)において、モデル再学習なしで解像度を変更できる運用上のメリットは大きい。今後はさらなる長期間のロールアウト安定性の検証や、極端気象イベントに対するロバスト性の検証が求められる。
結論
GEM-3は、固定タイムステップの制約を克服するマルチタイムステップ条件付けTransformerであり、単一の重みで精度の高い気象予測と柔軟な運用を両立できることを実証した。
注釈
- ロールアウト (Rollout): 自己回帰モデルにおいて、予測結果を次の入力として再利用しながら未来のステップを逐次予測していくプロセス。