今回分かったこと
本番モデルには未採用過去の発生率だけを使う方法に対して、新しいM6試験モデルの優位性は確認できませんでした。 大地震の多かった2011年を学習とテストの両方から除き、2018〜2023年の地震が起きなかった日も含めて比較しています。
「地域日」は地域×日付。同じ地震が複数の地域の枠に入ることがあります。M6以上がその日に1件以上起きたかを判定します。
新しいM6モデルと単純な比較基準
| 評価指標 | 地域別過去頻度 | 新しいM6試験モデル |
|---|---|---|
| ROC-AUC(大きいほど良い) | 0.7109 | 0.7081 |
| 平均適合率 AP(大きいほど良い) | 0.00428 | 0.00405 |
| Brier(小さいほど良い) | 0.0019224 | 0.0019228 |
| 対数損失(小さいほど良い) | 0.0135751 | 0.0135567 |
| 上位約10%の地域日数 | 2,191 | 2,134 |
| 上位約10%でのM6発生日 | 13 | 11 |
| 上位約10%の発生率 | 0.59% | 0.52% |
分類モデルの比較として評価し、90点以上という恣意的な境界の代わりに、予測順位と確率推定の誤差を確認しました。前向き予想として公開された記録ではなく、事後検証です。
M6が起きた地域日:新モデル上位約10%の捕捉率
単純基準:13地域日/全38地域日、新モデル:11地域日/全38地域日でした。
上位約10%は点数で順位付けしたグループであり、M6発生確率10%の意味ではありません。
地域別の実際のM6発生(2018〜2023年)
| 地域 | 検証地域日数 | 発生日数 | 単純基準の予測合計 | 新方式の予測合計 |
|---|---|---|---|---|
| 北海道 | 2,191 | 7 | 8.0 | 7.5 |
| 東北 | 2,191 | 13 | 20.7 | 14.6 |
| 関東 | 2,191 | 1 | 7.0 | 5.4 |
| 中部 | 2,191 | 4 | 3.1 | 3.2 |
| 近畿 | 2,191 | 1 | 1.1 | 2.0 |
| 中国 | 2,191 | 0 | 2.1 | 2.5 |
| 四国 | 2,191 | 1 | 0.1 | 1.5 |
| 九州 | 2,191 | 3 | 5.0 | 4.4 |
| 沖縄 | 2,191 | 8 | 6.0 | 6.1 |
「予測合計」は確率を日ごとに合算した期待件数であり、参考点数や検証済み的中数ではありません。
何を変更したのか
新方式は、各地域の過去のM6発生率と全国9地域のデータを併用する正則化ロジスティック回帰です。過去7日の同地域M4.5以上の件数(上限6件を対数化)とM6以上の有無を使用。個別地域のM6記録が少なくても一応の計算ができます。ただし、その計算が実際に有効かは独立期間で確認する必要があります。
太陽フレアや月の位相を試験的に加えても、今回の比較では明確な精度向上は確認できませんでした。六曜・九星の追加効果は今回の独立期間比較では検証していません。 通常のRY25の3段階スコアおよび保存済みの事前予測は変更していません。
新方式は本番採用していません。2011年を除くと大地震が非常に少なく、数年の比較だけでは優劣の結論を出しにくい状況です。今後はM6の有効な事例を増やし、独立した将来記録でも試験します。
検証データはRY25内蔵の2010〜2023年保存カタログに基づきます。元データの地域境界や完全性は別途監査が必要です。テストには2018年以降の出来事を学習させていませんが、研究方針自体は過去の結果を見た後に考案したものであり、完全な前向き検証ではありません。