LAMBADAのリーダーボード
2026年11月16日時点で、LAMBADAの最高スコアは87.2%で、Megatron-Turing NLG 530B(NVIDIA)が記録しています。次点はInstructGPT 175Bの86.4%です。公表された結果があるのは24のモデル構成です(Epoch AI Benchmarking Hub、結果の日付は2021年10月11日)。文章の最後の単語を予測するタスクです。LAMBADAは参考として掲載しており、BenchLeader Indexには含まれません。
要点(2026年11月16日時点)
- Megatron-Turing NLG 530BがLAMBADAの最高スコア87.2%を記録しています(Epoch AI Benchmarking Hub、2021年10月11日)。
- LAMBADAの2位はInstructGPT 175Bで、86.4%です(Epoch AI Benchmarking Hub、2022年1月27日)。
- LAMBADA:文章の最後の単語を予測するタスク。2016年のベンチマークで、現在のモデルでは飽和しており、記録として残しています(Epoch AI Benchmarking Hub)。
- BenchLeaderでは24のモデル構成にLAMBADAの公表結果があります(BenchLeader、2026年11月16日)。
- LAMBADAはBenchLeader Indexには反映されず、参考として掲載しています(BenchLeaderの評価方法)。
文章の最後の単語を予測するタスク。2016年のベンチマークで、現在のモデルでは飽和しており、記録として残しています。
- カテゴリ
- 知識
- Indexでの重み
- 参考のみ
- モデル
- 24
- データ基準日
- 2026年11月16日
CC BY 4.0 — Epoch AI, ‘AI Benchmarking Hub’, epoch.ai/benchmarks. Mirrored boards credit their original publishers.
どんなテストか
文章の最後の単語を予測するタスクです。
採点方法
正答率で、公表された結果をEpoch AIがまとめたものです。
注意点
飽和しています。最先端のモデルは上限近くに達しているため、差がつくのは古いモデルや小型モデルだけで、結果の大半はプロバイダー自身の報告によるものです。
- 1Megatron-Turing NLG 530B87.2%
- 2InstructGPT 175B86.4%
- 3Falcon-180B79.8%
- 4Llama 2-70B78.9%
- 5Inflection-178.5%
- 6PaLM 540B77.9%
- 7LLaMA-65B77.7%
- 8Falcon-40B77.3%
- 9LLaMA-33B77.2%
- 10Llama 2-13B76.5%
- 11LLaMA-13B75.2%
- 12Falcon-7B74.9%
- 13Baichuan2-13B74.0%
- 14Llama 2-7B73.3%
- 15Baichuan 2 7B Base73.3%
24件中24件
| # | ||||
|---|---|---|---|---|
| 1 | 87.2% | – | 2021-10-11 | |
| 2 | 86.4% | – | 2022-01-27 | |
| 3 | 79.8% | – | 2023-09-06 | |
| 4 | 78.9% | 33.4 | 2023-07-18 | |
| 5 | 78.5% | – | 2023-06-22 | |
| 6 | 77.9% | – | 2022-04-04 | |
| 7 | 77.7% | – | 2023-02-24 | |
| 8 | 77.3% | – | 2023-03-15 | |
| 9 | 77.2% | – | 2023-02-24 | |
| 10 | 76.5% | – | 2023-07-18 | |
| 11 | 75.2% | – | 2023-02-24 | |
| 12 | 74.9% | – | 2023-04-24 | |
| 13 | 74.0% | – | 2023-09-06 | |
| 14 | 73.3% | – | 2023-07-18 | |
| 15 | 73.3% | – | 2023-09-20 | |
| 16 | 73.3% | – | 2023-02-24 | |
| 17 | 71.8% | – | 2023-09-18 | |
| 18 | 71.3% | – | 2023-07-20 | |
| 19 | 71.1% | – | 2023-09-28 | |
| 20 | 70.0% | – | 2023-05-05 | |
| 21 | 67.9% | – | 2023-09-28 | |
| 22 | 67.0% | – | 2023-07-05 | |
| 23 | 58.4% | – | 2023-11-30 | |
| 24 | 54.3% | – | 2023-06-24 |
引用表記:BenchLeader「LAMBADAのリーダーボード」2026年11月16日時点のデータ、https://www.benchleader.com/ja/benchmarks/lambada
LAMBADA:よくある質問
- LAMBADAは何を測るベンチマークですか?
- 文章の最後の単語を予測するタスクです。スコアは解けたタスクの割合(%)で示され、高いほど良い結果です。
- LAMBADAの最高スコアは?
- 2026年11月16日時点で、LAMBADAの最高スコアは87.2%で、Megatron-Turing NLG 530Bが記録しています(結果の日付は2021年10月11日)。次点はInstructGPT 175Bの86.4%です。スコアはEpoch AI Benchmarking Hubの公表値で、毎日読み直しています。
- LAMBADAでトップのAIモデルは?
- 2026年11月16日時点で、LAMBADAの首位はMegatron-Turing NLG 530Bで、スコアは87.2%です(結果の日付は2021年10月11日)。続いてInstructGPT 175B(86.4%)です。
- LAMBADAの結果があるモデルはいくつですか?
- BenchLeaderでは24のモデル構成にLAMBADAの結果があり、すべてEpoch AI Benchmarking Hubから取得しています。
- LAMBADAを運営しているのは誰で、どのくらいの頻度で更新されますか?
- LAMBADAはEpoch AI Benchmarking Hubが公開しています。BenchLeaderは公開された結果を1日1回読み直し、各結果の公開日を記録しています。
- LAMBADAはBenchLeader Indexに含まれますか?
- いいえ。LAMBADAは参考として掲載していますが、総合スコアには含めていません。