[ SLANG ][ AI ][ NOUN ]
ベンチマーク汚染↔ 英語の概念に対応 Benchmark Contamination
モデルの訓練データに、後で評価されるベンチマークの問題と答えそのものが偶然(あるいはそれほど偶然でもなく)混入し、スコアが水増しされるが実際の能力向上を反映していないことを指す。
例文
"あの異常に高いスコアは結局ベンチマーク汚染で、テスト問題がそもそも訓練セットに混ざってた。"
由来 & 使い方
AI研究者が疑わしいほど高いベンチマーク結果を監査する中で直接名付けたもので、データサイエンスにおける「テストデータが訓練セットに漏れる」という「汚染」の概念を借用している。
ある高スコアが単に訓練データにテスト問題が混ざっていただけではないかを疑う時に使われる。
初出
2023
ピーク時期
2023-2026 (Current Era)
現在の状態
主流スラング
MENTIONS OVER TIME
2023202420252026
分類タグ・トレンド推移・プラットフォーム分布・投票結果など、詳しいデータを見るには英語版の完全な記事へ Benchmark Contamination の英語版完全記事 →
AURA IMPACT ⓘ
+15 AURA
TREND STATUS
↑ HIGH RISING FAST · MODERATE
CULTURE CATEGORY
[ SLANG ][ AI ][ NOUN ]
TOP PLATFORMS
TikTok
52%
YouTube
20%
Twitter / X
14%
Reddit
9%
Others
5%
WHEN DID YOU FIRST HEAR THIS?
CLICK AN OPTION BELOW TO CAST YOUR VOTE.
[ VOTE TO REVEAL COMMUNITY RESULTS ]