XBrainrotTHE INTERESTING WAY TO UNDERSTAND INTERNET CULTURE

Benchmark Contamination

Brainrot Score: 6.9 ⓘ日本語 · LOCALIZED KNOWLEDGE
[ SLANG ][ AI ][ NOUN ]
ベンチマーク汚染↔ 英語の概念に対応 Benchmark Contamination

モデルの訓練データに、後で評価されるベンチマークの問題と答えそのものが偶然(あるいはそれほど偶然でもなく)混入し、スコアが水増しされるが実際の能力向上を反映していないことを指す。

例文

"あの異常に高いスコアは結局ベンチマーク汚染で、テスト問題がそもそも訓練セットに混ざってた。"

由来 & 使い方

AI研究者が疑わしいほど高いベンチマーク結果を監査する中で直接名付けたもので、データサイエンスにおける「テストデータが訓練セットに漏れる」という「汚染」の概念を借用している。

ある高スコアが単に訓練データにテスト問題が混ざっていただけではないかを疑う時に使われる。

初出
2023
ピーク時期
2023-2026 (Current Era)
現在の状態
主流スラング

MENTIONS OVER TIME

DOCUMENTED SINCE
2023
NOW

Radar observation data not yet available for this term.

分類タグ・トレンド推移・プラットフォーム分布・投票結果など、詳しいデータを見るには英語版の完全な記事へ Benchmark Contamination の英語版完全記事 →

TREND STATUS
→ STEADY
EDITORIAL ESTIMATE
CULTURE CATEGORY
[ SLANG ][ AI ][ NOUN ]
TOP PLATFORMS

Not enough Radar data yet.

WHEN DID YOU FIRST HEAR THIS?

CLICK AN OPTION BELOW TO CAST YOUR VOTE.

[ VOTE TO REVEAL COMMUNITY RESULTS ]