Obtenir délibérément à l'avance les vraies questions et réponses d'un benchmark —par fuite, scraping ou canaux internes— spécifiquement pour entraîner ou affiner un modèle, distinct de la contamination accidentelle de benchmark par échelle de données —ceci est délibéré.
Exemples
"Ce n'était pas une contamination accidentelle, les chercheurs ont trouvé des preuves concrètes de vol de benchmark, quelqu'un avait eu la feuille de réponses."
Origine et usage
Utilisé pour dénoncer qu'un score élevé vient du vol des réponses d'un test, pas d'une contamination accidentelle.
MENTIONS OVER TIME
Vous voulez voir la fiche complète en anglais avec les tags de catégorie, la tendance, la répartition par plateforme et les votes de la communauté ? Consultez la Benchmark Theft fiche complète en anglais →
WHEN DID YOU FIRST HEAR THIS?
CLICK AN OPTION BELOW TO CAST YOUR VOTE.
[ VOTE TO REVEAL COMMUNITY RESULTS ]