Perché i vecchi test dell’AI stanno perdendo efficacia

La saturazione dei benchmark

La saturazione dei benchmark si verifica quando i sistemi di intelligenza artificiale più avanzati si avvicinano al punteggio massimo di un test.

In questa situazione, il risultato diventa meno utile per distinguere le capacità reali dei diversi sistemi: differenze ridotte nel punteggio possono non riflettere differenze altrettanto ridotte nelle prestazioni.

Per questo, i test utilizzati per valutare l’AI possono perdere efficacia nel tempo, soprattutto quando non riescono più a separare con precisione i modelli più avanzati.