往下拉回到首頁
蛤?你信任的AI排行榜根本不可靠,只要改一點點資料就會全亂套

蛤?你信任的AI排行榜根本不可靠,只要改一點點資料就會全亂套

Study: Platforms that rank the latest LLMs can be unreliable

欸你知道嗎,現在很多人在選AI工具的時候,都會去看那些線上排行榜,想說「欸這個排名第一的一定最強」。但最近有研究發現,這些排行榜其實超脆弱的——只要有人刪除一點點投票資料,整個排名就會完全改變。簡單來說就是,這些排行榜是靠網友投票和評測來決定哪個AI最厲害,但問題是資料太容易被動手腳了。這就像是你的IG演算法,只要改變幾個人的按讚紀錄,你看到的貼文順序就全部不一樣。說真的有點扯,因為很多公司和開發者都在拼命想衝上這些排行榜,結果排名本身根本不穩定。所以下次看到某個AI吹牛說自己排名第一,你可能要打個問號了。

相關標籤

large language modelscrowdsourced dataranking reliabilityevaluation biasdata integrity