往下拉回到首頁
MemPalace 說自己完美滿分,結果自己的說明書卻說這根本沒用

MemPalace 說自己完美滿分,結果自己的說明書卻說這根本沒用

MemPalace Claims 'Perfect Score' on Its Own Tests—Then Admits in Fine Print Why That Doesn't Mean Anything

欸你知道嗎,昨天有個新的 AI 記憶專案叫 MemPalace 上線,一直在吹自己有多強——說什麼「100% 完美分數」「史上第一次滿分」,結果一堆人信了,GitHub 一天內就被加星 7,000 多次,推文也被轉發到 150 萬次。但這裡最扯的地方是,他們自己寫的說明文件(BENCHMARKS.md)裡面竟然詳細解釋為什麼這些分數其實沒什麼意義。簡單來說就像是你自己出題自己答,然後在答案卡上坦白說「欸其實這份考卷根本測不出什麼」。這就是為什麼有些人開始懷疑,這些漂亮的數字到底是真的厲害,還是只是看起來厲害而已。

相關標籤

benchmarkevaluationmemoryopen-sourcemisleading claimsmetrics