往下拉回到首頁
ClawsBench:你敢放心讓 AI 幫你處理工作嗎?安全性測試揭露真相

ClawsBench:你敢放心讓 AI 幫你處理工作嗎?安全性測試揭露真相

ClawsBench: How Safe Are AI Agents That Actually Do Stuff for You?

如果你有在用 ChatGPT 或其他 AI 來幫忙整理信件、管理行程,你有沒有想過它會不會一不小心刪掉重要檔案?今天這篇論文介紹了一個叫 ClawsBench 的測試工具,專門用來檢驗大型語言模型(LLM)生產力代理——也就是那些能自動幫你做工作的 AI——到底有多聰明,又有多安全。簡單來說就是像汽車碰撞測試一樣,但測的不是安全氣囊,而是 AI 會不會亂刪你的檔案或被騙去做壞事。研究團隊建立了一個模擬環境,讓這些 AI 代理去處理各種真實情境,從簡單的任務到專門設計來為難它們的複雜狀況。說真的,讓 AI 變聰明只是一部分,安全性才是真正的挑戰。如果你在考慮讓 AI 接手你的實際工作,這種研究會讓你既放心又擔心。

關鍵字

benchmarkevaluationlanguage modelssafetycapability assessmentagents