往下拉回到首頁
你的 AI 助手被騙了怎麼辦?ChatGPT 如何防止被「下指令」攻擊

你的 AI 助手被騙了怎麼辦?ChatGPT 如何防止被「下指令」攻擊

Designing AI agents to resist prompt injection

欸你知道嗎,現在很多人在用 ChatGPT 來做工作流程自動化,但有個很扯的問題——有人可以透過偷偷改指令來騙 AI 做危險的事情,比如刪除資料或洩露機密。簡單來說就是有人會在你的對話裡夾進惡意指令,AI 就會被騙去執行。ChatGPT 現在想到一個辦法:限制 AI 代理能做什麼事、保護敏感資訊不被亂用。這就像是給 AI 設定一些「禁區」,就算被騙也不會亂來。如果你有在用 AI 來處理重要工作,這個防護機制對你來說還滿重要的,值得了解一下它怎麼運作的。

相關標籤

prompt injectionsocial engineeringAI agentssecuritydefense mechanismssensitive data protection