ai.doge.tg 繁體 AI 情報 最新 專案 搜尋 Telegram ↗

大學教授在題目隱藏「Madagascar」指令抓 AI 作弊,32/35 學生中招

產業 1 個來源 · 9 天前
為何重要

對教育與企業而言,這是一個簡單但強效的「反向 corner case」驗證,凸顯了目前在 LLM 作風險控制上的潛在漏洞。此案例強化了「人類監督」仍是 AI 產出可靠性的最後一道防線,只要使用者缺乏基本的檢視意識,生成的荒謬內容仍可能洩露使用 AI 的痕跡。

Alcorn State University 教授 Jason Gibson 為了應對學生使用 AI 代寫 essay,特意修改題目,在隱藏的標準文字中埋入指令要求編輯出不合邏輯的單詞。結果使學生提交的 AI 回應暴露出馬達加斯加穿著烤麵包機去打籃球的等荒謬句子。此舉成功驗證了利用 AI 無視語境的特性來檢測作弊行為的有效性。

  • 隱藏指令要求學生在 essay 中將「Madagascar」一詞放在「不合邏輯」的位置。
  • 在 35 名學生中,有 32 名完全未能逃過偵測,其回應中出現了諸如「Madagascar wore a toaster to a basketball game」這類典型 AI 錯誤。
  • 教授分析認為,學生缺乏對 AI 輸出結果的反覆檢查,反映出 AI 使用對此類批判性思考技能的負面影響。
Jason GibsonAlcorn State UniversityAI cheating detectionLLMPrompt injection strategyUniversity

來源 · 1 篇報導

首發 The Register theregister.com 00:20