AI 檢測器表現不穩定，可能將人類作品錯誤標記為 AI 生成
美國作家協會的一項測試發現，pangram 和 grammarly 的工具正確識別了所有人類撰寫的文本，而 sidekicker 在每篇文章上都失敗了。這種不一致性給作者帶來了風險，因為誤報可能導致他們失去合約並損害聲譽。
作者協會（the authors guild）測試了五款AI偵測器在2020-2022年文章上的表現，發現Pangram和Grammarly正確辨識了所有人類寫作，而Sidekicker則將每篇文章標記為大多由AI生成。儘管某些工具表現優秀，但協會警告說這些偵測器是不穩定的黑盒子，無法可靠地區分頂級人類作家和模仿其風格的機器。由於專業寫作與訓練數據共享統計模式，熟練作者面臨被錯誤指控的最高風險，可能導致合約失效。結果凸顯了一個悖論：人類專業知識因與其幫助訓練的輸出相似而受到懲罰。