OpenAI開發反作弊工具 效用如何引發質疑
【化工儀器網 時事熱點】《華爾街日報》消息顯示，反作弊項目在OpenAI內部爭論了大約兩年，準備發布的時間就有大約為一年。 OpenAI首席執行官山姆·奧特曼(Sam Altman)和首席技術官米拉·穆拉蒂(Mira Murati)都參與了反作弊工具的討論。知情人士說，奧特曼鼓勵這個項目，但沒有推動發布。
OpenAI內部在透明度承諾和留住用戶之間搖擺不定，它對ChatGPT用戶開展的一項調查發現，近1/3的用戶會因為反作弊技術而關閉服務，這些受訪者表示，如果ChatGPT使用反作弊技術而競爭對手沒有，他們會減少使用ChatGPT。
ChatGPT可以預測句子中接下來會出現的token，OpenAI的反作弊工具將略微改變token的選擇方式，這些變化會留下水印。這些水印對人眼來說是不明顯的，但可以被OpenAI的檢測技術發現。根據內部文件，當ChatGPT創建足夠多的新文本時，水印的有效性為99.9%。
首先，從技術角度來看，OpenAI的反作弊工具利用了一種類似“水印”的方法，在文本中嵌入不可見的標記。這些水印對人眼來說是不明顯的，但可以被OpenAI的檢測技術發現。據稱，當ChatGPT創建足夠多的新文本時，水印的有效性高達99.9%，且不會影響ChatGPT的性能。然而，內部員工擔心這些水印可能通過簡單的技術被刪除，比如將文本翻譯成另一種語言再轉換回來，或者在文本中添加表情符號后手動刪除。此外，如何決定誰可以使用這種檢測器也是一個挑戰。
其次，從用戶角度來看，OpenAI對ChatGPT用戶進行了多次調查，發現近三分之一的用戶表示，如果ChatGPT使用反作弊技術，他們會減少使用ChatGPT。這些用戶擔心，如果ChatGPT使用反作弊技術而競爭對手沒有，他們可能會轉向其他工具。此外，該工具還可能對非英語母語的用戶產生不成比例的影響，這進一步增加了OpenAI在發布該工具時的顧慮。
因此，盡管OpenAI在技術上已經取得了顯著的進展，但在是否發布和使用這一反作弊工具上仍然存在諸多爭議和未解決的問題。目前，OpenAI尚未正式對外公開這一工具，但已有一些外部公司和研究人員正在開發類似的檢測工具，并嘗試在教育和學術領域中使用。
關注本網官方微信 隨時閱讀專業資訊
- 國自然發布《完善城鄉融合發展的體制機制研究》指南 2024-11-28 14:50:36
- 日前，國家自然科學基金委員會管理科學部發布《2024年第4期應急管理項目<完善城鄉融合發展的體制機制研究>申請說明》。
- 2024年第四批擬兌付的上海市科技創新券(儀器類)名單公示 2024-11-28 13:53:11
- 依據《上海市科技創新券管理辦法》有關規定，2024年第四批擬兌付的上海市科技創新券(儀器類)名單已經公示，公示期為2024年11月27日至2024年12月3日。
- 共計549項！浙江省2025年度“尖兵領雁 X”科技計劃項目立項清單 2024-11-28 13:42:31
- 近日，浙江省科學技術廳正式公示了2025年度“尖兵領雁 X”科技計劃擬立項清單。
- 工信部：655項行業標準及6項行業標準外文版報批公示 2024-11-28 11:01:28
- 近日，工業和信息化部科技司公示一批行業標準，根據行業標準制修訂計劃，相關標準化技術組織已完成655項行業標準及6項行業標準外文版的編制工作。
- 浙江省首個新型數字化智能變電站正式投運 2024-11-28 10:37:34
- 2024年11月19日，浙江省杭州市蕭山區靖江街道迎來了一個里程碑式的時刻——浙江省首個新型數字化智能變電站，110千伏雷東變電站，正式投入運行。
版權與免責聲明
- 凡本網注明“來源：化工儀器網”的所有作品，均為浙江興旺寶明通網絡有限公司-化工儀器網合法擁有版權或有權使用的作品，未經本網授權不得轉載、摘編或利用其它方式使用上述作品。已經本網授權使用作品的，應在授權范圍內使用，并注明“來源：化工儀器網”。違反上述聲明者，本網將追究其相關法律責任。
- 本網轉載并注明自其它來源（非化工儀器網）的作品，目的在于傳遞更多信息，并不代表本網贊同其觀點或和對其真實性負責，不承擔此類作品侵權行為的直接責任及連帶責任。其他媒體、網站或個人從本網轉載時，必須保留本網注明的作品第一來源，并自負版權等法律責任。
- 如涉及作品內容、版權等問題，請在作品發表之日起一周內與本網聯系，否則視為放棄相關權利。
