论文作弊终结者:OpenAI推出反作弊工具,准确度99.9%

OpenAI面临着一个棘手的问题:如何应对学生使用ChatGPT进行作弊的行为?尽管该公司已经开发出一种可靠的方法来检测ChatGPT撰写的文章或研究报告,但出于对学生使用AI作弊的广泛担忧,这项技术尚未公开发布。

OpenAI已经成功开发出一种可靠的技术来检测ChatGPT生成的内容。这项技术通过在AI生成的文本中嵌入"水印",实现了高达99.9%的检测准确率。然而,令人费解的是,这项本可以解决燃眉之急的技术,却迟迟未能公开发布。据内部人士透露,这个项目已经在OpenAI内部争论了近两年之久,而且早在一年前就已经具备了发布的条件。

论文作弊终结者:OpenAI推出反作弊工具,准确度99.9%

阻碍这项技术发布的因素错综复杂。首先,OpenAI面临着一个两难的选择:是坚持公司的透明度承诺,还是维护用户的忠诚度?公司内部的调查显示,近三分之一的ChatGPT忠实用户对反作弊技术持反对态度。这一数据无疑给公司的决策带来了巨大压力。

其次,OpenAI担心这项技术可能会对某些群体,特别是非英语母语者,产生不成比例的负面影响。这种顾虑反映了AI伦理中的一个核心问题:如何确保AI技术的公平性和包容性?

然而,与此同时,教育界对这项技术的需求却日益迫切。据民主与技术中心的调查显示,59%的中学和高中教师确信学生已经在使用AI完成作业,这一比例较上一学年增长了17个百分点。教育工作者们急需工具来应对这一挑战,维护学术诚信。

OpenAI的犹豫不决引发了内部的争议。支持发布该工具的员工认为,与这项技术可能带来的巨大社会效益相比,公司的顾虑显得微不足道。这种观点凸显了技术发展与社会责任之间的张力。

技术本身也存在一些潜在的问题。尽管检测准确率很高,但仍有员工担心水印可能被简单的技术手段抹去,如通过翻译软件或人工编辑。这种担忧反映了AI技术在实际应用中面临的挑战。

此外,如何控制这项技术的使用范围也是一个棘手的问题。使用范围过窄会降低其实用性,而过广则可能导致技术被破解。这种平衡需要精心的设计和管理。

值得注意的是,其他科技巨头也在这一领域有所动作。谷歌已经开发出了检测其Gemini AI生成文本的水印工具SynthID,虽然目前仍在测试阶段。这反映了整个AI行业对内容真实性验证的重视。

OpenAI还优先考虑了音频和视觉水印技术的开发,尤其是在美国大选年。这一决策凸显了AI公司在技术开发中必须考虑更广泛的社会影响。

参考资料:https://www.wsj.com/tech/ai/openai-tool-chatgpt-cheating-writing-135b755a?st=ejj4hy2haouysas&reflink=desktopwebshare_permalink

 

声明:内容均采集自公开的网站等各类媒体平台,若收录的内容侵犯了您的权益,请联系邮箱,本站将第一时间处理。
资讯

OpenAI 联合创始人约翰·舒尔曼转投人工智能新创公司Anthropic

2024-8-6 9:27:10

资讯

OpenAI领导层大动荡!两个联合创始人一个离职、一个延长休假

2024-8-7 9:14:35

搜索