准确率近乎瞎猜!ChatGPT官方检测工具悄悄下架

日期:2023-07-26 来源:手游巴士 作者:佚名

没有公告,OpenAI悄然关闭了AI文本检测工具,页面直接404了。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

官方对此没有公开回应,几天后才有人找到一则简短说明,藏在半年前工具发布的博客页面中。

……AI检测器由于准确率较低而不再可用……我们正在研究更有效的文本检测技术,并承诺开发音频和视觉检测技术。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

对于CloseAIOpenAI不发公告就杀死一个产品这种行为,很多网友是不满意的。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

但是对关闭AI检测器本身倒是有不少人表示赞同,特别是学生群体。

太多老师相信这玩意有效,大量冤枉学生用AI作弊,已经变成了一场猎巫运动。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

准确率和瞎猜差不多

这个官方检测工具,准确率究竟有多低呢?

OpenAI自己给出的数据,只能正确识别26%的AI生成文本,同时冤枉9%的人类编写文本。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

1月份刚发布时就被网友总结为“和瞎猜差不多”。

另外有人做过实验发现,市面上各种检测工具会把圣经、美国宪法等历史文本都被判定可能为AI编写,总不能写下这些内容的历史人物都是时间穿越者吧?

但还是有很多老师试图用各种检测方法来检查学生作业。

最著名的一次,得克萨斯农工大学一位教授差点判定半个班的学生延毕。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

目前最新的趋势是,教师要求学生用在线文档写作业并检查编辑记录,但聪明的学生也能找到规避办法。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

最终对于教育领域,有人提出可能大作业/课程论文将成为历史,闭卷考试或口语考试将成为主流。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

目前的检测方法都能规避

网友指出,OpenAI同时开发生成和检测工具本身就是矛盾的。

如果一边做的好就意味着另一边没做好,同时还有可能存在利益冲突。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

但是第三方开发的检测方法,可靠性也不高。

最早被称为“ChatGPT克星”的是普林斯顿本科生Edward Tian开发的GPTZero,用复杂性和长短句的变化来衡量文章是否由AI生成。

当时GPTZero计划专为教育工作者打造,老师可以把全班学生的作业丢进去检测。

但到了7月份,作者承认已放弃了检测学生作弊这个方向,计划下个版本的GPTZero将不再检测文本是否由AI生成,而是突出最像人写的部分。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

另外一个很受关注的检测方法,是马里兰大学开发的水印法,要求大模型在生成文本的时候就藏下记号,并用统计方法识别。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

但是规避的办法也很简单,比如有人开发了简单的同义词替换工具,就能破坏统计特征。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

甚至有人开始怀疑,人们到底是为了什么非要区分这个。

就像数字到底是人计算的还是计算机完成的,早就没人在意了。

演讲者的稿是自己写的还是秘书写的,不是也没人在意吗。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

人类行为学研究,正在用AI充当被试

无法区分AI和人类的内容,似乎也不全是坏事。

已经有心理实验用AI代替人类被试加速研究了。

Cell子刊上一篇文章指出,在精心设计的实验场景中,ChatGPT的反应与大约95%的人类参与者的反应呈相关性。

并且机器被试不会疲倦,使科学家能以前所未有的速度收集数据并测试有关人类行为的理论。

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

而在最近一篇Science主刊的观点文章上,滑铁卢大学心理学教授Igor Grossman认为:

“人工智能可以改变社会科学研究的游戏规则,谨慎的偏见管理和数据保真度是关键。”

准确率近乎瞎猜!ChatGPT悄悄下架官方检测工具

参考链接:

[1]https://twitter.com/KevinAFischer/status/1683898199981928450

[2]https://www.reddit.com/r/ChatGPT/comments/159j8rc/openai_quietly_kills_its_own_ai_classifier_citing/

[3]https://news.ycombinator.com/item?id=36862850

[4]https://www.cell.com/trends/cognitive-sciences/fulltext/S1364-6613(23)00098-0

[5]https://www.science.org/doi/10.1126/science.adi1778

[6]https://theconversation.com/beyond-the-hype-how-ai-could-change-the-game-for-social-science-research-208086

责任编辑:落木

上一篇:金华站竟有网约车候车厅 实时显示到场车辆!网友:建议全国推广

下一篇:能越野的城市SUV!新款哈弗大狗上市:顶配才有副驾电动调节

相关推荐

Adobe全力冲刺人工智能!员工:自掘坟墓

7月26日消息,今年早些时候,设计行业巨头Adobe宣布,推出AI图像生成工具Firefly,帮助用户通过简单的文本描述修改或生成图形。 对于Adobe这一积极备战人工智能的行为,一些Adobe员工

售价超1.6万!三星Galaxy Z Fold5图赏:7.6英寸大屏幕堪比iPad mini

7月26日晚,三星Galaxy Z Fold5正式发布,起售价是1749英镑(256GB版本,约合人民币16200元),1TB顶配版定价2049英镑(约合人民币18900元)。 这款新品采用全新铰链设计,折叠之后缝隙更小,展

7146元起!三星Galaxy Z Flip 5发布:副屏史上最大

7月26日消息,今晚19:00,三星在韩国首尔召开了Galaxy新品发布会,正式推出全新折叠屏——三星Galaxy Z Flip 5。 该机的整体方案依然不变,采用上下对折的小折叠设计,折叠

史上最大!特斯拉皮卡电池容量曝光 或将达到232kWh

7月26日消息,近日,国外网友根据特斯拉电动皮卡Cybertruck的电池规格进行估算,推算出了该车可能搭载的电池容量。 据悉,从特斯拉在官网公布的Cybertruck电池数据来看,第一代4680电

三星发布Galaxy Tab S9平板:升级二代骁龙8 顶配超1万元

7月26日消息,今晚的全球发布会上,三星除了推出Galaxy Z Fold 5及Flip5两款折叠屏手机之外,还发了新一代GalaxyTabS9系列平板,有11/12.4/14.6寸三款型号,升级二代骁龙8平台。 这三

查看更多