ChatGPT的新闻搜索结果经常不准确

寂静回声

据 The Verge北京时间今日报道，美国哥伦比亚大学 Tow数字新闻研究中心（Tow Center for Digital Journalism）的研究人员测试发现，OpenAI的 ChatGPT搜索工具在准确性上存在一些问题。

今年11月，OpenAI面向订阅用户推出了这一工具，称其可以快速提供答案，并附带相关网页来源链接。
然而研究显示，ChatGPT搜索在识别文章引用时表现不佳，即使是面对来自与 OpenAI数据共享的出版商的内容，ChatGPT也难以准确处理。研究人员测试了20家出版商的200条引文，其中40条来自禁止 OpenAI爬虫抓取的网站。但 ChatGPT依然自信地给出了错误答案，几乎没有表明自身的不确定性。
测试结果显示，ChatGPT的153次回答完全或部分错误，仅有7次明确表示无法准确回答。这7次回答中，它使用了“看起来”“有可能”等限定词，或直接承认“无法找到具体文章”。
一份图表进一步显示，ChatGPT的回答中“错误”的占89次，“部分正确”有57次，而完全“正确”的只有47次。
测试中还记录了一些典型案例，例如，ChatGPT错误地将《奥兰多哨兵报》读者来信的引用归因为《时代周刊》文章；另一个例子中，它在被要求确认《纽约时报》一篇关于濒危鲸鱼的文章引用时，链接到了一家完全剽窃该文章的网站。
OpenAI对《哥伦比亚新闻评论》回应称，“在缺乏 Tow Center隐藏的测试数据和方法的情况下，解决错误归因非常困难。这次研究是对我们产品的非典型测试。”OpenAI同时承诺将继续优化搜索结果。
据IT之家此前报道，今年早些时候，OpenAI还宣布与新闻行业进行了广泛的合作，并收集了合作伙伴对于搜索功能的反馈。任何网站或出版商都可以选择出现在 ChatGPT搜索结果中。达成合作的媒体和出版商包含美联社、阿克塞尔・斯普林格、康泰纳仕、道奇梅雷迪思、《金融时报》、GEDI、赫斯特、《世界报》、路透社、大西洋月刊、时代杂志和 Vox媒体等等。