编辑：桃子 拉燕

【新智元导读】ChatGPT又有什么错呢？美国律师向法院提交的文件中，竟引用了6个根本不存在的案例，反倒惹祸上身被制裁。

ChatGPT，真的不可信！

在美国近来的一起诉讼案件中，一位律师帮原告打官司，引用了ChatGPT捏造的6个不存在的案例。

法官当庭指出，律师的辩护状是一个彻头彻尾的谎言，简直离了大谱。

然而，律师为自己辩护中，甚至提交了和ChatGPT聊天截图的证据。

显然，ChatGPT称「这些案例都是真实存在的」。

本为原告打的官司，自己竟惹祸上身，将受到制裁，这波操作瞬间在网上引起轩然大波。

毕竟，GPT-4刚诞生时，OpenAI放出它在律师资格考试（UBE）的成绩，还拿到了90分。

网友警告，千万不要用ChatGPT进行法律研究！！！

这件事情再次体现了一个很重要的事实，那就是用完ChatGPT必须用其它来源进行双重，甚至三重查证。

而AI模型在信息输入上出现重大事实错误已经不是第一次了，谷歌的Bard也遇到过这种问题。

90分？GPT-4成绩被夸大

还记得GPT-4刚刚发布那天，「小镇做题家」在各项考试指标上接近满分的水平。

尤其，在美国统一律师资格考试（UBE）中，GPT-4可以拿到90%水平，而ChatGPT（GPT-3.5）也仅拿到10%的分数。

但是，没过多久，来自MIT的研究人员Eric Martínez发了一篇论文，重新评估了GPT-4在Bar考试中的表现。

论文直言，GPT-4的律师考试成绩被夸大了。

值得注意的是，这些考生都是复读生，不难理解，他们的分数可能会更差。

Zero提出了一个很有建设性的提议，那就是：以后ChatGPT再举事例，后面得附上来源链接。

Tricorn认为，这位原告律师不应该把锅扔给ChatGPT，是他自己用错了。应该是把事例当作prompt的一部分输入进去，然后让ChatGPT填补中间缺环的论证部分。

这就是活灵活现的证据。ChatGPT等人工智能工具做人类的工作，真的是可能直接导致我们的大灾难。

对于ChatGPT这个表现，你怎么看？

参考资料：

https://www.theverge.com/2023/5/27/23739913/chatgpt-ai-lawsuit-avianca-airlines-chatbot-research

https://www.nytimes.com/2023/05/27/nyregion/avianca-airline-lawsuit-chatgpt.htm