这个是 gpt 一本正经的胡说吗？

2023-05-16 13:54:39 +08:00
 ixx

我知道 gpt 一直有在自己不了解的问题上胡说八道的习惯，但问技术问题回答的都还可以，这次他回答的也很棒，直到我按它回答的试了试，以下是问答（使用的 gpt3.5 模型）：

看起来回答的很好，然后当我想试试的时候却怎么也找不到这个 zlib_decode 插件
他给的链接： https://rubygems.org/gems/logstash-filter-zlib_decode 打开是 404
google 里也搜索不到，所以这个是他胡说的吗还是真的有这个插件只不过现在没有人用了所以搜索不到了
如果是它编的那以后再问技术上的问题 可怎么信啊

1801 次点击
所在节点    OpenAI
11 条回复
QKgf555H87Fp0cth
2023-05-16 13:55:55 +08:00
第一天用它的时候，我就大概测试了准确率，大改 80%多
6IbA2bj5ip3tK49j
2023-05-16 13:56:37 +08:00
胡说的
Biluesgakki
2023-05-16 13:58:08 +08:00
搜不到就是假的呗 你自己肯定要去验证一遍的
ixx
2023-05-16 13:59:40 +08:00
@Biluesgakki 属实没想到他还贴心的给每一个 logstash 版本胡说了一个对应的插件版本😂
Seulgi
2023-05-16 14:01:02 +08:00
很多技术框架的答案他都是胡说的，特别是一些库 api ，实际上他指定的版本都不存在那个 api ，我不知道他去哪扒拉的模型。而且他的数据是基于 2021 年 9 月前。对于我目前经常问的一些问题，准确率可能只有 50-60%
fiveStarLaoliang
2023-05-16 14:22:10 +08:00
之前就发现了，生造一个 github 的项目地址，看起来还像模像样的，结果点进去就是 404
coyoteer
2023-05-16 14:23:36 +08:00
语言模型的弊端就在于它永远判断不了自己是不是在胡说
autoxbc
2023-05-16 14:37:32 +08:00
用 GPT-4 好一点

我就慢慢等着「语言模型党」最终承认这东西就是智慧生命体，十年为期
aaronkk
2023-05-16 15:10:55 +08:00
gpt 这方面都有短板，毕竟有些东西不是 21 年前的，它们学习不到，又不知道自己学习不到，就开始满嘴跑火车了，很多还胡编得像模像样，等你有这闲工夫一个个去验证了你会发现，还不如一开始就老老实实用谷歌呢。。。
MelodyZhao
2023-05-17 09:15:03 +08:00
编程类的还是用 GPT4 准确些
ixx
2023-05-17 10:11:07 +08:00
@aaronkk 嗯 以前问过一些大众化的问题 他回答的还行（应该是样本量大它真学习到了） 这次之后是不敢完全信了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://tanronggui.xyz/t/940395

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX