V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
ixx
V2EX  ›  OpenAI

这个是 gpt 一本正经的胡说吗?

  •  
  •   ixx ·
    iuv · 2023-05-16 13:54:39 +08:00 · 1740 次点击
    这是一个创建于 551 天前的主题,其中的信息可能已经有所发展或是发生改变。

    我知道 gpt 一直有在自己不了解的问题上胡说八道的习惯,但问技术问题回答的都还可以,这次他回答的也很棒,直到我按它回答的试了试,以下是问答(使用的 gpt3.5 模型):

    Imgur

    Imgur

    img

    看起来回答的很好,然后当我想试试的时候却怎么也找不到这个 zlib_decode 插件
    他给的链接: https://rubygems.org/gems/logstash-filter-zlib_decode 打开是 404
    google 里也搜索不到,所以这个是他胡说的吗还是真的有这个插件只不过现在没有人用了所以搜索不到了
    如果是它编的那以后再问技术上的问题 可怎么信啊

    11 条回复    2023-05-17 10:11:07 +08:00
    likunyan
        1
    likunyan  
       2023-05-16 13:55:55 +08:00
    第一天用它的时候,我就大概测试了准确率,大改 80%多
    6IbA2bj5ip3tK49j
        2
    6IbA2bj5ip3tK49j  
       2023-05-16 13:56:37 +08:00 via iPhone
    胡说的
    Biluesgakki
        3
    Biluesgakki  
       2023-05-16 13:58:08 +08:00
    搜不到就是假的呗 你自己肯定要去验证一遍的
    ixx
        4
    ixx  
    OP
       2023-05-16 13:59:40 +08:00
    @Biluesgakki 属实没想到他还贴心的给每一个 logstash 版本胡说了一个对应的插件版本😂
    Seulgi
        5
    Seulgi  
       2023-05-16 14:01:02 +08:00
    很多技术框架的答案他都是胡说的,特别是一些库 api ,实际上他指定的版本都不存在那个 api ,我不知道他去哪扒拉的模型。而且他的数据是基于 2021 年 9 月前。对于我目前经常问的一些问题,准确率可能只有 50-60%
    fiveStarLaoliang
        6
    fiveStarLaoliang  
       2023-05-16 14:22:10 +08:00
    之前就发现了,生造一个 github 的项目地址,看起来还像模像样的,结果点进去就是 404
    coyoteer
        7
    coyoteer  
       2023-05-16 14:23:36 +08:00
    语言模型的弊端就在于它永远判断不了自己是不是在胡说
    autoxbc
        8
    autoxbc  
       2023-05-16 14:37:32 +08:00
    用 GPT-4 好一点

    我就慢慢等着「语言模型党」最终承认这东西就是智慧生命体,十年为期
    aaronkk
        9
    aaronkk  
       2023-05-16 15:10:55 +08:00
    gpt 这方面都有短板,毕竟有些东西不是 21 年前的,它们学习不到,又不知道自己学习不到,就开始满嘴跑火车了,很多还胡编得像模像样,等你有这闲工夫一个个去验证了你会发现,还不如一开始就老老实实用谷歌呢。。。
    MelodyZhao
        10
    MelodyZhao  
       2023-05-17 09:15:03 +08:00
    编程类的还是用 GPT4 准确些
    ixx
        11
    ixx  
    OP
       2023-05-17 10:11:07 +08:00
    @aaronkk 嗯 以前问过一些大众化的问题 他回答的还行(应该是样本量大它真学习到了) 这次之后是不敢完全信了
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2664 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 00:32 · PVG 08:32 · LAX 16:32 · JFK 19:32
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.