V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
muunala10221
V2EX  ›  OpenAI

纯主观感受 gpt4 最近一个月笨的离谱

  •  
  •   muunala10221 · 293 天前 · 6813 次点击
    这是一个创建于 293 天前的主题,其中的信息可能已经有所发展或是发生改变。

    不知道为啥 好崩溃🙃

    79 条回复    2023-11-28 20:53:09 +08:00
    muunala10221
        1
    muunala10221  
    OP
       293 天前
    结合上下内容,详细的解释下 checkChange 函数作用

    我发给了他一大串代码 ,问他上面这个问题,他的回答是:xxxxxx, 关于 checkable 这个 API ,Element UI 的 el-tree 组件并没有直接提供,而是通过 show-checkbox 属性启用复选框。所以,你在这段代码中看不到 checkable 这个 API 是正常的。
    muunala10221
        2
    muunala10221  
    OP
       293 天前
    我看到的时候满脸问号,这个 checkable API 是我大概十几个问题前问的,于是我又问:

    你在说什么 我问的是 :结合上下内容,详细的解释下 checkChange 函数作用


    他回答: 对不起,我之前可能误解了您的问题。现在让我们一起看一下 checkChange 函数可能的作用。请注意,我需要更多的上下文信息来提供一个准确的解答,因为函数的作用可以根据上下文和具体的代码实现大不同。但基于函数名,我可以提供一个通常的解释。

    一般来说,checkChange 可能是一个函数,用于检测某种事物(如变量、数据结构、对象属性等)是否发生了改变。例如,在一个动态网页中,可能会有一个 checkChange 函数用于监测用户的输入是否发生了改变,或者在一个游戏中,可能会有一个 checkChange 函数用于检测游戏状态是否有所改变。

    checkChange 函数通常会比较一个对象的当前状态和它的上一个状态,然后返回一个值表示是否发生了改变。这个返回值可能是布尔值( true 表示发生了改变,false 表示没有发生改变),也可能是其他类型的值。

    如果您提供了更具体的代码片段或上下文,我将能够提供更准确的解答。







    至此我已经彻底无语了 , 我问: 上面不是提供给你代码了吗?
    ChatGPT:
    对不起,我的回应并未完全反映出之前的信息。我应该更详细地解释一下 checkChange() 函数在这段代码中的作用。


    然后开始真正回答我的问题 😓
    muunala10221
        3
    muunala10221  
    OP
       293 天前
    更新一下,即使我这样问,他还是没有正面回答我的问题,又回答了一个不知道什么的答案,彻底崩溃 换了 3.5 ,答案基本符合预期
    alexwu
        4
    alexwu  
       293 天前
    虽然官方说没改过,但是我感觉绝对有东西调整过。
    比如现在官网 gpt4 问爱莲说作者已经会开始乱说,但是 gpt-4 api 暂时还正常
    muunala10221
        5
    muunala10221  
    OP
       293 天前
    @alexwu 刚问了一下 GPT4 爱莲说作者是谁

    GPT4: 《爱莲说》是中国当代作家周国平的作品。这是一本关于 19 世纪爱尔兰作家詹姆斯·乔伊斯的女儿露西亚·乔伊斯的传记,其中周国平用非常深情的语言描述了露西亚的人生和她与父亲的关系。这本书对露西亚的悲剧性一生进行了深入的挖掘,包括她的精神疾病和在父亲作品中的影子。
    muunala10221
        6
    muunala10221  
    OP
       293 天前
    我:你回答错误

    GPT4: 对不起,我犯了一个错误。《爱莲说》是由韩国作家洪南洙所著,这是一本以植物为主题的散文集,其中对生活中的细微之处进行了深入而诗意的探讨。再次为我之前的错误答案向您道歉。
    muunala10221
        7
    muunala10221  
    OP
       293 天前
    在我反复问的情况下,gpt4 一共回答了:周允晓, 直木三十五,周国平,洪南洙 这些作家。
    muunala10221
        8
    muunala10221  
    OP
       293 天前   ❤️ 1
    去找了个套壳 gpt4 api 的网站,充值了点钱,一问爱莲说作者,是正确回答。。百分百被调整了,好恶心
    Stoney
        9
    Stoney  
       293 天前 via iPhone
    @muunala10221 也就是说网页版可能是假的?
    bluetree2039
        10
    bluetree2039  
       293 天前
    有其他 v 友 验证吗?
    plus 用户花钱了,还享受错误的东西~~

    api 范围便宜的,对于用的比较少的用来说。
    YooboH
        11
    YooboH  
       293 天前
    我问 gpt4 爱莲说作者是谁,他也回答的是周国平...
    suzic
        12
    suzic  
       293 天前 via Android
    现代作家周国平、朱自清、台湾作家三毛。在我提示了中国古人写的后,才说出了“清代文人周敦颐”,我无语了。GPT-4
    DABOBO
        13
    DABOBO  
       293 天前
    确实垃圾了,很多回答还不如 3.5
    bluetree2039
        14
    bluetree2039  
       293 天前
    我用 gpt4 api 问了 2 次都说错:抱歉,刚才的回答出现了错误。《爱莲说》的作者是清代文学家、诗人、散文家、诗词评论家、书画家、文艺理论家、政治家和外交家赞善诗的作者周敬之。

    tmd gpt4 还能用吗?
    bluetree2039
        15
    bluetree2039  
       293 天前
    网页上 gpt3.5 第一次回答就是 对的,为啥呢~~~
    edinina
        16
    edinina  
       293 天前 via iPhone
    直接给我发了个白居易
    locoz
        17
    locoz  
       293 天前
    @muunala10221 #2 “这个 checkable API 是我大概十几个问题前问的”
    十几个问题前的东西早就被丢弃了,你该不会用到现在还不知道有上下文 Token 数量上限吧...而且 ChatGPT 网页的限制比 API 限制更严格些,GPT4 API 有标称 8K 的 Token 上限,而网页版大概只有 6K 左右。
    locoz
        18
    locoz  
       293 天前
    #17 少复制了一句:“结合上下内容,详细的解释下 checkChange 函数作用”
    “这个 checkable API 是我大概十几个问题前问的”
    十几个问题前的东西早就被丢弃了,你的代码它估计都不记得了,只记得个问 checkable 的时候的部分。

    @muunala10221 #3
    “至此我已经彻底无语了 , 我问: 上面不是提供给你代码了吗?”、“即使我这样问,他还是没有正面回答我的问题,又回答了一个不知道什么的答案”
    因为已经丢弃代码内容,所以没法回复正确。

    “换了 3.5 ,答案基本符合预期”
    你换的时候应该是重新输入了代码,并且直接进行了提问,在没有出现逻辑性问题的情况下,答案当然是符合预期的。
    locoz
        19
    locoz  
       293 天前
    ChatGPT 是有给模型预输入一些系统消息的,而 API 本身不会,全看你使用的套壳网站那边怎么设置。所以像《爱莲说》作者这个问题,可能是系统消息调整后产生的影响,让 AI 出现了幻觉现象,而不是模型本身的问题。(有些文字或文字组合就是更容易让 GPT 出现幻觉现象、开始抽风,而且表面上也看不出描述有啥问题)

    另外,OpenAI 时不时地就会对 ChatGPT 上给模型输入的系统消息进行调整,注意观察就会发现。比如以前模型不知道当前日期,而某一天之后又突然知道了;比如以前如果没有进行要求,输出长 markdown 代码块时偶尔会抽风,但后面突然又能比较稳定地包裹内容了;还有像让继续编写代码的时候也是,以前如果没有进行要求,在说了继续之后,模型可能会先说一堆废话或者从头输出,但后面基本可以稳定从断开处继续了。

    @alexwu
    @muunala10221
    @Stoney
    @YooboH
    @suzic
    @bluetree2039
    @edinina
    k2wang
        20
    k2wang  
       293 天前
    网页端 gpt3.5
    提问:爱莲说作者是谁
    第一个回答:白居易......
    第二个回答:宋代文学家林则徐......
    alexwu
        21
    alexwu  
       293 天前
    @k2wang 3.5 这样是正常的,3.5 一般第一次问是白居易。然后如果你说错误,它会一直"很抱歉,答案应该是 XXX"继续给错误的答案。
    以前 4.0 无论是 api 还是官网,都是稳定说是周敦颐,可能的确改过 temperature 或者 system prompt 吧
    chiaf
        22
    chiaf  
       293 天前
    3.5 网页版现在也不咋滴,今天在 chatGPT 网页上让总结一个连接的内容,这个功能居然给砍了🤯,不知道在搞啥
    bluetree2039
        23
    bluetree2039  
       293 天前
    api 4 ,我把 temperature 设置为 0.5 , 第一次回答就正确了。

    之前 api 4 ,问了 2 次 胡说八道。
    suisetai
        24
    suisetai  
       293 天前 via iPhone
    @alexwu 如果你要爱莲说原文的话错的更离谱 都不知道现在怎么会变的这么蠢了…… gpt3.5
    suisetai
        25
    suisetai  
       293 天前 via iPhone
    而且它还会给你加东西 比如我要白居易的卖炭翁 他在结尾后面会多给你加几句 要不是我记得原文 就被误导了..
    isbase
        26
    isbase  
       293 天前
    我也感觉 GPT4 最近变笨了,有时候换 3.5 反倒结果更好
    infun
        27
    infun  
       293 天前
    兄弟,感觉你被套壳网站给骗了呀

    我刚试了 GPT4

    “-- 爱莲说作者是谁

    《爱莲说》的作者是宋代著名文学家、诗人、书法家、政治家、理学家周敦颐(宋代,1017 年- 1073 年)。这篇文言文短篇描绘了作者对荷花的赞美,以及荷花品质的寓意。周敦颐通过对荷花的描写,表达了自己崇高的品质和理想,这篇文章被誉为中国古代散文的瑰宝。”
    locoz
        28
    locoz  
       293 天前
    @chiaf #22 3.5 一直就不支持访问网页,只有付费且被开通了功能的才能访问网页。你以前可以让它总结,可能只是因为 URL 里带了一些描述信息,剩下的内容它全都自己编了。
    locoz
        29
    locoz  
       293 天前
    @chiaf #28 只有付费且被开通了功能的( GPT4 )才能访问网页
    ybluestc
        30
    ybluestc  
       293 天前 via Android
    用的 poe ,《爱莲说》是清代文学家**周敦颐**( 1017 年- 1086 年)创作的一篇描写荷花美德的散文名篇。周敦颐是北宋哲学家、文学家和书画家,他是宋明理学的创始人之一,对后世思想和文化产生了深远的影响。《爱莲说》以荷花为主题,通过对荷花品质的赞美,表达了作者对品德高尚的追求和对清洁廉正的价值观的推崇。这篇文章以其优美的文采和深刻的寓意,成为了中国古典散文的佳作。
    orangeD
        31
    orangeD  
       293 天前
    我试了下爱莲说作者的问题,网页版 GPT4 回答确实差很多,重复了多次没有一次是对的。API 版的要好,第一次说是清代的周敦颐,朝代错了,但第二次就完全对了。

    奇怪的是,我又试了下问其他几篇中国古文的作者,如《桃花源记》《卖炭翁》《岳阳楼记》《滕王阁序》等,网页版 GPT4 又能答对了,当然 api 回答也是对的。感觉网页版的输出内容比 api 版会多一些,更发散一些,或许是因为设置的 tempture 不一样?

    岳阳楼记的作者
    网页版 GPT4:《岳阳楼记》是中国南宋文人范仲淹的一篇散文。这篇文章是范仲淹在被任命为岳州的临时主管时写的,表达了他对国家前途的关心和忧虑,也展示了他的高尚品质和坚定的信念。这是中国古代散文的代表作之一,被誉为“骈文之冠”。
    API 版 GPT4:岳阳楼记的作者是宋代著名文学家、政治家范仲淹(范忠信)。

    《滕王阁序》的作者
    网页版 GPT4:《滕王阁序》是中国唐朝时期文人王勃的一篇骈文,被誉为“骈文四绝”之首。王勃在这篇文章中用深情厚意的文字表达了他对官场生活的厌倦以及对个人未来的担忧,并且为后世提供了他的诗歌创作的理论——"诗中有画,画中有诗"。
    API 版 GPT4:《滕王阁序》的作者是唐代文学家、政治家王勃。王勃( 649-676 年)是中国唐朝初年著名的文学家,与杨炯、卢照邻、骆宾王并称为“初唐四杰”。
    bojackhorseman
        32
    bojackhorseman  
       293 天前 via iPhone
    用英语问的问题我总是无条件相信 chatGPT ,但用中文问到古诗词就发现它开始瞎编乱造了,让我很失望😞
    bojackhorseman
        33
    bojackhorseman  
       293 天前 via iPhone
    @bojackhorseman 有种你关注的某个知识分享 up 主终于说到你的专业时的感觉🤣
    Free3
        34
    Free3  
       293 天前 via iPad
    iOS 客户端 也感觉比以前笨了。 没有刚开始那种 有问必答的感觉了 不知道是不是错觉。说了很多遍分段回答 就是听不懂 以前从来没有发生过。
    lloovve
        35
    lloovve  
       292 天前 via iPhone   ❤️ 1
    韭菜以割完。真人 gpt 已经下线
    zzNucker
        36
    zzNucker  
       292 天前
    @infun 楼主说的是对的,我好几天前就发现这个问题了,PLUS 的网页版已经不会回答正确的答案了,但是 POE 这种使用 GPT4 API 的网站还是正确的

    你如果是这个答案肯定不是官网的网页版 GPT4
    dawn009
        37
    dawn009  
       292 天前
    大家觉得是什么原因导致的?用户太多算力不够分了?
    oyzheng
        38
    oyzheng  
       292 天前 via iPhone   ❤️ 1
    我试了一下,也是非常垃圾,用 plus 回答竟然说是周慧敏,确实崩溃,已经不是以前的那个 plus 了,
    clasd2012
        39
    clasd2012  
       292 天前 via Android
    看 openai 网站的接口返回,gpt-4 的最大 token 才 4k ,gpt3.5 都有 8k
    CatBoy
        40
    CatBoy  
       292 天前
    有没有可能被其它 AI 投毒了。
    tulongtou
        41
    tulongtou  
       292 天前
    @CatBoy 被其他 AI 夺舍了
    registerrr
        42
    registerrr  
       292 天前
    不知道是不是错觉,最近一段时间 new bing 也变成蠢比了. 完全没有 1,2 个月前的好用, 同一个问题, 2 个月前回答的像一个先生, 现在的回答像一个弱智
    ql562482472
        43
    ql562482472  
       292 天前
    gpt 不是可以分享链接么 你把链接分享出来啊
    xu11111111
        44
    xu11111111  
       292 天前
    我猜测是学习了太多的垃圾知识了,好像现在会把对话用来训练 gpt ,然后爱莲说天天那么多人问,gpt 被带歪了
    而且感觉联网的 gpt4 更弱智一点
    hxtheone
        45
    hxtheone  
       292 天前 via iPhone
    试了一下 Poe ,GPT4 能给出作者是周敦颐,反倒是 GPT3.5 回答了个白居易
    oszlso
        46
    oszlso  
       292 天前
    同样的感觉,刚出来的时候很惊艳,现在越来越难用,有时给它明确的指令也不按要求答复
    PerrYhaine
        47
    PerrYhaine  
       292 天前
    很明显的,openai 不行了。小公司就是小公司,之前连 app 都做不好,不指望他能有什么多大突破了。
    xuelang
        48
    xuelang  
       292 天前
    我最近一直在用,没有觉得有任何退化。反而越来越惊艳:

    [GPT4 解 Leetcode 题目:最大连续湍流子序列和]( https://selfboot.cn/2023/06/09/gpt4_leetcode_978/)
    [神奇 Prompt 让 GPT4 化身物理老师]( https://selfboot.cn/2023/05/31/gpt4_tutor_physics/)
    ThomasKim
        49
    ThomasKim  
       292 天前
    @hxtheone 我的 poe 也是一样,4.0 一次答对,但是 3.5 第一次也是秒答白居易,告诉他错了,然后回答的就跟 4.0 一样了。老哥你的 4.0 是不是速度比 3.5 慢很多,我这边 poe ,3.5 回答基本上都是秒回,4.0 就跟一边有人在打字回复你一样,贼慢。
    openliucongbx
        50
    openliucongbx  
       292 天前   ❤️ 1
    @ThomasKim 是的 3.5 速度快
    4.0 非常慢
    naminokoe
        51
    naminokoe  
       292 天前
    我用官方网页版免费账户(估计是 3.5 ?)问:《爱莲说》的作者是谁?。回答:周敦颐。正确
    FACEB00K
        52
    FACEB00K  
       292 天前
    坏了坏了,真坏了
    >>>《爱莲说》的作者是谁

    >>>《爱莲说》的作者是中国的著名作家周国平。这本书是他的散文集,以周国平对人生和文化
    的独特见解和深邃思考而著称。

    >>> 它的作者姓周,但不叫周国平

    >>> 对不起,我在之前的回答中犯了一个错误。《爱莲说》的作者实际上是周濂渊,他是中国清
    朝末年的一位著名的翻译家、散文家。周濂渊的作品主要关注中国社会和文化,尤其是他对
    于西洋文化的翻译和引进,对中国近代史产生了重要影响。
    57ing
        53
    57ing  
       292 天前 via Android
    用官方 gpt4 提问,回答张爱玲,只有用 web 插件,指定 gpt4 上网查询答案才能有正确的回复。
    FACEB00K
        54
    FACEB00K  
       292 天前
    @FACEB00K GPT4 API:
    《爱莲说》是清代著名文学家、诗人、散文家、翻译家、书法家、画家、戏曲家、文艺理论家、文学评论家、文史学者、教育家、政治家、外交家、民族英雄、思想家、烈士、人文学者、社会活动家、文化名人、国士无双的周敦颐所著。这篇散文赞美了莲花的品质,表达了作者对美好品质的追求。
    x2ve
        55
    x2ve  
       292 天前
    之前有人说人为降智了 忘记在 V 站还是哪看到的,4 月多开始调整的
    x2ve
        56
    x2ve  
       292 天前
    另外也提到对少量行业没有降智 当时是说的猜测 我以为是图一乐
    zushi000
        57
    zushi000  
       292 天前
    应该有这个问题 还很广泛.openai 还回应了最近 gpt4 变笨得问题.https://cutt.ly/OweStIBh

    https://web.archive.org/web/20230601163710/https://humanloop.com/blog/openai-plans
    liu938651469
        58
    liu938651469  
       292 天前
    要不试试 claude 100k
    cest
        59
    cest  
       292 天前
    llm 是 template 产生器,
    怎么都拿来当百科用?
    ZRS
        60
    ZRS  
       292 天前
    对比了 ChatGPT 和 GPT-4-0314 的回复,确实在爱莲说这个问题上,前者的回答是错误的,后者作为参数固定的模型,使用 API 调用的时候回复正确且稳定。可能确实 OpenAI 在偷摸调整什么
    chiaf
        61
    chiaf  
       292 天前
    @locoz 不是哦,前段时间是可以的。因为我先是在 Claude 上试了试网页总结的功能,发现可以,就在 chatgpt 上试了试,发现也可以。
    hxtheone
        62
    hxtheone  
       292 天前 via iPhone
    @ThomasKim 我这儿 GPT4 一直都不快
    Time2
        63
    Time2  
       292 天前
    网页版 3.5

    第一次:《爱莲说》是一首中国古代诗歌,其作者是唐代诗人张若虚。张若虚是唐朝晚期的文学家,他的诗作以含蓄深远、意境优美而闻名。《爱莲说》被视为他的代表作之一,表达了对莲花的赞美和对自然之美的感悟。这首诗以其独特的艺术魅力和意境深远而被广泛传诵。

    新开 chat 再问一次:《爱莲说》是中国南宋时期文学家林则徐创作的一篇散文。林则徐( 1785 年-1850 年)是清朝末年的政治家、文学家和诗人,他是中国近代史上有重要影响的人物之一。《爱莲说》是他的代表作之一,以描写莲花的美丽和品德高尚而闻名,被视为中国文学史上的经典之作。
    iloveoovx
        64
    iloveoovx  
       292 天前
    估计审核进一步加强了吧。审核加强人会变笨,AI 也一样
    Aloento
        65
    Aloento  
       292 天前
    @chiaf #61 啊?
    goodokgood1
        66
    goodokgood1  
       292 天前
    3.5API:《爱莲说》的作者是唐代诗人白居易。

    chatgpt 官方网页:《爱莲说》是一首古代诗歌,它的作者是唐代文学家兼政治家曹操( 155 年-220 年)。曹操是中国历史上著名的政治家、军事家和诗人,他在三国时期扮演了重要的角色。《爱莲说》是他的代表作之一,描述了他对莲花的赞美和对人生的思考。

    一本正经地胡说八道
    BaseException
        67
    BaseException  
       292 天前
    我用 3.5-turbo 测试了下

    ---

    # 《爱莲说》的主题是“爱莲

    ## 来自你的消息:

    《爱莲说》的作者是谁?

    ## 来自 ChatGPT 的消息:

    《爱莲说》的作者是唐代诗人白居易。

    ## 来自你的消息:

    你确定?

    ## 来自 ChatGPT 的消息:

    抱歉,我的回答有误。《爱莲说》的作者是宋代文学家周敦颐。感谢您指出错误。

    ## 来自你的消息:

    这次好像是对的,我帮你确认了下

    ## 来自 ChatGPT 的消息:

    非常感谢您的确认,希望我能够为您提供准确的信息。如果您有其他问题或疑问,请随时向我提问。
    wdhwg001
        68
    wdhwg001  
       292 天前 via iPhone
    想到一个很简单的原因:

    OpenAI 需要更多的数据。

    所以他们人为地提高了 temperature ,然后观察用户对胡说八道的反馈,从而采集这些反馈用于降低模型整体的幻觉。

    然后因为 api 是真金白银的,所以这种小动作只能用于网页版本。
    youthfire
        70
    youthfire  
       291 天前 via iPhone
    我时常用 gpt4 做翻译。最近翻译质量下降确实下降非常严重,不管是中译英还是英译中,通顺性连以前的 3.5 turbo 都不如。但大多数时间都是用的网页版,没有对比过 api 质量。
    pcvc
        71
    pcvc  
       291 天前
    每一次的答案也不尽相同的,套壳程序是调 API 的,结果也会不一样,有很多参数可调节的,估计官方会根据实际情况调节参数以适时控制成本和服务器压力吧,我自己也搭一个国内可直接用的( gpt-3.5 ): https://chat.pcvc.net
    ViolaH
        72
    ViolaH  
       291 天前 via iPhone
    我问了下告诉我是张爱玲
    chris555
        73
    chris555  
       290 天前
    算力不够了
    usedTo404
        74
    usedTo404  
       290 天前
    盲猜又有一大堆抨击楼主,”不是 ai 的问题,是你不会用 ai ;未来缺的是会用 ai 的人“
    GL8885
        75
    GL8885  
       289 天前 via Android
    我认为,应该是 ai 为了节约算力,自动把一些任务分类区别对待了。这些任务分配太多算力也没用,不如识别这些任务,然后让模型随便答一下拉倒。
    changhong8
        76
    changhong8  
       289 天前 via iPhone
    两个月前就发现了,无论是文章、历史还是歌曲,这些文科类的一问就开始胡说八道,屡试屡爽。
    aiqinxuancai
        77
    aiqinxuancai  
       289 天前
    reddit 有一篇讨论,说是实际上模型降级了
    谷歌搜?model=text-davinci-002-render-sha 第一个结果,看快照
    Rnreck
        78
    Rnreck  
       121 天前
    @YooboH #11 。。。。。现在 3.5 回答是周邦彦,4 回答是
    《爱莲说》是由清代文学家周敦颐所作。这篇文章通过赞美莲花的高洁品格,寓意了作者对高尚人格的追求和赞美。周敦颐在这篇文章中用莲花作比喻,表达了他的哲学思想和审美情趣。
    Rnreck
        79
    Rnreck  
       121 天前
    @zzNucker #36 我现在问 4 回答是,,,,
    《爱莲说》是由清代文学家周敦颐所作。这篇文章通过赞美莲花的高洁品格,寓意了作者对高尚人格的追求和赞美。周敦颐在这篇文章中用莲花作比喻,表达了他的哲学思想和审美情趣。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1259 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 94ms · UTC 17:54 · PVG 01:54 · LAX 10:54 · JFK 13:54
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.