V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Taikyo  ›  全部回复第 1 页 / 共 4 页
回复总数  72
1  2  3  4  
对了,针对 4 楼的问题,我讲下我的理解,因为大语言模型回答的时候,是通过激活跟上下文相关的权重网络进行理解和回应的,并不是检索数据的过程,假设把 context 只针对本次 session 的参数,可能会有另一个问题,就是 context 如果是错误的,根据错误的权重网络,那么就会推导出错误的结果。
训练数据训练的过程其实不是记忆全部数据的过程,而是学习语言规律,用法,结构的过程,训练过程中会调整参数,在训练结束后,这些参数就是大语言模型的 “长期记忆”,而聊天的上下文,会传给大语言模型进行推理,找到权重相关的内容,然后组织出答案。上下文越多,关联的东西就越多,大语言模型需要进行更多的文本分析和激活更多的参数权重,所以就约束了参数的上下文长度。
上面那个是我跟 chagpt-4 一起交流出来的,然后梳理出来的我的理解,有错的欢迎交流指正
如果原文是英文的话,蹲个原文
同样用 2 楼那个字体,中文叫霞鹜文体
362 天前
回复了 sjmcefc2 创建的主题 程序员 想请教 windows 上如何阅读 epub?
@iloveoovx readwise
2023-03-26 22:48:02 +08:00
回复了 djyde 创建的主题 程序员 28 岁,我还想生猛下去
@zhaorunze 要不你分享下你的经历?
2022-02-02 13:32:38 +08:00
回复了 37Y37 创建的主题 生活 新年礼物
看了竟有些感动,楼主很幸福。祝新年快乐。
2022-01-28 12:26:20 +08:00
回复了 curiousjude 创建的主题 生活 不堪回首的 2020,曙光重现的 2021
加油
2022-01-26 23:11:34 +08:00
回复了 vcfghtyjc 创建的主题 程序员 有什么有趣的 side project 可以做?
@mirone 先 fork 看下。后面有问题我们交流下
2022-01-21 22:55:18 +08:00
回复了 vcfghtyjc 创建的主题 程序员 有什么有趣的 side project 可以做?
@mirone 这个看起来有点意思,请问怎么加入?
2021-12-18 09:32:29 +08:00
回复了 buubiu 创建的主题 macOS mac touch bar 闪屏了,怎么办啊,过保了, 16 年款
@buubiu 电池维修多少钱。
2021-12-17 19:40:50 +08:00
回复了 buubiu 创建的主题 macOS mac touch bar 闪屏了,怎么办啊,过保了, 16 年款
@buubiu 应该是过热。。
2021-12-17 00:00:00 +08:00
回复了 buubiu 创建的主题 macOS mac touch bar 闪屏了,怎么办啊,过保了, 16 年款
俺也一样,看看 V 友回复。
2021-11-13 19:34:44 +08:00
回复了 KamenReborn 创建的主题 奇思妙想 这个世界上,总有一些有远见卓识的人能够预知未来
给楼里一些人一个建议,别老是以一个固定的角度去看问题,就不能多想想别人的角度?多个角度看问题多点思路,老是一副怼天怼地的语气,实在是没有意思。
@locoz 有没有活跃的 roam 交流群分享下呢?
2021-09-01 22:40:43 +08:00
回复了 yazoox 创建的主题 React 看到一段代码, setTimeout(resolve, 0), 不是很明白用意?
加入宏任务,只是为了不让它被立刻执行,可以在下一个 event loop 去执行。
2021-08-30 23:50:55 +08:00
回复了 loveyou1 创建的主题 JavaScript 可视化布局
支持一个,感觉挺有意思的项目
2021-08-01 11:55:07 +08:00
回复了 wuxingli 创建的主题 上海 8000 一个月在上海能活下去吗?
@liyang5945 respect
2021-05-30 00:50:32 +08:00
回复了 vevlins 创建的主题 程序员 lowcode 是不是在断后人的路?
@vevlins 你在 164 楼对于 in-out 的看法,我深表同意,我感觉理清数据的映射,对于做 lowcode 就有很大帮助了。不过 lowcode 的应用范围,个人感觉是收窄的,只能在特定领域下的特定场景起作用,场景稍微有点变化,立刻就失效了,甚至修改还很困难。
1  2  3  4  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3323 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 53ms · UTC 12:31 · PVG 20:31 · LAX 05:31 · JFK 08:31
Developed with CodeLauncher
♥ Do have faith in what you're doing.