从大语言模型的角度谈学习是怎么回事
版主: Softfist
-
Caravel楼主
- 论坛元老

Caravel 的博客 - 帖子互动: 702
- 帖子: 27657
- 注册时间: 2022年 7月 24日 17:21
#1 从大语言模型的角度谈学习是怎么回事
大语言模型就是一个高维条件概率分布
人脑虽然具体实现机理不一样 但是结果是一样的
也是条件概率
所谓学习,就是对齐条件概率
看到书上一个推导看不懂
说明你的条件概率根据条件得到了A,或者B,书上却是C
这时候很痛苦 怎么回事 不能理解
这时候 不用担心 继续念书
和念经一样
等你的条件概率跟书本对齐了
你就懂了
这就是醍醐灌顶顿悟了
人脑虽然具体实现机理不一样 但是结果是一样的
也是条件概率
所谓学习,就是对齐条件概率
看到书上一个推导看不懂
说明你的条件概率根据条件得到了A,或者B,书上却是C
这时候很痛苦 怎么回事 不能理解
这时候 不用担心 继续念书
和念经一样
等你的条件概率跟书本对齐了
你就懂了
这就是醍醐灌顶顿悟了
-
pseudo(small man)
- 论坛点评

pseudo 的博客 - 帖子互动: 151
- 帖子: 2737
- 注册时间: 2022年 7月 28日 10:04
#3 Re: 从大语言模型的角度谈学习是怎么回事
你这是线性模型;真实世界里面,因为没有办法实现那么高维度的线性运算,需要进行化简。怎么化简就是个问题了,现在的人搞LLM瞎JB化简,其实化简的方法,进化论早就做进大脑里面了。Caravel 写了: 2025年 7月 8日 12:15 大语言模型就是一个高维条件概率分布
人脑虽然具体实现机理不一样 但是结果是一样的
也是条件概率
所谓学习,就是对齐条件概率
看到书上一个推导看不懂
说明你的条件概率根据条件得到了A,或者B,书上却是C
这时候很痛苦 怎么回事 不能理解
这时候 不用担心 继续念书
和念经一样
等你的条件概率跟书本对齐了
你就懂了
这就是醍醐灌顶顿悟了
-
huangchong(净坛使者)
- 论坛元老

2023-24年度优秀版主 - 帖子互动: 4158
- 帖子: 61440
- 注册时间: 2022年 7月 22日 01:22
-
Caravel楼主
- 论坛元老

Caravel 的博客 - 帖子互动: 702
- 帖子: 27657
- 注册时间: 2022年 7月 24日 17:21
#5 Re: 从大语言模型的角度谈学习是怎么回事
人脑还有些绝活大模型不会huangchong 写了: 2025年 7月 8日 13:08 还是不大一样 人的学习不需要把天下书都看尽了 人有种逻辑本能 会自己总结规律寻找逻辑自洽性
llm这样学习出来的 就是那种打吊针上大学的刷题家
但是大方向就是这样
#12 Re: 从大语言模型的角度谈学习是怎么回事
人类进化出逻辑,用了几亿年的时间,从草履虫开始。huangchong 写了: 2025年 7月 8日 13:08 还是不大一样 人的学习不需要把天下书都看尽了 人有种逻辑本能 会自己总结规律寻找逻辑自洽性
llm这样学习出来的 就是那种打吊针上大学的刷题家
大模型发展出逻辑,用了不到10年
-
huangchong(净坛使者)
- 论坛元老

2023-24年度优秀版主 - 帖子互动: 4158
- 帖子: 61440
- 注册时间: 2022年 7月 22日 01:22



