新未名空间

我曾经想AI的下一步要去掉back propagation。因为人类就没有back propagation。而且back propagation的开销太大。人类神经系统有很多feedback的通路，我曾经觉得应该用feedback替代back propagation。

人类确实没有back propagation，因为人类是野蛮生长的，它不需要类谁。

而AI是需要类人的。智能就是类人 - 这在人类的语境下几乎是一个tautology。而类人就需要back propagation。

我觉得应该有某种反馈机制，不是brute force

TheMatrix 写了： 2025年 2月 18日 17:59 我曾经想AI的下一步要去掉back propagation。因为人类就没有back propagation。而且back propagation的开销太大。人类神经系统有很多feedback的通路，我曾经觉得应该用feedback替代back propagation。

人类确实没有back propagation，因为人类是野蛮生长的，它不需要类谁。

而AI是需要类人的。智能就是类人 - 这在人类的语境下几乎是一个tautology。而类人就需要back propagation。

机器人不光是类人，也可以类狗，类苍蝇

地球人无法工作的就业环境以及无法达到的超能力，机器人可以


所以不要用“类人”来侮辱智能

TheMatrix 写了： 2025年 2月 18日 17:59 我曾经想AI的下一步要去掉back propagation。因为人类就没有back propagation。而且back propagation的开销太大。人类神经系统有很多feedback的通路，我曾经觉得应该用feedback替代back propagation。

人类确实没有back propagation，因为人类是野蛮生长的，它不需要类谁。

而AI是需要类人的。智能就是类人 - 这在人类的语境下几乎是一个tautology。而类人就需要back propagation。

前面说了一大堆（似乎是论据），但是感觉和最后一句（似乎是结论）之间没有什么关系。看不出来存在什么逻辑链条。

verdelite 写了： 2025年 2月 19日 11:17 前面说了一大堆（似乎是论据），但是感觉和最后一句（似乎是结论）之间没有什么关系。看不出来存在什么逻辑链条。

属实，基本上是胡说八道一通瞎摆弄概念

自然界的feedback机制太多了，backpropagation无非是对于参数的用梯度下降做feedback，换句话说，扩展维度把参数引入成状态的一部分就是普通的反馈控制机制

只用feedforward没有feedback的选择机制不存在。优胜劣汰本身就是在负反馈

（ヅ） 写了： 2025年 2月 19日 16:52 属实，基本上是胡说八道一通瞎摆弄概念

自然界的feedback机制太多了，backpropagation无非是对于参数的用梯度下降做feedback，换句话说，扩展维度把参数引入成状态的一部分就是普通的反馈控制机制

只用feedforward没有feedback的选择机制不存在。优胜劣汰本身就是在负反馈

优胜劣汰这个反馈太慢了，大脑可以学习，显然有更快的反馈机制

Caravel 写了： 2025年 2月 19日 17:22 优胜劣汰这个反馈太慢了，大脑可以学习，显然有更快的反馈机制

随机的变异，不合适的被淘汰了

verdelite 写了： 2025年 2月 19日 11:17 前面说了一大堆（似乎是论据），但是感觉和最后一句（似乎是结论）之间没有什么关系。看不出来存在什么逻辑链条。

“智能就是类人”是结论。back propagation是推论。

“智能就是类人”这个结论并没有推理过程，是我“想通”的。我也不能完全说清楚。

当然，你质疑的是back propagation这个推论是怎么推出来的。

当我“想通”了智能就是类人这个大结论之后，back propagation这个推论我感觉很自然了。但是好像还是一种信念的跳跃，虽然是小的跳跃。我再酝酿一下。

人的智能是创造。而机器的智能是类人。

TheMatrix 写了： 2025年 2月 18日 17:59 我曾经想AI的下一步要去掉back propagation。因为人类就没有back propagation。而且back propagation的开销太大。人类神经系统有很多feedback的通路，我曾经觉得应该用feedback替代back propagation。

人类确实没有back propagation，因为人类是野蛮生长的，它不需要类谁。

而AI是需要类人的。智能就是类人 - 这在人类的语境下几乎是一个tautology。而类人就需要back propagation。

back propagation的学习和人类的学习是不一样的。

back propagation实际上是快速重走人类几亿年的进化历史。学出来的结果，差不多相当于人类的裸脑。back propagation的开销是很大的，但是和人类几亿年的进化历史相比，这点开销真的是投机取巧了。

人类是在已经有了一个裸脑的情况下开始学习。人类出生就有一个裸脑。然后学习的过程并没有back propagation。因为人类并不存在模仿谁，我是说更高级的智慧生物。所以它就没有进化出back propagation的机制。人类的学习是事例的学习，很少量的。是一种试错试的学习。它也要改神经网络的weight，但是它不是back propagation式的改，而是试错式的改，也有一种反馈机制，但不是原路反馈。

人类的学习到底是个什么反馈机制，也许没有一种物理通路，就是试错。。。