前途是光明的,道路是曲折的# Programming - 葵花宝典
w*g
1 楼
要以平常心看待神经网络的突破。
这个突破其实已经长时间overdue了。
我坚信人脑等价于图灵机,我也倾向于认为目前
的集群计算能力已经能达到甚至超过人脑。
我也坚信未来是AI的。
(我觉得说意识依赖于人脑的某种量子机制是
扯淡。)不过我不觉得神经网络的突破能直接
导致generic AI。这个应该还需要若干个
理论突破。目前神经网络只是相当于视觉
中枢和听觉中枢,基本上没有思维和逻辑。
最终技术突破,我觉得还是要靠默默无闻的
人物,而不是现在牛x吹得震天响那批人。
下面这位我觉得就很了不起:
https://cis.temple.edu/~pwang/
具体怎么实现practical的AGI我非常感兴趣。
我现在在构想一个能接入oracle的neural network。
这里的oracle不是数据库那个,而是对
knowledge base的一个抽象。或者可以看成是
大规模的long term memory,我之前做
KGraph,发现社交网络模型对优化网络连接非常
有效。所以我基本上那个就把这个oracle想象
成以相似性/相关性为边,以概念为节点的一个
图。神经网络那部分除了咨询oracle产生输出,
没事的时候就不停地对这个oracle进行反刍优化。
优化目标就是把最大量的知识以最大的程度压缩进
这个oracle。更具体地说,就是对知识进行抽象。
比如,有a, b, c, d, e五个节点,根据他们的
共同点抽象出一个X, 然后把他们encode成
a = X + da, b = X + db, ...
网络里面大量的节点,怎么发现相似的节点
并进行抽象压缩,这个可以用社交网络算法。
(compression == intelligence,
http://www.wdong.org/ji-qi-xue-xi-nei-gong-zong-gang.html)
我觉得AI肯定得有一个人生理想,或者终极的优化
目标。这个目标肯定不会是消灭人类。
我觉得获取最大量的信息可以作为这么一个目标。
这个突破其实已经长时间overdue了。
我坚信人脑等价于图灵机,我也倾向于认为目前
的集群计算能力已经能达到甚至超过人脑。
我也坚信未来是AI的。
(我觉得说意识依赖于人脑的某种量子机制是
扯淡。)不过我不觉得神经网络的突破能直接
导致generic AI。这个应该还需要若干个
理论突破。目前神经网络只是相当于视觉
中枢和听觉中枢,基本上没有思维和逻辑。
最终技术突破,我觉得还是要靠默默无闻的
人物,而不是现在牛x吹得震天响那批人。
下面这位我觉得就很了不起:
https://cis.temple.edu/~pwang/
具体怎么实现practical的AGI我非常感兴趣。
我现在在构想一个能接入oracle的neural network。
这里的oracle不是数据库那个,而是对
knowledge base的一个抽象。或者可以看成是
大规模的long term memory,我之前做
KGraph,发现社交网络模型对优化网络连接非常
有效。所以我基本上那个就把这个oracle想象
成以相似性/相关性为边,以概念为节点的一个
图。神经网络那部分除了咨询oracle产生输出,
没事的时候就不停地对这个oracle进行反刍优化。
优化目标就是把最大量的知识以最大的程度压缩进
这个oracle。更具体地说,就是对知识进行抽象。
比如,有a, b, c, d, e五个节点,根据他们的
共同点抽象出一个X, 然后把他们encode成
a = X + da, b = X + db, ...
网络里面大量的节点,怎么发现相似的节点
并进行抽象压缩,这个可以用社交网络算法。
(compression == intelligence,
http://www.wdong.org/ji-qi-xue-xi-nei-gong-zong-gang.html)
我觉得AI肯定得有一个人生理想,或者终极的优化
目标。这个目标肯定不会是消灭人类。
我觉得获取最大量的信息可以作为这么一个目标。