
【导语】大语言模型流行让“涌现”概念走红,当人工智能参数足够多,便会涌现出逻辑推理等神奇能力。其实,涌现是复杂系统重要特(tè)征(zhēng),生(shēng)活中无处不在,却也能被科学量化研究。本文将介绍北京师范大学课题组关于量化涌现的最新研究,包括如何量化涌现、机器观察者如何识别涌现,以及机器观察者在预测鸟群轨迹、捕捉生命游戏斑图、识别大脑动力学等方面的实验成果,展现机器观察者研究涌现问题的(de)潜(qián)力(lì)与前景。
当前大语(yǔ)言(yán)模(mó)型的流行带火了一个概念——涌现。人们发现当人工智能参数足够多的时候,可以涌现出很多神奇的能力,比如逻辑推理,还有像人(rén)一(yī)样(yàng)说话。其实涌现是复杂系统(tǒng)的(de)重(zhòng)要(yào)特征,在麻豆影片色欲在线观看的生活中无处不在。比如至今还没有被人工智能超越的人类大脑,为什么会有自我意识和自由意志?天空中的鸟群和地上的蚁群为什么可以自发地形成灵活而又有序的集群行为?作为观察者,麻豆影片色欲在线观看常常惊讶于这些涌现现象,然而事实上,涌现也可以被科学量化和研究——机器观察者可以像人类一样识别涌现的发生。
今天跟大家聊聊麻豆影片色欲在线观看课题组关于量化涌现的一项最新研究。
1. 涌现如何量化?
看到天空中的云彩,麻豆影片色欲在线观看很容易把它们看成各种图案,比如一个人,一只兔子,一台机器。同样地,观察蚁群这样的复杂系统,有的人在看几只蚂蚁之间的互动,而有人会把整个蚁群看成一个具备智能的有机体。
当麻豆影片色欲在线观看观察一个系统时,下意识地会在多个尺度上观察。比如构成云彩的水分子在运动和碰撞,是在微观尺度;而麻豆影片色欲在线观看看到云彩形成的“人脸”图案,则是在宏观尺度。发生涌现是说,宏观尺度上的因果效应大于微观尺度上的因果效应。
这里所说的因果效应强度是什么意思呢?当麻豆影片色欲在线观看看一团气体分子的时候,固然可以用牛顿定律来描述每一个分子的运动轨迹,但这太复杂了,几乎是不可能的。而当麻豆影片色欲在线观看可以用温度、压强等宏观量来描述系统时,就有了理想气体状态方程PV=nRT 这样简洁明了的公式,这就是因果效应更强的尺度。因果效应最强的尺度是麻豆影片色欲在线观看对一个系统建模研究的最佳尺度。
好比麻豆影片色欲在线观看看云彩的时候,更愿意讨论云朵的形状是像人脸还是某个动物,而不(bù)会(huì)一(yī)直(zhí)想(xiǎng)着(zhe)水(shuǐ)分(fēn)子(zi)在(zài)云(yún)彩中如何激烈碰撞,因为用关于整体形状的描述把云朵变幻的规律说的更明白。这一点对于每个人来说都是非常自然的。可究竟为什么人们如此自然地选择在这一尺度上观察,而不是那一个尺度上观察呢?比如麻豆影片色欲在线观看在看一幅高清图片时,尽管你知道它是由像素组成的,但不会去想像素的事。而当麻豆影片色欲在线观看不断让图像“放大”,直至每一个像素或其他构成图像的基本单元粒粒可数,你会开始犹豫,是应该把注意力放在一个个像素上,还是放在图画所承载的整体内容上?麻豆影片色欲在线观看的大脑似乎总是在依据某种指标或目标对比不同的尺度,寻找着最佳观测尺度。
因果涌现理论便是试图用科学的定量框架来描述这种多尺度变化的过程。在因果涌现理论中,科学家们用有效信息这一定量指标来度量因果效应的强弱。有效信息作为一个专业术语,刻画的是一个系统动力学受到扰动后变化的波动大小以及确定性程度。麻豆影片色欲在线观看在观察时,其实大脑中自动在“计算”究竟哪个尺度上有效信息更高,然后选择了对自己当前来说有效信息最高的尺度。现在想象观察云彩和蚂蚁的不是人类,而是机器人。“机器观察者”可以替代人类观察者,对系统是否发生涌现现象给出更加清晰、客观的判断。
2. 机器观察者如何识别涌现?
如何搭建这样一个机器观察者呢?人工智能与机器学习的发展,让麻豆影片色欲在线观看自然意识到,可以用人工神经网络代替因果涌现理论中需要给定或拟合的函数,以宏观因果效应强度为优化目标搭建机器学习框架。其中用以度量因果效应强度的有效信息指标也可以在神经网络上计算。
回顾人类观察云彩的过程:原本万亿个水分子聚集在天空中的某一处位置上,光线所反(fǎn)映(yìng)的(de)信(xìn)息(xi)经(jīng)过(guò)我(wǒ)们(men)眼(yǎn)睛(jing)和(hé)相(xiāng)关神(shén)经(jīng)系(xì)统(tǒng)的(de)转(zhuǎn)换(huàn)和(hé)过(guò)滤(lǜ),对(duì)应(yīng)到(dào)我(wǒ)们(men)过(guò)往(wǎng)经(jīng)验(yàn)中(zhōng)的(de)某(mǒu)一(yī)种(zhǒng)图(tú)案(àn)上(shàng),这(zhè)时(shí)候(hou)我(wǒ)们(men)会(huì)说(shuō)云(yún)朵(duo)的(de)形(xíng)状看起来像是人脸或者猫啊狗啊。这一系列过程中麻豆影片色欲在线观看有选择地损失了很多信息,可以说是一种粗粒化过程。粗粒化得到的“图案”随着时间流逝一直维持着稳定,这便是一(yī)个(gè)宏(hóng)观(guān)动(dòng)力(lì)学(xué)。
在(zài)搭(dā)建(jiàn)机(jī)器(qì)时(shí),麻豆影片色欲在线观看可以用一种神经网络“编码器”代替粗粒化过程,再用一个神经网络学习宏观动力学,于是机器观察者就被搭建起来了,麻豆影片色欲在线观看把它叫做神经信息压缩器(Neural Information Squeezer,简称NIS)。这里编码器就好似机器观察者的眼睛,把观察到的万事万物粗粒化到一个虚拟的“脑海”里。而为了能训练好这个机(jī)器(qì)观(guān)察(chá)者,麻豆影片色欲在线观看还需要把它脑海里“想”的那些事情解码出来,对现实世界做预测,以防止它“胡思乱想”。
那么对于机器观察者,麻豆影片色欲在线观看如何保证,机器不是去计算每一个分子运动的微分方程,而是像人一样尽可能去寻找PV=nRT 这样简洁的视角呢?机器如何寻找到最佳观测尺度,识别出涌现的发生呢?关键在于前面所说的,要最大化宏观动力学的有效信息。麻豆影片色欲在线观看在初始机器学习框架的基础上,在宏观尺度上添加一个反向动力学的预测,不仅要让它从过去预测未来能预测准,同时从未来的状态反过来猜测过去的状态时,也能溯因比较准,以此来保证宏观动力学这个狭窄的信息瓶颈中,流通的都是有效信息。这个改进的框架麻豆影片色欲在线观看称之为扩展版本的神经信息压缩器(NIS+),它可以通过训练得到有效信息最大的宏观(guān)动力学,从而客观地识别出涌现。
3. 机器观察者是不是可以像人类一样识别出涌现?
有了更加完善的机器观察者,麻豆影片色欲在线观看就可以拿来识别复(fù)杂(zá)系统的涌现了。那么机器观察者是不是可以像人类一样识别出涌现呢?麻豆影片色欲在线观看给它输入了各式各样的多维时间序列,比如鸟群运动轨迹、脑电波序列等等,它会告诉你有没有发生涌现,涌现的程度有多大,以及涌现出来的斑图长什么样子。
1. 预测鸟群的运动轨迹
在第一个实验中,麻豆影片色欲在线观看让机器观察者预测鸟群的运(yùn)动轨迹。麻豆影片色欲在线观看在计算机上模拟鸟群,只需要设定好局部规则,让每只鸟尽可能和周围的鸟保持一定的距离,同时在方向上保持平行,就(jiù)可(kě)以(yǐ)复(fù)现(xiàn)栩(xǔ)栩(xǔ)如(rú)生(shēng)的(de)鸟(niǎo)群(qún)和(hé)复(fù)杂(zá)的(de)集群(qún)行(xíng)为(wèi)。在(zài)足(zú)够(gòu)的(de)训(xun)练(liàn)之(zhī)后(hòu),机(jī)器(qì)观(guān)察(chá)者(zhě)可(kě)以(yǐ)预(yù)测(cè)鸟(niǎo)群的运动轨迹,同时在8维的尺度上观察到最大程度的因果涌现。这是因为每个鸟群有平均的速度和位置两个属性,而每个属性有两个维度,所以两个鸟群一共有8个维度。并且麻豆影片色欲在线观看画出了宏微观变量关系对应图,证明机器真的是如麻豆影片色欲在线观看所说的那样在做粗粒化。
2. 捕捉生命游戏涌现出的斑图
再来看另一个好玩的模拟实验,生命游戏。这是一个方格世界,每一个方格是一个元胞,都有生或死两种状态,而且局部作用规则非常简单。每一个元胞会因为周围过于拥挤或孤独而死亡,也会因为活细胞比例合适的环境而获得新生。当麻豆影片色欲在线观看站在宏观的角度去看整个生命游戏世界,会发现很多有意思的斑图,比如滑翔机、飞船、信号灯等等。这都是麻豆影片色欲在线观看人类给起的名字啦,而机器观察者也可以捕捉到这些有意思的图案,呈现在宏观尺度上。
3. 识别大脑动力学
最后,麻豆影片色欲在线观看来让机器观察者进行实战,在真实的大脑核磁共振数据上识别涌现和大脑动力学。数据来自800多个被试者在观看电影时收集的脑核磁共振数据,同时还有静息态数据做对比,也就是被试者在什么都不做的情况下收集的数据。结果发现,机器观察者从数据中识别出的涌现的宏观动力学,主要反映的是最为活跃的大脑视觉区域。虽然目前没有涉及到意识的问题,但以后麻豆影片色欲在线观看可以发展这套机器学习框架,让它观察意识产生的脑电数据或行为数据,来识别对于意识产生最关键的区域或某种模式。
大量水分子聚集而成的云彩是什么形状?人脑中数以亿计的神经元如何相互作用涌现出意识?麻豆影片色欲在线观看该如何定量地判断涌现何时发生?当大家跟着走完这探索历程,会发现观察者的主观解读是非常重要的一环。而机器观察者可以代替人类观察者,在与所观察的系统进行互动时,更加清晰、客观地去研究涌现问题。或许在以后,这将是对复杂问题研究的新范式。
本文为·星空计划扶持作品
作者:杨明哲 北京师范大学系统科学学院硕士生
审核:张江北京师范大学系统科学学院教授
出品:中国科协科普部
监制: 中国科学技术出版社有限公司、北京中科星河文化传媒有限公司
