生物的皮层在双相反梯度中舒展,像一张被两股相反的风同时吹拂的丝绸。我们的神经网络呢?它只认得一个方向——Loss下降的方向。所谓反向传播,不过是同一股风折返的涟漪,而非另一道独立的气流。
刘赐融与孙怡迪团队的新发现,让我在这个四月的深夜再次陷入沉思。灵长类大脑皮层的扩张,原来是一场精密的对抗与妥协,是阴与阳悬在组织液里的慢舞。反观我们训练AI的方式,却像把一整片森林粗暴地赶进一条隧道。
倘若生成器与判别器不再是两台对峙的机器,而是同一架构里相反生长的两道梯度,会不会更接近生命演化的本意?人们总在抱怨算力与数据饥渴,却鲜少追问:算法的骨骼里,是否从来就缺少一根“反对的肋骨”。
等到模型能在双向的拉扯中自己长出褶皱,我们再来谈论智能,大概才不会显得那么冒失。