其他
ChatGPT、无稀土电机与室温超导共同的底层逻辑
The following article is from 可计算学派 Author 文宇
世界经济,乃至人类社会,所面临的这场巨变,将是空前震撼的。
可计算。
01
我们以孔窥豹:
感应电机,发明于1885年;
中国电动车产业还在工业思维里踽步;
这基本意味着,特斯拉一个Dojo超算集群的战斗力,将逐渐可以对抗整个中国新能源车产业的工程师红利。所谓一夫当关万夫莫开,大抵如此。
GPT与ChatGPT的出现,算力是第一性;
02
维特根斯坦说:一个先天正确的思想,它是可能的就决定了它是真的。
1.思想:成本是电动车商业化普及第一性。
3.算力:能够实现“语言洛希极限”的算力。
1.思想:一种特定的新材料是室温超导的第一性。
在“可计算”思维模式下,在超级计算机的算力支持下,寻找超导新材料,是一种“刮彩票”的行为,虽然不容易中奖,但大奖就在那里——先来买,趋于极值的买入后,一定可以刮中。也就是说,Ranga Dias未必是第一流的物理学家,但一定是一流的具备“可计算”思维的物理学家。
可计算。
当前,当前这一系列基于算力的不成熟技术的集体涌现,有其特定的经济周期背景与目的性。它是某段历史的再一次复现。我们需要避免其他人在参与国际前沿科技竞争过程中出现的资源的盲目、无谓的巨量耗损。能够做好算力产业执剑人的人群,存在一个黄金检验标准:“凡是能够说的,都能够说清楚;凡是不能说的,必须保持沉默”。
a.作为OpenAI发起人之一,马斯克在2019年以前谈论最多的是DeepMind。这家公司影响了马斯克对于AI的认知,以及OpenAI的诞生;
b.发布于2020年6月的GPT-3,是通向大语言模型的决定性转折点。在英伟达V100GPU(这款芯片发布于2017年5月)为核心的超算中心的支撑下,1750亿参数被训练7个月后,突破了可计算要素2——“实现正确思想的可被计算的所有对象”——的极值,进而初步满足了可计算全部三要素。
c.英伟达A100GPU发布于2021年5月,这块芯片的出现奠定了实现ChatGPT的超级算力基础。
也就是说,OpenAI取得其关键突破的时间点应该在2019年年末或2020年年初,并于2021年5月之后获得确定性验证。进而可以推算出中国AI公司与OpenAI的整体差距大概在3年左右这一结论。
图:创生之柱;来源:詹姆斯·韦伯空间望远镜。