Truvé：关于这个问题，今天我们所使用的模型仍然非常“人性化”，因为它们会不断胡乱生成语言，即使它们并不知道自己在说什么。那么，你认为模型意识到自己不知道的那一刻，离我们还有多远？Geoffrey

-4。如果查看其中的任何一个神经元，已经激活的神经元会继续保持激活，因为它们接收到的是总的正输入；未激活的神经元会保持未激活状态，因为它们接收到的是总的负输入。然而，这并不是唯一的能量最低点。一个

AI估计，全网公开可用的文本数据可能会在2026年-2032年之间耗尽。也有迹象表明，LLM参数扩大，所获得的收益并不像以往显著。谷歌DeepMind伦敦研究副总Raia

b）从多个方面研究了VLN任务，而Nguyen等人（2018）引入了VLN任务的一个变体，以在需要时通过请求语言协助来寻找对象。值得注意的是，我们是首个提出在VLN任务中探索未知环境的研究。6.3

City”进行表达。（输入的是纽约的面积，得到的就是答案。）在此基础上，咱们再讨论深刻的问题，就是在一个平台上对话了，不会像《奇葩说》那样，辩论最终沦为偷换概念。目前为止，沃尔夫勒姆语言已经定义了

开始，人工智能研究突飞猛进，但研究者一直避免使用一些看上去不科学的词汇，例如“直觉”。他们试着用各种理论拆解这种整体的直觉，例如“推理”、“计划”、“注意力”之类。但辛顿在很多场合都在高呼：“AI

转自AI寒武纪，版权属于原作者，仅用于学术分享文章精选：1.图灵奖和诺贝尔奖双料得主——辛顿和西蒙：研究领域、学术成就及启发2.图灵奖得主辛顿：我的五十年深度学习生涯与研究心法3.Yann

b）从多个方面研究了VLN任务，而Nguyen等人（2018）引入了VLN任务的一个变体，以在需要时通过请求语言协助来寻找对象。值得注意的是，我们是首个提出在VLN任务中探索未知环境的研究。6.3

将彻底改变经济和社会，消除能源和资源的稀缺性，让人类进入一个物质极大丰富的时代。我们需要提前思考如何分配这些财富，例如，是否应该实行全民基本收入制度。访谈全文：强烈推荐注意:这是Demis

转自集智俱乐部，版权属于原作者，仅用于学术分享文章精选：1.图灵奖和诺贝尔奖双料得主——辛顿和西蒙：研究领域、学术成就及启发2.图灵奖得主辛顿：我的五十年深度学习生涯与研究心法3.Yann

2017】是一种可控的建模分布的方法，允许最大似然训练而无需潜在随机变量，其中条件概率分布由神经网络表示。由于这种模型是显示概率的一个家族，可以进行直接且无偏的采样。这些模型的应用已在统计学【Wu

版权属于原作者，仅用于学术分享文章精选：1.图灵奖和诺贝尔奖双料得主——辛顿和西蒙：研究领域、学术成就及启发2.图灵奖得主辛顿：我的五十年深度学习生涯与研究心法3.Yann

AI研究院（Fair）的首席AI科学家，也是纽约大学的教授。他获得了许多奖项，包括2018年的ACM图灵奖。他是美国人工智能协会（AAAI）的成员，也是美国国家工程院院士我们看看Yann

AI，并在被TD银行集团收购前担任联合首席执行官，之后他加入TD银行，担任首席AI官。Jordan也是加拿大高等研究院的董事会成员，并且是Vector研究所的创始人之一，这个概念是他与Tomi

All-Atom，使他们能预测蛋白质与蛋白质、DNA、RNA和其他小分子结合时的结构。生物学家才刚刚开始测试这些更新。库雷希表示，到目前为止，AlphaFold3的准确性远高于RoseTTAFold

Hinton）杰弗里·埃弗里斯特·辛顿，英国出生的加拿大计算机学家和心理学家，多伦多大学教授。以其在类神经网络方面的贡献闻名。辛顿是反向传播算法和对比散度算法(Contrastive

经常有人说深度学习遇到了瓶颈，但事实上它一直在不断向前发展，我希望怀疑论者能将深度学习现在不能做的事写下来。五年后，我们会证明深度学习能做到这些事。当然，这些任务必须经过严格定义。比如Hector

Hinton)的玄孙，前者提出的“布尔逻辑”为每一台现代计算机提供了数学基础。他的曾祖父是数学家兼奇幻作家查尔斯·霍华德·辛顿(Charles

Hinton，1947－）[1]。家族传奇辛顿可以算是学界少有的传奇人物，其传奇之一，是他显赫的家庭背景。我们从他的一位“玄祖父”布尔说起……英国数学家乔治·布尔（George

Neumann）正在独立地思考着生命自我复制的逻辑基础。然而，令人遗憾的是，那时的冯诺依曼已经患上了癌症，并于1957年的2月去世。于是，他的助手阿瑟·伯克斯（Arthur

“科学探索奖”是在另外一个层面，能够使得中国的一流人才聚集起来、凸显起来，在推动国家科技项目的评审、提供科学建议方面，我觉得这是一个了不起、划时代的贡献，让我们拭目以待。版权声明

协议，后来又负责比特币网络。「因为聪明，所以总是有点古怪」，Len十几岁时被诊断患有抑郁症。不幸的是，他在「边缘虐待狂」精神病医生的手中遭受了创伤，这种经历可能会让人不信任所谓的权威人物。1999

Amodei通过量化模型大小、数据大小、计算机和性能之间的关系，本文在理解如何优化用于训练大型语言模型（LLM）的计算资源方面取得了重大突破。通过了解这些扩展规律，研究人员和开发人员可以就如何为

Hinton的言论，深度学习要另起炉灶，彻底抛弃反向传播？5.用最直观的动画，讲解LLM如何存储事实，3Blue1Brown的这个视频又火了6.图灵奖得主Yann

知识冲突的解决方案面对大语言模型中的知识冲突问题，国内外研究者已提出了多种策略缓解这一挑战。下面将对这些解决方案进行全面的回顾，结合之前对于知识冲突成因的讨论，我们将现有的策略分为如图

我想我们稍后会回到政策问题上，但现在能否请你向观众解释一下你所说的“空间智能”是什么？计算机具备看、做和学习的能力意味着什么？我们如何判断在空间智能方面取得了进展？你在斯坦福的同事Chelsea

2024论文称：CoT可以让Transformer推理无极限。但随即他就遭到了田渊栋和LeCun等的质疑。最终，CoT会是通往AGI的正确路径吗？随着OpenAI

HYX【新智元导读】李飞飞团队酝酿了5个月之久的创业公司，今天终于正式官宣了！目标是打造「大世界模型」，让AI在3D世界中感知、生成、互动。2.3亿美金新一轮融资，竟被Hinton、Jeff

版权属于原作者，仅用于学术分享文章精选：1.最伟大的10位计算机科学家的核心观点2.计算机科学最重要的3个问题3.人工智能的瓶颈在于休谟与维特根斯坦4.如何看待图灵奖得主Geoffrey

版权属于原作者，仅用于学术分享文章精选：1.最伟大的10位计算机科学家的核心观点2.计算机科学最重要的3个问题3.人工智能的瓶颈在于休谟与维特根斯坦4.如何看待图灵奖得主Geoffrey

版权属于原作者，仅用于学术分享文章精选：1.最伟大的10位计算机科学家的核心观点2.计算机科学最重要的3个问题3.人工智能的瓶颈在于休谟与维特根斯坦4.如何看待图灵奖得主Geoffrey

成为多模态模型时，如果你同时让它做视觉和触觉，伸手去抓取东西，它会更了解物体。所以尽管你可以从语言中学到很多东西，但如果是多模态，学习会更容易。实际上，你需要的语言就更少了。例如，有很多

在大模型中的占比不小，但其实结构相比于注意力机制这些要简单许多。尽管如此，理解它也还是有些难度。为了简单，下面继续通过「乔丹打篮球」这个具体示例进行说明吧。首先，我们先简单了解一下

婴儿不是通过观察一百万个相同物体的样本来识别物体，或者尝试危险的东西并从中学习，而是通过观察、预测和与它们互动，即使没有监督。在半年前的一次演讲中，他甚至主张「放弃强化学习」（参见《GPT-4

LeCun认为，世界模型是通往强人工智能（AGI）的关键技术路径之一。要理解世界模型，我们可以试着把它和两类技术进行对比。第一个是多模态大模型，当初Sora诞生时，很多人认为它就是world

很多机器学习算法似乎已经都运行得很好，但是我们却不理解为什么。如果你去观察为了语音识别而训练的神经网络，你通常会难以理解它为何做出这样的选择。我们为什么要关心这个问题呢？以下是一些原因：1.

如何用随机算法求解组合优化问题（五）跟清华大学马少平教授学AI：如何用随机算法求解组合优化问题（六）跟清华大学马少平教授学AI：第四篇

计算机科学探索信息处理和系统设计计算机科学是研究信息和信息处理过程，以及它们与计算机系统的设计、实现和应用的科学。它不仅仅关注计算机本身的硬件设备，更重要的是涉及到软件系统的理论基础、设计、开发和应用。因此通才讲堂的第十三课是计算机科学课。如何设计计算机？计算机设计涉及创建计算机的硬件架构和系统结构，包括处理器、存储器、输入输出设备以及这些组件之间的连接和通信方式。设计高效、可靠的计算机硬件是实现现代计算能力的基础。冯·诺伊曼：冯·诺依曼架构所有现代计算机使用的架构！约翰·冯·诺伊曼，美籍匈牙利人，20世纪最具影响力的计算机科学家、数学家和物理学家之一。他出生于匈牙利布达佩斯，在年轻时展现了卓越的数学天赋。他先后在柏林大学和汉堡大学任教，后受邀前往美国普林斯顿大学担任数学教授。在普林斯顿，他与阿尔伯特·爱因斯坦等科学巨擘共事，并在第二次世界大战期间参与了曼哈顿计划，为核武器的研制做出了贡献。冯·诺依曼生活在20世纪中叶的美国，这是一个科技飞速发展的时期，尤其是在第二次世界大战及其后的冷战背景下，计算技术的发展受到了前所未有的重视。在这个时期，计算机从最初的机械式计算设备转变为能够执行复杂计算和任务的电子机器。冯·诺伊曼的理论核心在于他对计算机架构的贡献，特别是存储程序概念的提出。意思是，计算机的程序存储在内存空间内，程序由一系列指令组成，这些指令可以被读取和执行。此前，计算机程序通常被硬编码在机器里，修改程序需要重新配置或重建硬件。冯·诺依曼架构的引入，使得计算机能够通过读取存储在内存中的指令来执行操作，极大地提高了计算机的灵活性和功能性。例如，ENIAC是世界上第一台通用电子计算机，但它的编程需要手动重新连接电缆和开关。引入冯·诺伊曼架构后，计算机如EDVAC能够通过内存中的程序来改变其功能，极大地提高了编程效率。具体来说，冯·诺伊曼架构由以下几个主要部分组成。中央处理器（CPU）是计算机的核心部件，负责执行存储在内存中的指令。它包括运算器（ALU）和控制器（CU）。内存用于存储程序和数据。输入输出设备用于与外部环境进行交互，如键盘、显示器等。几乎所有现代计算机，包括个人电脑、服务器和智能手机，都采用冯·诺伊曼架构。这种架构的灵活性使得计算机能够运行从操作系统到应用软件的各种程序，满足多样化的计算需求。冯·诺伊曼架构奠定了现代计算机设计的基础。他的贡献不仅改变了计算机的设计方式，还极大地推动了计算机技术的进步和应用，深刻影响了我们的现代生活。费曼：量子计算机基于量子力学原理的计算机！理查德·费曼，20世纪美国物理学家。他出生于美国纽约，在普林斯顿大学获得博士学位，同年参加“曼哈顿计划”。他曾在加州理工学院教授物理学，还撰写了多本广受欢迎的科普书籍，如《别闹了，费曼先生！》。20世纪下半叶，计算机技术迅猛发展，经典计算机在科学研究、商业应用和日常生活中发挥了越来越重要的作用。然而，随着计算需求的增加，经典计算机在处理某些复杂问题时显现出性能瓶颈。例如，模拟分子行为、优化复杂系统和破解密码等问题需要巨大的计算资源。与此同时，量子力学的发展为解决这些问题提供了新的理论基础。费曼提出了量子计算机的概念。他在1982年的一次著名讲座中首次阐述了量子计算的基本思想，并指出量子计算机可以在某些问题上远超经典计算机。量子计算机利用量子力学原理来执行计算，其核心在于量子比特的使用。与经典比特只能取0或1的状态不同，量子比特可以处于叠加态，即同时取0和1的状态。此外，量子比特之间可以存在纠缠态，使得它们的状态相互关联，即使相距甚远。量子计算的基本思想是，借助量子叠加和量子纠缠，实现量子并行计算。量子并行计算允许量子计算机同时处理多个计算路径，从而大幅提高计算速度。可以将量子计算机比作一个超强大的图书馆管理员。在经典图书馆中，管理员需要逐本检查每本书来找到所需的信息（经典计算），而在量子图书馆中，管理员可以同时打开所有的书并找到信息（量子并行计算）。量子计算机在模拟量子系统方面具有天然优势。经典计算机在模拟分子行为和化学反应时面临巨大的计算挑战，而量子计算机可以高效模拟这些复杂系统。这一能力为药物设计、新材料发现和基础物理研究带来了新的希望。例如，IBM和谷歌等科技巨头正在积极研究量子计算在量子化学中的应用，期望通过量子模拟加速科学发现。自然界不是经典的，混蛋，如果你想模拟自然，就必须使用量子力学。——费曼费曼提出的量子计算机概念开辟了一个全新的计算范式，使得科学家们开始探索量子力学在计算领域的应用。如今，全球各地的研究机构和科技公司都在积极投入量子计算的研究和开发，争取在这一前沿领域取得突破。帕特森：精简指令集简单带来效率！大卫·帕特森，依然在世的美国计算机科学家，当代计算机科学领域的杰出人物之一。他出生于美国，在加州大学洛杉矶分校获得计算机科学博士学位，成为加州大学伯克利分校的教授。20世纪70年代末和80年代初，计算机技术迅猛发展，计算机系统的复杂性也在不断增加。当时的计算机处理器普遍采用复杂指令集计算机（CISC）架构，如英特尔的x86架构，试图通过提供丰富的指令集来提高处理器的性能。然而，CISC架构带来了设计复杂、执行效率低和功耗高等问题。帕特森和他的团队提出了精简指令集计算机（RISC）架构，旨在通过简化处理器的指令集来提高执行效率和降低功耗。可以把RISC架构比作一个简化但高效的生产线。想象一个制造工厂，以前的生产线（CISC架构）有许多复杂的机器，每台机器可以完成多个步骤，但需要大量的时间和能量。而新的生产线（RISC架构）则采用了简单但高效的机器，每台机器只负责一个步骤，但执行速度快且耗能少。通过这种简化和分工，整个生产线的效率得到了显著提高。ARM处理器是RISC架构的成功典范。ARM处理器因其低功耗、高性能和灵活性广泛应用于移动设备、嵌入式系统和物联网设备中。如今，全球大多数智能手机和平板电脑都使用ARM处理器。帕特森提出的RISC架构的理念迅速引起了广泛关注，并在高性能计算和移动设备中得到了广泛应用，为现代计算机设计带来了革命性的变革。如何编写软件程序？编写软件程序是指使用编程语言撰写代码，以创建执行特定任务的计算机程序。软件程序是计算机系统的灵魂，驱动硬件执行各种任务。巴科斯：高级编程语言简化编程过程！约翰·巴科斯，20世纪美国计算机科学家。他出生于美国宾夕法尼亚州费城，曾入伍美国陆军，在哥伦比亚大学获得了数学学位，随后在IBM工作。20世纪50年代初，计算机技术正处于快速发展的阶段。早期的计算机，主要依靠机器语言和汇编语言进行编程。这些低级语言直接操作计算机的硬件，编写和调试过程复杂且容易出错。随着计算机应用的不断扩展，科学家和工程师们迫切需要一种更高效、更易用的编程方法，以应对日益复杂的计算任务。巴科斯和他的团队开发了FORTRAN，世界上第一个广泛使用的高级编程语言，使编程更加接近人类自然语言。FORTRAN大幅简化了程序编写，使得科学家和工程师能够专注于解决实际问题，而不是纠结于底层的硬件操作。想象你要建造一座房子，低级语言就像是你必须亲自去每个工地上指挥工人，而高级编程语言则像是你只需提供一份详细的蓝图，工人们便能根据蓝图自动完成建造工作。FORTRAN就是这种“蓝图”，它让程序员可以用更接近自然语言的方式编写代码，计算机则负责将这些代码转化为具体的机器操作。工程师们使用FORTRAN进行结构分析和模拟，如桥梁和建筑物的设计。FORTRAN的高效计算和对数学表达式的支持，使得工程模拟变得更加精确和高效。例如，NASA使用FORTRAN进行火箭和航天器的设计和模拟，确保其安全性和可靠性。巴科斯的工作不仅简化了编程过程，还奠定了现代编程语言设计的基础。它使得编程不再局限于少数专家，而是让更多的科学家和工程师能够参与到程序开发中来。戴克斯特拉：结构化编程简单和清晰带来可靠！艾兹赫尔·戴克斯特拉，20至21世纪荷兰人，计算机科学领域的一位杰出人物。他出生于荷兰鹿特丹，他的父亲是一位化学家，母亲是一位数学家。他在阿姆斯特丹大学获得博士学位，成为欧洲最早的计算机科学研究人员之一。20世纪60年代，计算机技术迅速发展，软件规模和复杂性也不断增加。随着计算机应用的扩展，软件系统变得越来越庞大和复杂，开发过程中出现了许多问题，如代码难以理解、维护成本高和错误难以排除。戴克斯特拉的工作时期正值软件工程面临重大挑战的时刻，即如何高效、可靠地开发越来越复杂的软件系统。戴克斯特拉的结构化编程理论主张通过引入清晰的控制结构来改善软件的编写和维护过程。他提倡的结构化编程包括三种基本的控制流结构：顺序、选择（如if/else语句）、和迭代（如while或for循环）。戴克斯特拉反对使用无限制的跳转语句（如goto），因为这会导致程序流程难以跟踪。简单性和直接性是可靠性的两个基本要求。——戴克斯特拉可以将结构化编程比作搭建积木模型。想象你要搭建一个复杂的城堡，直接把所有积木随意堆砌在一起会导致混乱和不稳定。而使用结构化编程的方法，则像是将城堡分成多个模块，每个模块负责一个部分，并且按照清晰的步骤进行搭建。这样不仅使得城堡结构稳定、易于管理，还能方便地进行修改和扩展。大型企业软件系统，如银行的交易处理系统，通常具有复杂的业务逻辑和高可靠性的要求。通过结构化编程方法，可以将系统的各个功能模块化，每个模块负责特定的业务功能。他的理论和实践显著提高了软件的可理解性和可靠性，极大地影响了软件工程的发展，推动了编程范式向更高层次的抽象和结构化发展。艾伦·凯：面向对象编程使用对象来模拟现实世界的行为和交互！艾伦·凯，依然在世的美国计算机科学家。他出生于美国马萨诸塞州，在科罗拉多大学获得数学和分子生物学学士学位后，转向计算机科学，并在犹他大学获得博士学位。20世纪60年代和70年代，计算机技术快速发展，计算机系统的复杂性也随之增加。早期的软件开发主要依赖于过程式编程，这种方法将程序视为一系列有序执行的步骤。随着软件系统规模的扩大，过程式编程的局限性变得越来越明显，代码复用困难、维护成本高、错误难以定位等问题频繁出现。艾伦·凯提出并发展了面向对象编程（OOP）范式，强调使用对象来模拟现实世界的行为和交互。在面向对象编程中，每个对象都能够接收消息、处理数据和发送消息到其他对象。每个对象都可以被视为一个小型的独立机器，具有特定的角色或责任。凯的理论重点在于三个主要概念：封装、继承和多态。预测未来的最好方法就是创造未来。——艾伦·凯C++是一种广泛使用的面向对象编程语言，由比雅尼·斯特劳斯特鲁普在1980年代初开发。C++结合了面向对象编程和过程式编程的优点，广泛应用于系统软件、游戏开发和高性能计算等领域。C++的引入和普及进一步推动了面向对象编程的应用和发展。艾伦·凯提出的概念极大地提高了软件的可重用性、可扩展性和可维护性，是当今软件工程中不可或缺的部分。托瓦兹：开源软件全世界的开发者一起写同一个软件！林纳斯·托瓦兹，美籍芬兰人。托瓦兹在大学期间接触到了UNIX操作系统，但因为UNIX的许可费用昂贵，托瓦兹开始着手开发一个免费、开源的操作系统——这就是后来的Linux。20世纪80年代到90年代，个人计算机的普及和互联网的兴起为软件开发带来了革命性的变化。在这个时期，尽管商业软件公司如微软在市场上占据主导地位，开源软件和自由软件运动也开始兴起，它们提倡更为民主和协作的软件开发模式。托瓦兹支持开放源代码的软件开发模型。托瓦兹坚信软件的开发和改进最有效的方式是让全世界的开发者能够访问源代码、自由地修改并分享改进后的版本。这种协作的、非中心化的开发模式不仅加速了软件的迭代速度，也提高了软件的安全性和稳定性，因为有成千上万的开发者可以帮助检测错误、优化代码和增加新功能。给我足够的眼睛，让我可以找出任何错误。——托瓦兹例如，Linux内核作为一个开源项目，任何人都可以下载其源代码，对其进行修改和定制，以适应特定的硬件或软件需求。在实际应用中，一个公司可能需要对Linux内核进行修改，以使其在特定类型的服务器上运行得更加高效。这种修改后的内核可以被该公司内部使用，也可以被重新发布给社区，从而让其他用户或公司受益。Linux内核的开发和普及标志着开源软件运动的一个重要转折点，证明了开源项目可以与商业软件竞争并在很多情况下提供更优的解决方案。托瓦兹的贡献不仅限于技术本身，更在于他倡导的开放源代码开发模式，这种模式鼓励全球范围内的开发者共同参与项目的改进和迭代，极大地促进了软件开发的协作和创新。如何实现人工智能？实现人工智能（AI）是指通过算法和计算模型，使计算机具备模仿人类智能的能力，包括学习、推理、问题解决和决策等。通过赋予计算机智能，AI提高了生产力、创造了新的经济机会，正在深刻改变社会的运作方式。图灵：图灵测试什么样的机器可以说具有智能？艾伦·图灵，20世纪英国计算机科学家，他的工作为计算机科学领域奠定了基石。图灵出生于英国伦敦。他在剑桥大学学习数学。图灵在1936年发表了他的里程碑式论文，首次提出了图灵机的概念。二战期间，图灵加入了英国政府的密码学工作，他在破解德国军方的恩尼格玛密码机中发挥了关键作用。战后，图灵继续在计算机科学和人工智能领域进行研究，直到1954年因为当时英国的同性恋法律而不幸自杀。20世纪上半叶，计算和信息处理领域正在经历革命性的变化。随着机械计算机和电子计算机的出现，科学家们开始探索机器计算的潜力。与此同时，哲学家和科学家们也在思考智能的本质以及机器能否具备智能的问题。图灵在1950年的论文《计算机器与智能》中提出了著名的图灵测试。图灵测试是一种判断机器是否具有智能的方法，即如果一台机器能够与人类进行对话而不被人类识别为机器，则该机器被认为具有智能。图灵测试的核心思想是通过行为表现（即对话能力）来评估机器的智能，而不是通过内部结构或运作机制。图灵提出了一种被称为“模仿游戏”的测试方法。在这个测试中，一位人类评审员与两位受试者（一个是人类，一个是机器）通过文本终端进行对话。评审员的任务是判断哪一位是人类，哪一位是机器。如果评审员无法可靠地区分出机器和人类，那么机器被认为通过了图灵测试，即具有智能。近年来，像OpenAI的ChatGPT这样的先进语言模型在与人类的对话中表现出高度的智能和自然语言能力。虽然这些系统尚未完全通过图灵测试，但它们在某些对话场景中已经能够让人类相信自己是在与另一位人类对话。图灵测试对人工智能的发展产生了深远的影响。它为人工智能研究提供了一个明确的目标，即开发能够与人类进行自然对话的智能系统。尽管图灵测试本身并不完美，它为衡量机器智能提供了一个重要的基准，激发了大量关于机器智能本质的讨论和研究。费根鲍姆：专家系统第一种成功的人工智能软件！爱德华·费根鲍姆，依然在世的美国计算机科学家，被誉为“专家系统之父”。他出生于美国新泽西州，在卡内基梅隆大学获得电气工程学士学位、工业管理研究生院博士学位，师从著名计算机科学家和心理学家赫伯特·西蒙。后在斯坦福大学担任教授。20世纪60和70年代，人工智能研究处于探索和发展的初期。计算机科学家们开始意识到，人类专家在某些领域的决策过程具有高度的专业性和准确性，如果能够将这些知识和经验转化为计算机系统，将大大提高计算机在这些领域的能力。费根鲍姆提出并发展了专家系统的概念，专家系统是第一批真正成功的人工智能软件形式之一。专家系统基于知识库和推理机，能够模拟人类专家在特定领域中的决策过程。知识库存储了领域专家的知识和经验，而推理机则利用这些知识进行逻辑推理和决策。DENDRAL是第一个成功的专家系统，由费根鲍姆和他的团队在20世纪60年代开发。DENDRAL旨在帮助化学家分析有机化合物的分子结构。它通过输入质谱仪数据，利用内置的化学知识和推理规则，生成可能的分子结构，显著提高了化学家进行结构分析的效率和准确性。DENDRAL的成功证明了专家系统在科学研究中的巨大潜力。20世纪80年代，专家系统蓬勃发展。大学开设了专家系统课程，三分之二的《财富》500强企业在日常商业活动中应用了该技术。费根鲍姆提出的专家系统开创了将领域知识转化为计算机可处理的形式的路径，使得计算机能够在特定领域内执行复杂任务。专家系统的成功应用展示了人工智能在解决实际问题中的巨大潜力，推动了人工智能技术在医疗、工程、金融等多个领域的应用和发展。辛顿：深度学习今天最有影响力的人工智能技术！杰弗里·辛顿，依然在世的加拿大籍英国计算机科学家，被誉为“深度学习之父”。他出生于英国伦敦，在剑桥大学获得实验心理学学士学位，随后在爱丁堡大学获得人工智能博士学位。辛顿在多伦多大学任教多年，并担任谷歌深度学习团队的研究员。神经网络尝试模拟人类的大脑，网络的每一层有许多神经元，每一个神经元都能进行一个简单的计算，大量神经元组合成了复杂的计算。20世纪70年代到90年代，尽管神经网络在初期显示出潜力，但由于技术和理论的限制，它们未能达到早期的预期，并经历了所谓的“AI寒冬”。进入21世纪，随着计算能力的大幅提升、大量数据的积累以及算法的改进，神经网络开始复兴，并迅速成为人工智能研究和应用的前沿。辛顿提出的反向传播算法是一个关键的数学工具，用于训练多层神经网络。基于多层神经网络的模型，被称为深度学习模型。辛顿的工作使得人们可以训练多层神经网络，直接推动了2010年代的深度学习浪潮。学习是人工智能的核心。——辛顿AlexNet是一个著名的深度学习模型，由辛顿的学生亚历克斯·克里泽夫斯基在2012年开发。AlexNet在ImageNet图像识别竞赛中取得了前所未有的成绩，大幅提升了图像分类的准确率，标志着深度学习在计算机视觉领域的重大突破。深度学习在自然语言处理领域的应用也得到了广泛认可。ChatGPT使用的模型就是深度学习模型，在理解和生成自然语言文本方面表现出色。辛顿提出的深度学习在多个领域取得了突破性进展，使得许多以前难以解决的问题得到了有效解决，推动了人工智能技术的广泛应用。从自动驾驶汽车到智能语音助手，再到医疗影像分析，深度学习正在改变各行各业的面貌。萨顿：强化学习在环境中探索，从成功和失败中学习！理查德·萨顿，加拿大籍美国计算机科学家，被誉为“强化学习之父”。他出生于美国俄亥俄州，在斯坦福大学获得心理学学士学位，随后在马萨诸塞大学阿默斯特分校获得计算机科学博士学位。他的职业生涯跨越了多个顶尖研究机构和大学，包括阿尔伯塔大学和AT&T实验室。20世纪80年代和90年代，人工智能领域经历了几次起伏。早期的专家系统和基于规则的方法显示出局限性，难以处理动态和复杂的环境。与此同时，神经网络的研究因计算资源的限制和理论发展的瓶颈而陷入低谷。在这个背景下，研究者们开始探索能够自主学习和适应环境的算法。萨顿发展了强化学习。强化学习通过与环境交互并根据反馈奖励调整行为策略。强化学习的基本框架包括一个智能体（agent）、一个环境（environment）、动作（actions）、状态（states）和奖励（rewards）。智能体通过执行动作与环境进行交互，并根据环境反馈的奖励信号来调整和优化其行为策略，以达到某种目标。可以将强化学习比作训练一只小狗表演特技。小狗（智能体）在主人（环境）的指导下，通过不断尝试各种动作（如坐下、翻滚）来学习特技。每当小狗表现出正确的动作，主人就会给予奖励（如食物或赞美），小狗会逐渐学会哪些动作会带来奖励，从而调整自己的行为策略，最终掌握整个特技表演。AlphaGo是由DeepMind开发的围棋程序，通过强化学习击败了世界顶级围棋选手。AlphaGo使用了深度神经网络和强化学习算法，通过自我对弈不断优化策略，最终达到了超越人类顶级棋手的水平。AlphaGo的成功展示了强化学习在解决复杂博弈问题上的强大能力。强化学习在机器人控制领域的应用也取得了显著进展。通过强化学习算法，机器人可以自主学习复杂的运动技能，如行走、抓取和操作工具。波士顿动力公司开发的机器人Atlas和Spot通过强化学习实现了灵活的运动控制。强化学习为处理动态和复杂环境中的决策问题提供了一种有效的方法，其广泛应用于机器人控制、自动驾驶、游戏博弈等领域，展示了强大的实际应用价值。点击上方“图灵人工智能”，选择“星标”公众号您想知道的人工智能干货，第一时间送达

如何用随机算法求解组合优化问题（五）跟清华大学马少平教授学AI：如何用随机算法求解组合优化问题（六）跟清华大学马少平教授学AI：第四篇

AI的研究者们甩出的这些演示，显示出AI科学家在机器学习研究的不同子领域进行学术研究的能力，是多么游刃有余。无论是扩散模型、Transformers还是Grokking，没有它不能发的paper。1

并不买账。他们决定将“AI”一词替换为“数学魔法”——就是大量且复杂的数学运算。这个不敬的表达旨在戳破他们认为存在于引述句中的夸张和拟人化描述。很快，身为分布式人工智能研究机构的研究主任及社会学家的

ground的方法，一些符号的方法，然后才能够实现AGI，这我还是比较坚信这一点。我们现在举个例子，假设我们现在要去做一道数理证明题，这个证明里边它有很多的推理步骤的，对吧？比如说如果A能推出B，B

好吧，他们没有算法，只有一堆代码。很少有程序员从算法的角度思考。在尝试编写并发系统时，如果你只是在没有算法的情况下对其进行编码，那么你的程序就不可能不会充满错误。Lamport

Bengio：关于灾难性AI风险的常见问题解答李航：关于大模型的思考及研究热点OpenAI首席科学家：通向无监督学习之路Nature

在无污染任务中的性能，最后使用成员推理攻击进行额外分析。重点结论如下：1、研究者对每个模型在其训练数据在互联网上抓取之前创建的数据集和之后创建的数据集进行了分析。结果发现，对于在收集

Bujalski但信息是如何登上舞台的呢？这从未被明确定义。在我们的模型中，我们有一个明确定义（良定well-defined）的竞争，从大量的处理器中选择最佳信息。所有的计算都是局部完成的

Pascal编译器，进一步巩固了Pascal在1980年代作为个人计算机软件开发中，领先的高级编程语言的地位。在20世纪70年代，Wirth和其他Algol项目的资深成员，如Edsger

TikTok上的表演视频中展示自己，向人工智能系统屈服，这也许会让他们获得病毒式传播，也许不会。不过，它是人类的追求吗？还是机器可以比人类执行得更好的一种追求，只不过使用一个虚构的身份？

Bengio：关于灾难性AI风险的常见问题解答李航：关于大模型的思考及研究热点OpenAI首席科学家：通向无监督学习之路Nature

线性不可分样本示意图但是如果我们通过一个变换，将该问题升维到3维空间，结果会如何呢？我们假设有如下的变换函数∅(x)，将2维空间上的点