查看原文
其他

GPT-4o 补齐了 AI 的另一个能力,更多是开发者的机会

StartupBoy 投资实习所
2024-07-19

OpenAI 今天终于发布了大家期待已久的更新,推出了 GPT-4o,可以进行实时推理音频、视觉和文本。

GPT-4o 的能力到底有多强,或许从我们的一些媒体标题也可以感受得到,比方说:《OpenAI 一夜改写历史...》《OpenAI 颠覆世界...》《GPT-4o 深夜炸场...》《深夜重磅!GPT-4o...》《GPT-4o 屠龙式震撼...》等。

我看了一下 OpenAI 的 Demo 视频和整个官方介绍,各种能力方面确实是一次巨大的提升,但给我印象最深的,是它或许补齐了 AI 在情感这方面的能力,或者 OpenAI 官方说的更自然的人机交互,这点直接体现在了此次的命名上。

官方博客解释说,GPT-4o 里的“o”代表“omni”,是迈向更自然的人机交互的一步——它接受文本、音频和图像的任意组合作为输入,并生成文本、音频和图像输出的任意组合

它可以在短短 232 毫秒内响应音频输入,平均为 320 毫秒,这与对话中的人类响应时间相似。它在英语文本和代码上与 GPT-4 Turbo 性能差不多,在非英语语言的文本上有显著改进,同时在 API 方面速度更快,价格更便宜50%。与现有模型相比,GPT-4o 在视觉和音频理解方面表现特别出色

博客里解释了一下他们实现的方式:

在 GPT-4o 之前,你可以使用语音模式与 ChatGPT 交谈,平均延迟为 2.8 秒 (GPT-3.5) 和 5.4 秒 (GPT-4)。为了实现这一点,语音模式是由三个单独的模型组成的:一个简单的模型将音频转录为文本,GPT-3.5 或 GPT-4 接收文本并输出文本,第三个简单模型将文本转换回音频。这个过程意味着主要来源于 GPT-4 的智能失去了很多信息——它无法直接观察语气、多个说话者或背景噪音,也无法输出笑声、歌唱或表达情感。

使用 GPT-4o,我们训练了一个全新的模型,跨文本、视觉和音频进行端到端的训练,这意味着所有的输入和输出都由同一个神经网络处理。由于 GPT-4o 是我们第一个结合所有这些模态的模型,我们仍然只是在探索模型能做什么以及它的局限性方面初露头角。

通常情况下,我们将 AI 的能力归类为生产力的提升,这点体现在绝大多数产品的价值里面,比方说我最近介绍的这几个小产品:用 AI 教你面试教男性美容教你 Dating给 VC 投资人用的 AI 以及 HeyGen 这种对视觉叙事的改变等。

但是 Hume AI 的出现让我第一次感受到了 AI 在情绪这块的强大能力,而 Character AI 和各种 AI Companion 类产品的受欢迎程度,让我感受到了人类对情绪价值的巨大需求。

而声音(包含视频)相对于文本就更侧重于情绪的表达和传递,这也是此次 GPT-4o 非常重要的一部分,从而实现更自然的人机交互。

所以之前大部分快速发展的 AI 应用基本上都基于对文本的处理,即使是视频类产品也聚焦于信息的传递,此次 GPT-4o 的发布或许会让更具情绪表达的应用场景得到更进一步的释放,而 AI 所具备的千人千面能力可以真正带来个性化的体验,比方说教育行业就很值得期待。

每一次类似 OpenAI 这些大模型能力的提升,都会引发一波开发者(创业者)被直接干掉的声音,我相信会有一些场景会被大模型直接取代。但从整体来看,我觉得大模型能力的提升,更多还是开发者的机会,因为你可以用 AI 做的事情更多了。

我比较认同英伟达 CEO 黄仁勋最近一个分享里表达的观点:如果智能的边际成本趋近于零,那么你会做很多原本不会做的事情

HeyGen 创始人 Joshua 的这个观点也表达了大概的意思:

面对新兴技术,区分 Demo 价值和用户价值可能具有挑战性,许多技术 Demo 看起来非常酷,我同意(我自己曾经是一个狂热的爱好者)。但从长远来看,Demo 价值很快就会消失,只剩下用户价值。

用 AI 帮男性美容的开发者也曾说:他发现 AI 里有一个非常有趣的事情,就是那些发布了 AI 大模型(GPT-3、GPT-4)的公司可能也不完全了解其所有的能力,所以你一定要亲自去尝试一下,而不是只看别人的评论。

此次 GPT-4o 发布后他非常兴奋,发推文说之前 OpenAI 发布 Vision API 不到 6 个月他就构建了一个 ARR 达 600 万美金的产品,现在他会重新寻找想法完全基于 GPT-4o 来构建。

而 Sam Altman 在今天的发布会虽然没有出场,但是他写了一篇关于 GPT-4o 的博客,文章中他说想强调 2 件事:一个是将强大的 AI 工具给到用户,另一个就是语音(和视频)模式。

Sam 说当他们开始做 OpenAI 时,最初的想法是将创造人工智能,并用它来为世界创造各种好处。但现在是他们将创造人工智能,然后由其他人用它来创造各种令人惊奇的东西,我们都从中受益

下面贴一下其博客全文:


在我们今天的发布中,我想强调两件事。

首先,我们使命的一个关键部分是将非常强大的人工智能工具免费(或以一个合适的价格)交到人们手中。我感到非常自豪的是,我们在 ChatGPT 中免费提供了世界上最好的模型,没有广告或类似的东西。

当我们开始做 OpenAI 时,我们最初的想法是,我们将创造人工智能,并用它来为世界创造各种好处。相反,现在看起来我们将创造人工智能,然后其他人将用它来创造各种令人惊奇的东西,我们都从中受益

我们是一家企业,会发现很多东西可以收费,这将有助于我们为(希望)数十亿人提供免费、出色的人工智能服务。

其次,新的语音(和视频)模式是我用过的最好的计算机界面。它感觉就像电影中的人工智能;而且我仍然有点惊讶它是真实存在的。达到人类级别的响应时间和表现力结果是一个很大的改变。

最初的 ChatGPT 暗示了语言界面的可能性;这个新事物给人的感觉是发自内心的不同。它快速、智能、有趣、自然且有用。

对我来说,与电脑交谈从未感到真正自然,现在它做到了。随着我们添加(可选)个性化、访问你的信息、代表你采取行动的能力等等,我真的可以看到一个令人兴奋的未来,我们能够使用计算机做比以往更多的事情。


·END· 
加入 Memo Pro 会员,获取更多趋势信号


Memo: Signal, not noise!

扫码或点击「阅读原文」继续阅读

订阅 Memo Pro
Memo(vcsmemo.com)是一个基于付费订阅模式的创投内容平台,已得到大量 VC、企业 CEO 以及高管的支持,我们希望帮助你捕捉最具价值的趋势信号、过滤噪音(Signal,Not Noise)。
订阅 Memo Pro 你将获得:
1.解锁未来一年以及之前的所有会员专属内容2.邮件订阅功能:付费内容+最新行业快讯+...3.优先体验 Memo 新产品和新功能4.后台回复“发票”获得开票入口
限时 599 元/年,扫码立即订阅

这个给 VC 用的 AI,可能要取代投资经理了


用 AI 教男性美容,4 个月实现 600 万美金 ARR


黄仁勋最新分享:如果智能的边际成本趋于零,那么你会做很多原本不会做的事情



继续滑动看下一个
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存