当地时间5月13日10点(北京时间5月13日22:00),OpenAI首席技术官Mira Murati举行召开了OpenAI春季发布会,正式推出了新一代旗舰AI模型:GPT-4o。话不多说,直接看GPT-4o的最新进展:能实时进行多模态对话。单看这这个描述,似乎没什么震撼力。如果用更形象的语言来概括,就是你可以在GPT上玩转文字、图片、视频和语音,并且随时唤起、随时打断。这意味着,GPT-4o的响应速度和表达能力达到了人类水平,能够像一个“真正的人”和你对话。Sam Altman在X平台略带神秘地发了一个:“her”,暗指GPT-4o的拟人能力。(注:经典电影《Her》中,男主角爱上了一个像人类一样“有血有肉”的AI。)Murati表示,相比GPT-4 Turbo,GPT-4o的速度要快2倍,不仅开放API,而且速率限制(即用户可发出的请求数量)提至此前的5倍。Murati表示,GPT-4o将面向ChatGPT的所有付费和免费用户发布,取消其他所有限制,API价格降价50%。发布会时长不长,除了主要介绍了GPT-4o之外,Murati还公布了桌面版ChatGPT以及新的用户界面(UI)。据悉,GPT-4o即日起将开始向API和用户推出,语音和视频理解能力等更多功能将在后续迭代部署。
解方程、做口译、读代码、懂情感……GPT-4o中的“o”代表“omni”,意为全能。Murati称,GPT-4o为每个用户都提供了GPT-4级别的智能,同时还改进了GPT-4在文本、视觉以及音频方面的能力。借助GPT-4o,OpenAI通过跨文本、视觉和音频端到端训练了新模型,使得所有输入和输出都由同一神经网络处理,进一步降低了延迟。据介绍,GPT-4o的语音延迟大幅改善,可以在232毫秒内回应音频输入,平均为320毫秒,接近人类对话的反应时间。在基本的功能介绍后,Murati邀请研究主管 Mark Chen、后训练团队负责人Barret Zoph同台进行功能演示。比起前面的口头介绍,GPT-4o的直播表现可谓充满惊喜。演示中,Zoph在白板上写了一个方程式3x+1=4,ChatGPT给他提示,引导他完成每一步解答,识别他的书写结果,帮助他解出了X的值。Zoph将一段Python代码输入ChatGPT,并让ChatGPT用一句话总结这段代码在做什么。GPT回答无误,并详细说明了数据是如何被处理的。随后,Zoph又运行了这段代码,GPT能够准确地描述出所生成图表的具体含义,包括图表主题、XY轴信息、峰值水平。GPT还在演示中扮演了翻译员的角色。应社交媒体X的用户请求,Murati现场对ChatGPT说起了意大利语,GPT则将她的话翻译成英语,转告Zoph和Chen;听完Murati说的意大利语,GPT再将其翻译为英文并告诉Chen:“Mark,她(Murati)想知道鲸鱼会不会说话,它们会告诉我们什么?” 演示中,Zoph将手机举到自己面前正对着脸,要求ChatGPT检测他现在的情绪。最初,GPT参考了他之前分享的一张照片,将他识别为“木质表面”。经过第二次尝试,GPT表示:“你看起来非常的开心,可能还有一点激动,看样子你应该心情很不错。”Zoph赞扬了GPT的回答并表示自己正在进行一场演示,以展示“你有多不可思议”,此时GPT情绪颇为激动地表示:“快别说了!你让我害羞了。”在后续的网络实测视频中,官方和用户还探索出了GPT-4o的花样玩法。共享iPad屏幕后,让GPT实时指导教学几何题目:正如Murati说,GPT-4o的发布意味着OpenAI在大模型的易用性方面迈出了一大步,Ta正在改变人机交互的协作模式。
AI手机还会远吗?可以说,GPT-4o确实要比GPT-4 Turbo多了很多“小心思”,似乎正在挑战Siri的地位。“Siri现在的心情如下……”
实际上,就在此前,有媒体报道透露,苹果已经与OpenAI达成协议,将在全新操作系统iOS 18中引入ChatGPT技术,以升级Siri的对话体验。这不由令人猜想,GPT-4o和Siri将如何结合?OpenAI和苹果会缔造出具有跨时代意义的AI手机吗?英伟达高级研究科学家Jim Fan在X平台表示,iOS集成GPT技术可能会有三个层级:1)放弃Siri。OpenAI为iOS提炼出更小型、纯设备上的GPT-4o,并可选择付费升级以使用云。
2)将相机或屏幕传输到模型中的基础功能。对神经音频/视频编解码器的芯片级支持。
3)集成iOS系统操作API和智能家居API。Siri快捷方式是时候复活了。
有分析指出,苹果和OpenAI的合作能够解决彼此在发展边缘AI方面的痛点,真正做到各取所需——OpenAI最需要什么?端侧应用权限、系统级权限,只有苹果能提供。苹果最需要什么?最好的AI技术,最适配的大语言模型,GPT-4o无疑是最佳人选。Fan也表示,苹果+OpenAI合作推出的AI产品可能会成为从一开始就拥有10亿用户的AI产品。目前,有分析师预测,苹果将在6月10日的WWDC大会上官宣和OpenAI的合作伙伴关系,并推出基于苹果LLM的AI聊天机器人。令人激动的是,已经有移动端App开始接入GPT-4o了。用于辅助盲人和弱势群体日常生活的手机App Be My Eyes尝试了接入GPT-4o,发现日常决策的效率被大大提高。宣传视频显示,一名盲人打开Be My Eyes后,能够通过和GPT-4o对话,让GPT详细告诉他眼前的景象,从而快速做出决策。
网友纷纷评论:太不可思议了!
有网友表示,这是GPT-4o的最佳用例,它将为视障人士创造一个全新的世界。
真“成精”了?《Her》来了在所有演示结束后,Murati总结道:“正如大家所见,(如今的ChatGPT)真的很神奇。”结合GPT-4o的表现及其情感感知/表达的能力,不少网友表示:这不就是现实版的Her吗!还有网友据此做了一张梗图“Him”,主角换成了Altman。发布会后,Altman在X平台发布长文,称“看到一个令人兴奋的未来”。“我感到非常自豪的是,我们在ChatGPT中免费提供了世界上最好的模型,没有广告。”
“最初的ChatGPT带来了语言界面的可能性。这个新事物(GPT)给人的感觉有本质的不同。它速度快、智能、有趣、自然,而且对人们更有帮助。”
“对我来说,与电脑交谈从来都不是很自然的事情。现在它做到了。随着我们添加(可选)个性化、访问您的信息、代表您采取行动的能力等等,我真的可以看到一个令人兴奋的未来,我们将用电脑做更多事。”
AI创业顾问Allie K. Miller更是兴奋地表示:哇塞,这真是太棒了!这基本上就是一个24/7与你进行屏幕共享的同事,它完全不会疲倦。我可以想象人们使用这个工具连续工作数小时。
AI开发者Benjamin De Kraker甚至直接夸赞道:AGI(通用人工智能)基本已经实现。“对于大多数人来说,这将被当做是魔法。当一个虚拟的“人”几乎可以和普通人一样听、说、看和推理,你还能用什么来形容呢?这不就是AGI吗?”
本文不构成个人投资建议,不代表平台观点,市场有风险,投资需谨慎,请独立判断和决策。
觉得好看,请点“在看”