Bendi新闻
>
丝滑如真人,GPT-4o开启“她 ”时代,老师、同传要失业?

丝滑如真人,GPT-4o开启“她 ”时代,老师、同传要失业?

7月前
OpenAI GPT-4o深夜炸场!
当地时间5月13日10点(北京时间5月13日22:00),OpenAI首席技术官Mira Murati举行召开了OpenAI春季发布会,正式推出了新一代旗舰AI模型:GPT-4o。
话不多说,直接看GPT-4o的最新进展:能实时进行多模态对话。
单看这这个描述,似乎没什么震撼力。如果用更形象的语言来概括,就是你可以在GPT上玩转文字、图片、视频和语音,并且随时唤起、随时打断。
这意味着,GPT-4o的响应速度和表达能力达到了人类水平,能够像一个“真正的人”和你对话
Sam Altman在X平台略带神秘地发了一个:“her”,暗指GPT-4o的拟人能力。
(注:经典电影《Her》中,男主角爱上了一个像人类一样“有血有肉”的AI。)
Murati表示,相比GPT-4 Turbo,GPT-4o的速度要快2倍,不仅开放API,而且速率限制(即用户可发出的请求数量)提至此前的5倍。
最令人振奋的是:免费开放。
Murati表示,GPT-4o将面向ChatGPT的所有付费和免费用户发布,取消其他所有限制,API价格降价50%。
发布会时长不长,除了主要介绍了GPT-4o之外,Murati还公布了桌面版ChatGPT以及新的用户界面(UI)。
据悉,GPT-4o即日起将开始向API和用户推出,语音和视频理解能力等更多功能将在后续迭代部署。


解方程、做口译、读代码、懂情感……
GPT-4o中的“o”代表“omni”,意为全能
Murati称,GPT-4o为每个用户都提供了GPT-4级别的智能,同时还改进了GPT-4在文本、视觉以及音频方面的能力。
借助GPT-4o,OpenAI通过跨文本、视觉和音频端到端训练了新模型,使得所有输入和输出都由同一神经网络处理,进一步降低了延迟。
据介绍,GPT-4o的语音延迟大幅改善,可以在232毫秒内回应音频输入,平均为320毫秒,接近人类对话的反应时间。
在基本的功能介绍后,Murati邀请研究主管 Mark Chen、后训练团队负责人Barret Zoph同台进行功能演示。
比起前面的口头介绍,GPT-4o的直播表现可谓充满惊喜。
1)看图指导解方程
演示中,Zoph在白板上写了一个方程式3x+1=4,ChatGPT给他提示,引导他完成每一步解答,识别他的书写结果,帮助他解出了X的值。
2)解读屏幕信息
Zoph将一段Python代码输入ChatGPT,并让ChatGPT用一句话总结这段代码在做什么。GPT回答无误,并详细说明了数据是如何被处理的。
随后,Zoph又运行了这段代码,GPT能够准确地描述出所生成图表的具体含义,包括图表主题、XY轴信息、峰值水平。
3)实时交替翻译
GPT还在演示中扮演了翻译员的角色。应社交媒体X的用户请求,Murati现场对ChatGPT说起了意大利语,GPT则将她的话翻译成英语,转告Zoph和Chen;听完Murati说的意大利语,GPT再将其翻译为英文并告诉Chen:“Mark,她(Murati)想知道鲸鱼会不会说话,它们会告诉我们什么?” 
4)通过视频识别面部情绪
演示中,Zoph将手机举到自己面前正对着脸,要求ChatGPT检测他现在的情绪。最初,GPT参考了他之前分享的一张照片,将他识别为“木质表面”。经过第二次尝试,GPT表示:“你看起来非常的开心,可能还有一点激动,看样子你应该心情很不错。”
Zoph赞扬了GPT的回答并表示自己正在进行一场演示,以展示“你有多不可思议”,此时GPT情绪颇为激动地表示:“快别说了!你让我害羞了。”
在后续的网络实测视频中,官方和用户还探索出了GPT-4o的花样玩法。
比如,将老照片中的手写字转录为电子文本:

共享iPad屏幕后,让GPT实时指导教学几何题目:

和GPT视频玩“石头剪刀布”:

正如Murati说,GPT-4o的发布意味着OpenAI在大模型的易用性方面迈出了一大步,Ta正在改变人机交互的协作模式。


AI手机还会远吗?
可以说,GPT-4o确实要比GPT-4 Turbo多了很多“小心思”,似乎正在挑战Siri的地位。
不过,性能似乎要比Siri强的多。有网友调侃道:

“Siri现在的心情如下……”

实际上,就在此前,有媒体报道透露,苹果已经与OpenAI达成协议,将在全新操作系统iOS 18中引入ChatGPT技术,以升级Siri的对话体验。
这不由令人猜想,GPT-4o和Siri将如何结合?OpenAI和苹果会缔造出具有跨时代意义的AI手机吗?
英伟达高级研究科学家Jim Fan在X平台表示,iOS集成GPT技术可能会有三个层级:

1)放弃Siri。OpenAI为iOS提炼出更小型、纯设备上的GPT-4o,并可选择付费升级以使用云。

2)将相机或屏幕传输到模型中的基础功能。对神经音频/视频编解码器的芯片级支持。

3)集成iOS系统操作API和智能家居API。Siri快捷方式是时候复活了。

有分析指出,苹果和OpenAI的合作能够解决彼此在发展边缘AI方面的痛点,真正做到各取所需——
OpenAI最需要什么?端侧应用权限、系统级权限,只有苹果能提供。
苹果最需要什么?最好的AI技术,最适配的大语言模型,GPT-4o无疑是最佳人选。
Fan也表示,苹果+OpenAI合作推出的AI产品可能会成为从一开始就拥有10亿用户的AI产品。
目前,有分析师预测,苹果将在6月10日的WWDC大会上官宣和OpenAI的合作伙伴关系,并推出基于苹果LLM的AI聊天机器人。
令人激动的是,已经有移动端App开始接入GPT-4o了。
用于辅助盲人和弱势群体日常生活的手机App Be My Eyes尝试了接入GPT-4o,发现日常决策的效率被大大提高。

宣传视频显示,一名盲人打开Be My Eyes后,能够通过和GPT-4o对话,让GPT详细告诉他眼前的景象,从而快速做出决策。


网友纷纷评论:太不可思议了!


有网友表示,这是GPT-4o的最佳用例,它将为视障人士创造一个全新的世界。



真“成精”了?《Her》来了
在所有演示结束后,Murati总结道:“正如大家所见,(如今的ChatGPT)真的很神奇。”
结合GPT-4o的表现及其情感感知/表达的能力,不少网友表示:这不就是现实版的Her吗!

还有网友据此做了一张梗图“Him”,主角换成了Altman。
发布会后,Altman在X平台发布长文,称“看到一个令人兴奋的未来”。

“我感到非常自豪的是,我们在ChatGPT中免费提供了世界上最好的模型,没有广告。”

“最初的ChatGPT带来了语言界面的可能性。这个新事物(GPT)给人的感觉有本质的不同。它速度快、智能、有趣、自然,而且对人们更有帮助。

“对我来说,与电脑交谈从来都不是很自然的事情。现在它做到了。随着我们添加(可选)个性化、访问您的信息、代表您采取行动的能力等等,我真的可以看到一个令人兴奋的未来,我们将用电脑做更多事。

AI创业顾问Allie K. Miller更是兴奋地表示:

哇塞,这真是太棒了!这基本上就是一个24/7与你进行屏幕共享的同事,它完全不会疲倦。我可以想象人们使用这个工具连续工作数小时。

AI开发者Benjamin De Kraker甚至直接夸赞道:AGI(通用人工智能)基本已经实现。

“对于大多数人来说,这将被当做是魔法。当一个虚拟的“人”几乎可以和普通人一样听、说、看和推理,你还能用什么来形容呢?这不就是AGI吗?”


⭐星标华尔街见闻,好内容不错过
本文不构成个人投资建议,不代表平台观点,市场有风险,投资需谨慎,请独立判断和决策。

觉得好看,请点“在看”

微信扫码关注该文公众号作者

来源:华尔街见闻

相关新闻

OpenAI一夜改写历史,GPT-4o干翻所有语音助手!丝滑如真人?VLM集体「失明」?视力测试惨败,GPT-4o、Claude 3.5全都不及格OpenAI王炸更新GPT-4o,干掉所有语音助手!丝滑如真人引爆全网科幻成真!“她”来了!GPT-4o让AI陪伴创业公司无路可走?这些VLM竟都是盲人?GPT-4o、Sonnet-3.5相继败于「视力」测试这能说凯特要“复出”?英媒集体说她仍在幕后工作,但...还是没真人啊!OpenAI一夜改写历史,GPT-4o干翻所有语音助手!丝滑如真人引爆全网科幻成真GPT-4o发布,产品经理如何应对即将到来的“钢铁侠贾维斯助理”时代?GPT-4o深夜炸场!AI实时视频通话丝滑如人类,Plus功能免费可用,奥特曼:《她》来了横店下雪就有爆剧?「甄嬛传」、「步步惊心」后 网友看好这部剧…GPT-4o竟是「道德专家」?解答50道难题,比纽约大学教授更受欢迎[干货] OpenAI 最新产品GPT-4o,“o”代表什么?外媒如何报道GPT-4o,有没有“炸裂”?香港“黄丝”法官要卷土重来?历史性的一刻!“零利率”时代要来了?KPI就是“既要、又要、还要”?说明你真的不懂管理惊天爆料!查尔斯国王已“逝世”?凯特王妃成现实版“消失的她”?全网传疯,越来越离谱了…数字经济时代,为什么我们要强调“耐心资本”?泰国王室“宫斗大结局”,她要熬出头了?华尔街日报惊呼:计算机已成天坑专业?人工智能时代,“人要比AI凶”如松:冰河时代卷土重来?“冷舌”奥妙何在?学生蜂拥而至“求捞”“要高分”,大学老师该怎么办?泫雅差点成为「少女时代」、选公司都是爸爸决定?坦言「我好像机器人!」好消息!旅游胜地将对澳洲、中国免签了!华人有望“丝滑入境”!
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。