Bendi新闻
>
震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

震惊!AI生成真人视频毫无瑕疵,台词随意变!HeyGen硬核升级数字人

8月前

夕小瑶科技说 原创
作者 | 任同学

2024年3月21日,HeyGen 5.0 正式发布!这款革命性的AIGC产品将AI数字人的魔力融入视频创作,以其简洁易用的特性,让视频制作变得轻而易举。

只需几次点击,即可打造出令人惊叹的高品质视频作品!

不仅如此,HeyGen支持超过40种语言和多种口音,每一个数字人都是语言大师!

如此惊艳!

HeyGen 5.0 生成的数字人不仅可以保持口型同步,克隆语音语调,保留背景声,还能精准的识别和追踪用户的身体动作,如手部移动和手势!

让我们看看下面的视频,真的能发现违和感吗?

这样的手风琴动作真的太真实了吧hhh

想想看,我们甚至可以使用文本输入控制一个虚拟角色,并使其复制我们所期望的动作、姿态,让他说任何语言,并且难辨真假。

即便表演一段绕口令也不在话下!

值得一提的是,前一段时间,热传的 Taylor Swift 说普通话的视频片段也正是出自HeyGen之手。

轻松创作

HeyGen(原名“Movio”)由 Joshua Xu 和 Wayne Liang 于 2020 年 11 月在洛杉矶创立,它使用生成式 AI 在几分钟内创建令人惊叹的专业视频。

当前的 HeyGen 可以将用户的脚本转换为 40 多种语言下 300 多种语音的自然发音

用户可以从代表不同种族、年龄和姿势的 100 多个 AI 头像中进行选择,并使其以自然的口型同步进行念稿。

HeyGen具有非常丰富的个性化设置,甚至会产生给游戏角色捏脸的错觉hh

1.丰富的官方形象

用户可以在 HeyGen 中能找到大量优质的数字形象,这里提供的所有头像都是基于使用真实演员的视频片段,因此质量和真实感都很不错!

2.自定义形象和声音

不仅仅局限于官方提供的数字形象,你也可以制作自己的数字人形象!

除了自定义形象,也能上传自定义的声音。操作也很简单,点击下图中的“Clone Voice”,只需要2-10分钟的录制,即可让HeyGen快速学习你的声音。

一次配置之后,每次用自己的配音都是原汁原味的!

最最重要的是,创作视频不用再NG了,那岂不是能省下大量的摸鱼时间!而完成视频的主要步骤,仅仅是提供一份文稿~

3.更多风格服饰

每个头像还有几种不同的服装,无论视频是要表现得更专业,还是更休闲,都有对应的服饰来匹配视频的基调。

在HeyGen中,个性化还不局限于此,我们还可以通过文本描述的形式,更自由地生成服装,就像要求 AI 给我的数字形象穿上一件“牛仔夹克和白色T恤”[1]:

几秒后就会得到穿上了“新时装”的数字形象:

4.文稿也能生成!

除了视频可以自动生成,HeyGen也接入了GPT4,编写视频剧本、提供创意、提升脚本质量统统不在话下!

不过该GPT已经被限制在视频剧本创作上了,笔者试了好多次,都没有办法让这个GPT回答其它问题,看来想要薅点HeyGen的GPT4羊毛是不太行了hhh。

“值不值得买”

目前的免费版本可生成长达一分钟的视频,但缺少了很多的个性化设置,比如100 多个 AI 头像、300 多个声音、自定义数字形象和语音等。

如果想访问更多特性和功能,还得考虑升级到他们的付费计划。

根据价格文档,每1个credit可以生成1分钟的视频。可是!月费59叨乐的Plan也只有30credit的视频。

这个成本值不值还真得让创作者自己去分析一波,咱也不清楚哇。

AI 风口上的社会问题

自从 2022 年 7 月推出视频制作应用后,借着AI的东风,HeyGen的发展不可谓不迅猛,至23年底,年度经常性收入已经攀升至 1800 万美元,并完成了多轮融资。

当下,HeyGen正在募集6000万美元规模的新一轮融资,公司投前估值达到4.4亿美元,较4个月前的估值水平增长了6倍。[2]

但是与疯狂增长的市值形成差别的是,HeyGen 背后的公司诗云科技(深圳)有限公司于2023 年 12 月 11 日因决议解散申请注销登记。

一些可能的原因是,HeyGen所提供的此类服务并不符合中国当前法规,其产生的视频有可能被用于欺骗性场景。

图片来源[3]

在近期,中国香港就发生了一起规模庞大的AI“深伪”诈骗案,涉及的金额达2亿港元。

这不仅是香港历史上损失最惨重的“变脸”案例,而且也是首次涉及AI“多人变脸”的诈骗案。

诈骗者利用AI仿造了高层管理人员的形象和声音并生成伪造视频,造成多人参与视频会议的效果,并对会议中唯一的真人财务实施诈骗。

随着AI伪造技术持续进化,辨别真伪的难度也会越来越大,加上该技术门槛不断降低,将诱使更多不法分子利用AI生成技术来实现诈骗。

在尝试利用AI进行创造的同时,大家也不要忘了保护自己的钱包呀,送上表情包:

参考资料

[1]https://twitter.com/xai/status/1773510159740063860
[2]https://www.36kr.com/p/2707566836873093
[3]http://www.news.cn/legal/2023-06/08/c_1129679772.htm

微信扫码关注该文公众号作者

来源:夕小瑶科技说

相关新闻

打工人效率暴增神器!AI时代硬核办公图鉴,TWS耳机成全能会议助理难以置信!全AI生成美女视频,46秒逼真神态骗过所有人知名学者与顶级投资人领衔!视频、3D、音乐生成玩家都来了,中国生成式AI大会嘉宾阵容更新,4月开启!“能看到脸的都能换”,有人换暗恋女生的脸……他AI换脸制作淫秽视频,获刑7年多!技术人员建议:隐私不要随意发新榜编辑部招人!AI视频编导+内容编辑,欢迎投递简历!一张照片+音频=超逼真数字人视频!VASA-1模型拉开「实时交互」大幕是的!东哥AI数字人要直播了东哥AI数字人直播首秀!喊你回家做饭啦!震惊,数字庞大!500万美国人免除1670亿美元今晚6点18分,采销东哥AI数字人直播,与你不见不散!新员工入职 5 年最少赚 2 亿元、以前挖人现在撬整个团队,AI 公司抢人大战再升级!梵高大跳科目三,只需文字+火柴人动效!可控视频生成框架来了 | AAAI 2024独角兽被微软挖角,新团队首曝光!情感AI嵌入机器人,超大内存升级情感体验微软「诈骗届」王牌框架,真到可怕!一张照片+音频即可生成数字人南方餐桌上的硬核美食,北方人都得甘拜下风!ECCV 2024 | 数字人也懂惯性定律!上海AI Lab团队提出3D人体姿态序列建模震惊!赔偿变封口费,加拿大华人男子硬刚!迫使银行退款道歉...杰克逊跳舞秒变3D机器人!阿里又出新活儿,视频任何人可替换让人物动起来!南大/复旦/阿里提出Champ:人体视频生成新SOTA!让人物跳起来!华科&阿里巴巴提出UniAnimate:人类跳舞视频生成新框架!支持合成一分钟高清视频!​​智联报告:海归薪资连涨5年!上海成首选!能源、高端制造、AI等硬科技人才最抢手!​​智联:海归薪资连涨5年!上海成首选!能源、高端制造、AI等硬科技人才最抢手!免训练!单图秒级别生成AI写真,人像生成进入无需训练的单阶段时代GPT-4o发布!AI实时视频通话丝滑如人类,Plus功能免费使用
logo
联系我们隐私协议©2024 bendi.news
Bendi新闻
Bendi.news刊载任何文章,不代表同意其说法或描述,仅为提供更多信息,也不构成任何建议。文章信息的合法性及真实性由其作者负责,与Bendi.news及其运营公司无关。欢迎投稿,如发现稿件侵权,或作者不愿在本网发表文章,请版权拥有者通知本网处理。