这张动图你反复观看了多少遍?女爱豆迈着轻盈的步子,一边扭胯一边转圈,给观众留下完美性感的背影。近期火爆互联网的“张元英转圈”,想必不少玩家都有见识。这个不经意间的动作,吸引了大量网友的挑战模仿。图片来源网络,话题#挑战张元英转圈#曾登上抖音热榜据新榜旗下数据工具新抖显示,#转圈挑战#在抖音平台参与人数超4万,累计播放数近22亿。但奈何有些网友天生四肢不协调,想复刻却屡屡失败,最终全靠AI来搞定。X平台博主“小樱”利用Domo AI这款工具,转绘(转变创作风格,将一种风格转换成另一种的过程)了张元英的扭胯视频,浏览量近6万,网友调侃称:“完美还原,还得是AI。”不光是重新制作“张元英转圈”的舞蹈视频,形形色色的跳舞、唱歌、耍帅装酷等玩梗视频都被网友们转换成了二次元风格,打造出不同次元来回切换的“快穿感”视频。“将视频转绘成漫画风格”,成为了AI短视频内容制作的新趋势。比如,TikTok博主“animationais”凭借AI转绘舞蹈视频,获得了超15万粉丝,视频点赞总数超540万。数据最好的一条AI转绘视频目前在YouTube、X、TikTok等平台上获得了超千万浏览量,点赞超240万。漫画风格的跳舞视频,为什么会走红?酷炫短视频真能信手拈来?“头号AI玩家”进行了一番实测。如何借助AI工具,成功转绘爆款视频?
以“张元英转圈”的转绘视频为例,过去我们制作动漫风格的转绘需要先用绿幕拍摄,再剪辑和替换。比如,AI动画《剪刀石头布》、《宿敌》是专业团队利用Stable Diffusion,真人动捕加上转绘技术制作而成。随着AI技术的迭代发展,从一张图转换成动漫风格女主,到现在可以一键变成漫画短视频。在不少创作者手中,AI转绘技术能够突破风格和时长的限制,视频自由度和完成度更高,Domo AI等工具的出现,也为个人娱乐视频制作开辟了新的可能性。我们以Domo AI为例,目前Domo AI支持在Discord社区体验,需要加入相应的频道服务器(https://discord.gg/hkZnxYYW),进入界面后,在左侧功能栏中,点击“generate”,选择子频道后即可进入生成界面:如果你是新人玩家,登录会获得100个免费积分(credits),用来生成漫画短视频。Domo生成1个3秒左右的视频,需要15个积分。免费积分使用完毕后,用户需要付费订阅,基础版本为一个月9.9美元。首先,在生成界面,需要输入“/video”指令,点击“上传视频”,我们选择了模仿张元英相对成功的视频片段,并输入提示词“dancing”。当然,这里可以根据自己的喜好上传相应的舞蹈视频。实测下来,上传的原视频尽量动作明确清晰,时长控制在1分钟之内,漫画转绘效果最好。Domo AI有日本动画、漫画风格、3D卡通、中国水墨画风等7种风格,供我们选择。这一步骤也可以调整不同的参数,比如“多参考提示词”,或是“多参考源视频”,以及确定转绘的视频时长。当然,转绘时间越长,消耗的积分以及等待的时间也越长。在“头号AI玩家”的实测中,7秒的视频转绘成3秒短视频需要等待5-7分钟。原视频来自小红书博主“三三三元”,模仿张元英转圈获赞近70万
可以看到,整个过程可以说有手就行。Domo AI在人物形象、外貌风格上没有出现歪脸、模糊不清的情况,动作基本1:1复刻。另外,Domo AI近期上线了Fusion Style(融合风格)功能,支持真人视频生成不同角色、环境、人物的自定义视频。比如,我们将上述视频的提示词进一步修改为“a robot, dancing, cyberpunk, countryside”,并选择“Fusion Style(融合风格)”、“refer to my prompt(多参考提示词)”,得到的效果是这样的:在融合功能下,我们还能修改相关的角色、背景提示词,想让埃及艳后在大草原转圈扭胯,也不是问题。模仿各平台上流行的漫画视频,我们在短时间内就能复刻出一个AI跳舞视频。不过,目前Domo AI最多支持一次生成10秒的短视频。如果需要AI生成更细致且完整的舞蹈视频,最好借助ComfyUI等额外工具实现。除了Domo AI之外,同类型的AI应用层出不穷。比如,Viggle AI(https://discord.gg/viggle)上线风格转换功能,同样搭载在Discord平台,操作方式和Domo AI相似。如果不确定舞蹈风格,可以参考官方给出的动作提示词(https://viggle.ai/prompt)。在国内,美图旗下的Wink AI上线了漫画视频转换功能,也可以重绘舞蹈视频,还能创作长达数分钟的动漫视频以及短剧。
用AI转绘视频,创作者能玩出多少花样?
无论是Domo AI还是Viggle AI,在复杂场景上,依旧无法完全保证动作自然衔接,百分百转绘原视频。但这些应用在保证舞蹈内核不变的情况下,极大改变了创作的形式。动漫、3D、手绘等二创视频在YouTube、TikTok、抖音等平台上走红,吸引了不少网友跟风尝试。大多数的视频并非原创,也没有真人出镜,通过风格迁移进行二次创作,凭借AI、二次元美少女、跳舞等标签,迅速涨粉。网友用Joker Joaquin Phoenix取代说唱歌手Lil Yachty的转绘视频部分创作者除了利用AI转绘专业舞蹈视频外,还把拳击、武术等动作进行重绘,同样获得了不少流量。小红书博主“动漫搏击俱乐部”、“Shadow”就结合AI和二次元动画,制作防身术等教学视频,均积累了近3万粉丝。上图为“动漫搏击俱乐部”数据概况,下图为“Shadow”账号数据X平台博主“AI Warper”利用AI转绘和唇语同步技术,还将对话视频转成了动漫风格,一键拥有7秒漫画版短剧片段,浏览量超10万。可见,这一AI转绘技术在各平台上深受网友和创作者的青睐,制作流程的简便,以及AI工具的易用性会让更多人参与到共创中来。他们以较低的成本实现了复杂的舞蹈动作,甚至完成了创意内容。如果再结合当下的流行趋势或热门话题,像此前的科目三、奶牛猫洗澡舞,更容易被网友接受,进一步传播。网友制作扭张力Max的奶牛猫除了帮助创作者挖掘出内容新形式,用AI转绘视频同样带来了变现的机会。账号一旦做成,拥有稳定流量,平台播放分成、广告带货、和真人舞蹈区博主合作共创等等,都是可验证的商业化路径。以“动漫搏击俱乐部”为例,他的视频现在已经挂上相应的商品链接,视频中出现的拳击手套、墙靶等运动器材会同步售卖。最近,在人工智能领域,很多应用工具之所以会获得广泛关注,往往是因为一些爆火的案例或者Demo版本,从而成为了热点。相较于那些解决问题的效率型AI,这些“好玩有趣”的AI应用成为了更多普通人首次接触并了解AI的途径。可以预见,未来的短视频赛道,竞争会更激烈。对于创作者而言,AI确实提供了不少新奇有趣的思路和体验,AI工具的助力下,实现创意的门槛进一步降低,但追求优质创意的内核永远不会改变。如果能用AI获得启发,又有一定的技术含量,或许能在激烈的竞争中发掘出更多新机会。
作者 | 阿虎
编辑 | 松露
PS. 4月23日,「新榜短剧大会」将在上海光大国际大酒店举行,欢迎扫码报名,与短剧一线从业者线下碰面,共探短剧风口!
• 作为数据驱动的互联网内容科技公司,新榜提供新媒体内容营销和企业服务系列产品,助力中国企业数字化内容资产获取与管理,服务于内容产业,以内容服务产业。• 我们的客户既包括腾讯、字节跳动、阿里巴巴、中国平安、比亚迪、京东、通威、贝壳、宝洁、欧莱雅、联合利华、雅诗兰黛、迪士尼等头部品牌,也包括正在蓬勃成长的中小企业、新兴品牌和MCN机构。面向企业的内容化组织建设,新榜提供从公域流量募集分发到私域内容运营建设的各项所需。• “新媒体,找新榜”是我们的使命。凭借全面稳定的新媒体内容数据产品和企业服务能力,新榜被评为国家级高新技术企业、上海市专精特新企业、上海数字广告领军企业,曾荣获“全国内容科技创新创业大赛一等奖” 、“上海文化企业十佳”、“中国广告新媒体贡献年度大奖”等称号,拥有多个传播评估监测专利。浏览器搜索新榜官网,获取更多新媒体动向。