腾讯微视人体姿态迁移黑科技加持,用一张照片即可变身“舞林高手”

再也不用羡慕视频中的舞蹈大神了!6月9日,腾讯微视APP上线照片会跳舞”新玩法用户只需上传一张正面照片,即可生成逼真而带感的跳舞视频,从《两只老虎》跳到《大风吹》,秒变舞林高手。上线第一天,腾讯微视APP“照片会跳舞”特效玩法的体验人数已超过20万人,用户的舞蹈视频播放量达到2000万,相关玩法衍生出大量魔性上头的二创作品,许多用户通过这一特效实现了和异地亲友们同台共舞的新型“云社交”。

上传一张照片,即可秒变舞蹈大神

在腾讯微视APP中,用户通过搜索“照片会跳舞”关键词,或在拍摄界面找到活动入口后,只需上传一张正面照片,系统即可对照片进行3D建模,生成以假乱真的虚拟形象,再通过技术能力,使人体模型“舞动”起来,模拟效果十分逼真,动作也十分流畅自然。

实际体验中,这个“黑科技”的操作也十分简单。用户进入活动页面,点击“上传照片”,根据提示上传符合条件的照片,随后即可选择不同的舞蹈模板生成视频并发布,目前,用户可以选择10个舞蹈模板进行体验。

(微视“照片会跳舞”体验步骤

在这些模版中涵盖了广场舞、宅舞、炫舞、广播体操多种类型的舞蹈,不仅包括单人舞蹈,还包括多人群舞,用户除了自己solo大展舞技,还可以和闺蜜好友家人一起,体验群舞的快乐。模板的歌曲也多种多样,从话题正热的《大风吹》,到经典复古的广场舞即视感小苹果》,甚至还能和老同学齐跳《第2套全国中小学生广播体操》,一起重温经典的“时代在召唤”。

腾讯微视APP黑科技,解决人体姿态迁移技术难题

据了解,“照片会跳舞”由腾讯QQ影像中心提供技术支持,是微视在前段时间火遍全网的“蚂蚁呀嘿”表情迁移玩法的基础上,推出的多人跳舞动作迁移玩法。与此同时,它也是腾讯QQ影像中心针对人体姿态迁移技术研究的突破性落地,对比行业主流解决方案,用户参与更加简单,可玩性更高,实现效果也更好。

在目前主流的人体姿态迁移技术中,想要实现较好的生成效果,一般需要用户上传多张图片或视频,并需要经过较长时间后台处理。而腾讯微视APP团队经过对人体3D重建技术、生成对抗网络(GAN)的不断挖掘与优化,最后实现了使用单张用户图,就能达到业界需要复杂技术方可实现的人体姿态迁移效果,同时还支持更高分辨率的输出,并解决了动作僵硬等问题,既保证了舞蹈素材的动作准确性,也使动作更加连贯自然。从表情迁移到动作迁移,微视进一步深挖迁移技术在爆款社交玩法上的延展空间

据了解,此前QQ影像中心在AI生成领域已经进行过大量算法的研发和落地工作,如腾讯微视APP中的王者变脸、迪士尼童话脸特效等。此次跳舞功能,使得用户在腾讯微视APP中的体验更加丰富有趣,同时也为用户之间的交流提供了更丰富的内容