全靠算法。
首先,准备一个范本舞蹈作为源视频,然后,再传入一段儿普通人随意晃动的视频,作为用于修改的目标视频。在接收到指令后,Everybody dance now 算法会将源视频中人物的动作完全复刻到目标视频中。算法的处理结果竟然还挺让人惊喜,动作同步毫无压力,从头到手,再到脚部动作几乎都跟源视频保持了一致。要说有什么不足,可能就是气质这个东西,真没法儿复制,源视频和目标视频中的舞者的仪态差异不小。
现在来说说 Everybody dance now 的动作学习是怎么办到的。
算法的关键 ——GAN 对抗网络。
算法先分别对源视频和目标视频中人物的动作进行解析,然后将动作以身体关键点的形式简化成火柴人动画,再把两个火柴人的动作一帧一帧对应修改。
这个过程中,两个火柴人的动作经过了无数次映射学习,就像是女生在教男朋友怎么才能给自己拍一张好看的风景照一样。。。
男朋友拍照给女生看,女生提出反馈意见给男朋友修改学习,从而磨合,直至男友的水平和女生的欣赏力达到一致。
除了身体姿势的学习,算法还把人物的身体分为了肩部以上和肩部以下两个板块,肩部以上的面部表情复刻也采用了同样的算法进行复刻。
抖音的舞蹈很简单啊,而且抖音有慢动作拍摄,一点点拍出来也行
谁说的,人家不会跳人家专业跳舞的,所以在抖音上拍拍视频出来赚钱。
environment here, and是开在心间的一束馨香,花