字节跳动开发的Loopy对口型功能已经在其旗下的即梦平台上线。这项技术能够使数字人的声音、表情和情绪与画面完美匹配,提供了非常逼真的对口型体验。与传统的对口型视频相比,Loopy技术解决了声音与画面割裂的问题,让数字人在说话或唱歌时能够自动匹配相应的语气、情绪和表情。用户可以在即梦平台上通过上传图片或视频,并输入文本或上传音频来生成对口型视频。Loopy技术能够精准地控制虚拟形象的每一个细微动作,包括非语音动作、情绪驱动的眉毛和眼睛运动以及自然的头部运动。它甚至能够处理法令纹等细节的动态变化,使得视频更加真实。
即梦官网:https://jimeng.jianying.com/