目前在数字人技术方面,腾讯的 MimicMotion 项目表现出色。它支持面部特征和唇形同步,不仅能用于生成跳舞视频,也适用于数字人领域。其具有基于置信度的姿态引导机制、基于姿态置信度的区域损失放大技术以及创新的渐进式融合策略,能确保生成的视频更加连贯流畅,减少图像扭曲和变形,并在可接受的计算资源消耗下实现任意长度视频生成。项目地址为:https://github.com/tencent/MimicMotion ,节点地址为:https://github.com/AIFSH/ComfyUI-MimicMotion 。
此外,HeyGen 与 Sora 集成推出的全新数字人技术也值得关注,其由 AI 完全生成的虚拟人能够模拟并超越真人演员的动作、表情和行为,可灵活调整动作和表情,无需重复拍摄,且视频长度无限制,并非基于真人模型的“数字克隆”,而是全新的 AI 虚拟形象。
腾讯发布的MimicMotion项目效果显著优于阿里,支持面部特征和唇形同步,不仅用于跳舞视频,也可应用于数字人。相较阿里的方案,MimicMotion的优化包括:1.基于置信度的姿态引导机制,确保生成视频更加连贯流畅。2.基于姿态置信度的区域损失放大技术,显著减少图像扭曲和变形。3.创新的渐进式融合策略,在可接受的计算资源消耗下,实现任意长度视频生成。项目地址https://github.com/tencent/MimicMotion节点地址https://github.com/AIFSH/ComfyUI-MimicMotion
🔔Xiaohu.AI日报「1月08日」✨✨✨✨✨✨✨✨1⃣️🗣️HeyGen与Sora集成推出全新数字人技术由AI完全生成的虚拟人,模拟并超越真人演员的动作、表情和行为。可灵活调整动作和表情,无需重复拍摄,视频长度无限制。非基于真人模型的“数字克隆”,而是全新AI虚拟形象。🔗[https://x.com/imxiaohu/status/1876808918544031906](https://x.com/imxiaohu/status/1876808918544031906)2⃣️🤖英伟达发布Groot Teleop技术使用Apple Vision Pro,让你进入虚拟机器人身体进行操控与训练。能训练机器人操作动作,并将成果转移至真实机器人。实现虚拟与现实的无缝连接,机器人训练迎来新模式。🔗[https://x.com/imxiaohu/status/1876914217682399456](https://x.com/imxiaohu/status/1876914217682399456)
[@小互(@imxiaohu)](https://x.com/imxiaohu)日报1⃣️HeyGen与Sora集成推出全新数字人技术利用AI创建完全虚拟的数字人,动作、表情灵活可调,无需真人模特和重复拍摄,适配无限时长视频制作。2⃣️英伟达发布Groot Teleop技术通过Apple Vision Pro,用户可“进入”虚拟机器人身体训练操作,将虚拟成果无缝应用于现实机器人,开创机器人训练新模式。>>更多详细内容查看[XiaoHu.AI日报](https://waytoagi.feishu.cn/wiki/T2fUwmHBSiHU6Ukq9Imcu7n7nMh)[@宝玉(@dotey)](https://x.com/dotey)日报1⃣️NVIDIA Project DIGITS:最小AI超算搭载GB10超级芯片,性能达1 PetaFLOPS,可运行2000亿参数模型,支持从桌面开发到云端扩展,售价$3,000起。2⃣️Nuwa Pen:数字化书写新体验三重摄像头笔尖,可在任意纸面数字化笔迹,2025年Q1发货,引领书写数字化未来。3⃣️Fake_Ortega:AI换脸+魔术揭秘爆款结合AI与魔术揭秘的创意内容,吸引873万订阅,成全球流量密码典范账号。>>更多详细内容查看[宝玉日报](https://waytoagi.feishu.cn/wiki/RleQwkybeiZ2jfkaQdgcIrrdnRd)