在近日于北京希尔顿酒店举办的T-EDGE大会上，一位来自加拿大的科技创新者吸引了全球目光。LipDub.AI公司的创始人兼首席执行官乔纳森·布朗夫曼在主题演讲中，展示了一项革命性的唇部同步技术，该技术不仅极大地降低了视频制作成本，同时保持了高质量水准。
在视频制作领域，“昂贵”与“耗时”往往是人们最先联想到的词汇。好莱坞之所以能在全球电影制作中独占鳌头，很大程度上得益于其雄厚的资金支持。然而，布朗夫曼所带来的这项技术，正试图打破这一固有印象。
演讲现场，布朗夫曼通过一系列演示，展示了LipDub.AI技术的惊人效果。当一位前《纽约时报》记者、来自华盛顿州的克雷格·史密斯用普通话询问费率时，仅凭其唇部动作，观众可能会误以为他是中国人。他还展示了如何将视频内容从弗拉芒语翻译成英语，以及如何通过简单输入新台词，从旧视频中生成全新内容。这项技术的潜力不仅限于此，它还能快速掌握《阿凡达》、《星际迷航》或《权力的游戏》等科幻作品中的语言，让饱受字幕和外语困扰的影迷们得以解脱。
布朗夫曼的另一重身份是MARZ（Monsters, Aliens, Robots, Zombies）公司的首席执行官，该公司曾为迪士尼、Netflix和亚马逊等巨头提供视觉特效服务。在这一过程中，他深刻意识到行业内的同质化问题：大家使用相同的技术栈和艺术家资源。因此，2019年，他决定将人工智能作为突破口，以在成本、时间和效率上获得竞争优势。
在他的带领下，一支由特拉维夫大学视觉计算教授丹尼尔·科恩-奥尔和西蒙弗雷泽大学计算机科学助理教授阿里·马哈达维-阿米里领衔的世界级研发团队应运而生。他们的首个产品Vanity，能够在传统视觉特效流程的基础上，实现2D老化、年轻化、美化、假发和假体修复等效果，速度提升高达300倍。这一产品在好莱坞因其高性价比和卓越品质而备受好评。
2021年，布朗夫曼在观看Netflix上的韩剧《鱿鱼游戏》时，注意到一个细节：尽管该剧在英语市场大受欢迎，但唇部同步却存在明显问题。他立即联系了科恩-奥尔和马哈达维-阿米里，并决定着手解决这个问题。于是，专为好莱坞打造的唇部同步技术——LipDub应运而生。
“这不是TikTok上的滤镜，这是真正的4K高清分辨率。你需要调整姿势、更换相机、改变光线和遮挡物。”布朗夫曼强调道。他指出，好莱坞仍然是行业的北极星和制片人的终极市场。
LipDub的应用场景广泛，包括视频内容翻译、定制角色对话更改和个性化定制等。例如，品牌在不同市场可能使用不同的产品名称。如果他们想拍摄广告并更改特定产品的名称，那么LipDub将是理想的选择。该技术还适用于计算机生成（CG）角色，不仅限于唇部同步，更注重角色的动态表达和情感传递。
目前，这款应用仍处于测试阶段，预计将于2025年1月20日正式面向公众开放。除了广告和电子学习等领域外，布朗夫曼更倾向于根据用户对质量的关注度来划分应用场景。“我们关注的是那些注重质量的人，他们将继续是我们的北极星。”他说道，“我们将为他们提供服务。”
布朗夫曼指出，人工智能正处于一个转折点。“人们正在向这一领域投入大量资金。他们希望更快、更实惠地……看到在给定市场或行业中推广或吸引观众的最有效、最积极的方式。”他认为，人工智能正是解决视频和电影制作行业高昂成本这一长期问题的关键。尽管目前视频制作仍然缓慢且昂贵，但布朗夫曼给出了解决方案：“借助LipDub，你可以重用视频，并在几分钟内实现内容全球化。”
