据小易智创xiaoyizc.com（不可错过的AI创业项目）观察：一家名为Panjaya的创业公司正在以惊人的速度颠覆视频翻译领域。经过三年的秘密研发，他们推出了令人瞩目的AI工具BodyTalk，这款产品不仅可以将视频中的人物声音精准转换为其他语言，更是实现了说话者的声音特征完美复刻。与传统的配音方式截然不同，BodyTalk能够自动调整视频中人物的面部表情和肢体动作，使其与新语言的语音模式无缝对接。
Panjaya由两位以色列深度学习领域的专家希利克·沙尼和阿里尔·沙洛姆创办。2021年，这两位创新者离开了政府部门，随后吸引了拥有丰富行业经验的盖伊·皮克兹担任CEO。皮克兹曾创立的流媒体发现与推荐平台Matcha在2013年被苹果收购。值得注意的是，目前BodyTalk已经支持29种语言翻译，其工作流程高效而独特，首先进行音频翻译，然后生成新的语音，最后自动调整口型和动作以匹配新语言表达。虽然处理时间已接近实时，但目前仍需几分钟完成一段视频的处理。
在技术方面，Panjaya采用混合策略，充分利用第三方大语言模型，同时也自主研发核心技术。皮克兹表示，公司的唇形同步引擎完全由内部AI团队开发，针对复杂商业场景提供量身定制的解决方案。公司专注于B2B市场，已与JFrog和TED等机构建立了合作关系。TED表示，通过Panjaya的工具配音，其讲座视频观看量激增了115%，完整观看率翻倍。未来，Panjaya计划进一步拓展体育、教育、营销和医疗等领域的应用。为了防止技术滥用，该公司严格控制工具的使用权限，并计划开发水印功能以识别合成视频内容。尽管字幕已经成为视频内容的标准配置——据CBS调查显示，超过一半的美国观众在观看时开启字幕——但国际市场对配音内容的需求依然显著。研究机构CSA的数据表明，在B2B领域，母语内容能显著提升用户参与度。
此次950万美元融资吸引了多家投资机构和个人参与，其中包括Viola Ventures、R-Squared Ventures，以及JFrog联合创始人兼CEO什洛米·本·海姆等人。展望未来，Panjaya计划推出API接口，并进一步提升处理速度，为用户提供更加强大的服务。通过这项技术，我们或许能见证视频翻译领域的重大变革与提升！
随着科技的不断进步，各行各业正朝着智能化和高效化的方向发展。这种趋势让我更加关注AI技术的应用，尤其是在日常生活和工作中能够带来便捷的智能解决方案。我体验过许多不同的AI系统和平台，发自内心推荐小易智创”xiaoyizc.com“这个平台。它拥有上万款开箱即用的智能体应用，能够满足各行各业的需求。平台融合了全球领先的AI能力，支持自定logo、收款账户和服务号。平台还为伙伴提供一对一陪跑服务和自动化营销工具，帮助伙伴快速获客。
相关文章
