在视频生成的世界里，计算资源的需求如同无底洞，尤其是对于长时间跨度的视频生成。最新的扩散Transformer模型（DiTs）虽然在这一领域取得了令人瞩目的突破，但其庞大的模型和复杂的注意力机制却使得推理速度缓慢，反而加剧了这一挑战。为了应对这一难题，Meta AI的研究团队推出了惊世之作——AdaCache！
AdaCache的核心理念是“并非所有视频都相同”，这意味着某些视频在生成时所需的去噪步骤远低于其他视频。基于此，AdaCache不仅在扩散过程中缓存计算结果，还为每个视频量身定制缓存策略，极大地优化了生成质量与推理速度之间的平衡。此外，研究人员引入了运动正则化（MoReg）方案，巧妙地利用AdaCache中的视频信息，根据内容的运动情况合理分配计算资源。这一创新意味着包含高频纹理和大量运动的视频序列能够更有效地达到高质量生成效果。
实验数据显示，AdaCache显著提升了推理速度，例如在Open-Sora720p -2s视频生成中的速度提升高达4.7倍，同时不牺牲生成质量。更为重要的是，AdaCache展现出卓越的泛化能力，能够广泛应用于不同的视频DiT模型，如Open-Sora、Open-Sora-Plan和Latte。与其他免训练加速方法（如∆-DiT、T-GATE和PAB）相比，AdaCache在速度与质量上均表现出色，用户研究表明，用户对AdaCache生成的视频更为青睐，认为其质量与基准模型相当。
这一研究不仅验证了AdaCache的有效性，更为高效视频生成领域带来了重磅利好！Meta AI坚信，AdaCache将广泛应用并推动高保真长视频生成技术的普及。
在科技迅猛发展的今天，AI已成为提升生产力的重要工具。小易智创平台正是一个汇聚了10000+AI应用的强大平台，能够满足各行各业的需求。从写作到视频生成，从客户服务到AI绘画，小易智创提供的功能可以帮助用户轻松应对各种挑战。代理小易智创，无需担心经营和获客问题，一对一陪跑服务和全网自动化营销工具将助您打造属于自己的AI品牌，让客户主动找上门！
相关文章
