上證報中國證券網訊（記者 楊翔菲）7月24日，愛詩科技發佈視頻生成產品PixVerse V2，全球同步開放。據悉，該產品採用Diffusion+Transformer（DiT）基礎架構，並在各方面進行技術創新，提供了更長、更一致、更有趣的視頻生成能力。在模型能力提升的同時，PixVerse V2還帶來了AI視頻生成的全新玩法：在保證一致性的前提下，一次生成多個視頻片段，可實現單片段8秒，和多片段40秒的視頻生成。
在時空建模方面，PixVerse V2引入了自研的時空注意力機制，不僅超越了傳統的時空分離和 fullseq架構，而且提升了對空間和時間的感知能力，使得在處理複雜場景時表現更為出色。在文本理解方面，PixVerse V2利用了有更強大理解能力的多模態模型來提取prompt的表徵，有效實現了文本資訊與視頻資訊的精准對齊，進一步增強了模型的理解和表達能力。
此外，PixVerse V2在傳統 flow 模型的基礎上進行了優化，通過加權損失，促進了模型更快更優的收斂，從而提升整體訓練效率。PixVerse V2在設計和優化上進行了針對性突破：支援一鍵生成1-5段連續的視頻內容，且片段之間會保持主體形象、畫面風格和場景元素的一致。
PixVerse V2還支持對生成結果進行二次編輯，通過智慧識別內容和自動聯想功能，使用者可以靈活替換調整視頻主體、動作、風格和運鏡，進一步豐富創作的可能性。
作為AI視頻生成賽道的頭部公司，愛詩科技視頻生成大模型產品PixVerse不僅得到廣泛應用，更是目前用戶量最大的國產AI視頻生成產品。導演“閒人一坤”利用PixVerse創作的中式奇幻片《山海奇鏡之劈波斬浪》，已成為國內影響力最大的AI視頻之一。
愛詩科技聯合創始人謝旭璋此前表示，當下AI視頻仍處於比較早期的賽道，尚未真正普及到所有創作者的內容消費中。這一賽道雖然發展迅速，但仍有很長的道路需要走。
最新評論