
日本国家Meta公司发布了最新的媒体生成AI模型“Muse Image”,同时公开了视频生成AI模型“Muse Video”的预览版本。Muse Image目前已在meta.ai、Meta AI应用程序、美国的Instagram Stories以及部分国家的WhatsApp中投入使用,预计不久后也将支持Facebook平台。
Muse Image能够基于多张参考图像进行构建,并结合Instagram上的社交语境进行精准编辑和图像生成。该模型作为一个智能代理,能够调用搜索工具和编码工具来辅助图像生成,提升生成结果的准确性和自我优化能力。此外,Muse Image利用搜索功能特别增强了对现实世界事实和时事问题的准确把握。

Muse Image具备自我回顾和改进生成作品的能力。例如,当细节出现错误时,它可以局部编辑图像;若整体存在较大偏差,则会重新生成全新图像。为了确保生成图像的真实性,还会使用多种工具辅助生成过程。

为了让用户辨别图像是否由AI生成,Muse Image内置了名为“Content Seal”的水印系统。生成的图像中嵌入了隐形的出处信息,即使经过裁剪、压缩、尺寸调整或截图,该信息依然存在。

基于相同预训练基础构建的Muse Video在对提示的响应、视觉忠实度和时间一致性方面表现优异。该模型重点解决音视频同步和物理运动准确性等当前性能瓶颈。Muse Video预计将很快面向创作者和Meta AI团队开放使用。


