Adobe推出Firefly视频模型,AI视频生成进入主流应用

主要亮点:

新的Firefly视频模型目前处于有限公开测试阶段,用户可以在Firefly和Adobe Premiere中通过文本提示或图像生成视频。

视频功能包括电影级视频、2D和3D动画、文字图形、B卷和屏幕效果,可与普通镜头无缝融合。
该模型仅使用Adobe Stock和公共领域内容进行训练,旨在确保”商业安全”。
Premiere Pro新增了由Firefly驱动的”生成式延展”(Generative Extend)工具,可轻松延长片段、平滑过渡和微调编辑。
Adobe还在Creative Cloud应用程序中推出了100多项新功能,为企业营销推出了GenStudio,以及用于协作重混的Project Concept项目。

Adobe新模型的表现令人印象深刻,它很可能成为首批真正进入主流应用的AI视频系统之一。与仍在等待公开访问的OpenAI Sora相比,Adobe通过将其无缝集成到流行的创意套件中,抢占了市场先机。

OpenAI陷入商标纠纷,对手竟是…Open AI?

纠纷详情:

Ravine于2015年3月注册了open.ai域名,并拥有”Open AI”商标。Sam Altman和Greg Brockman曾试图从他那里购买这个商标。
Ravine声称,在OpenAI于2015年12月成立之前的几个月,他就向Larry Page和Yann LeCun等科技界人士提出了这个概念。
OpenAI在2023年起诉Ravine,指控他试图从其品牌中牟利。Ravine随后提起反诉,称该公司窃取了他的想法。
9月,法官驳回了Ravine反诉的大部分内容,但他计划重新提交并推动进行审判。

这起纠纷充满戏剧性,很难判断这是纯粹的妄想还是弱者被大公司压制的案例。有趣的是,考虑到OpenAI自身面临的训练数据和版权投诉问题,这场商标争议显得格外具有讽刺意味。

AI模拟《反恐精英》,神经网络重现游戏世界

技术细节:

DIAMOND使用基于扩散的方法,根据前几帧和动作预测下一帧。
该模型仅使用87小时的CS:GO游戏数据进行训练,远少于类似项目(如谷歌最近的DOOM模拟)通常使用的数据量。
用户可以使用键盘和鼠标与模拟游戏互动,AI重现了武器机制和玩家互动等元素。
该模型在Atari 100k基准测试中达到了比人类水平高46%的得分,创下了世界模型训练代理的最高水平。

DIAMOND虽然仍不完美,但它为机器人技术、自主系统和虚拟世界创建等领域指明了应用方向。生成交互式、基于物理的环境的能力可能会彻底改变AI为现实世界任务进行训练的方式。此外,开放世界视频游戏的创作也即将迎来重大升级。