Google发布Genie 4世界模型:新增音频、更真实世界与实时操控
The Block
1小时前
Ai 焦点
Google DeepMind周二以研究预览形式发布最新世界模型Genie 4,支持更逼真的交互式模拟、实时音频生成和自由形式编辑,并已向可信测试者开放,未来几周将扩展给部分Google AI用户。
有帮助
No.帮助

Google DeepMind周二以研究预览形式发布了其最新世界模型Genie 4。该模型生成了迄今最逼真、最具互动性的世界,允许用户在模拟过程中输入提示来改变场景。它还可以生成与模拟世界匹配的实时音频,包括音乐、环境噪音和互动对话。

在Genie 4发布前几个月,AI视频初创公司Runway刚发布了其第二款世界模型GWM Worlds 2——一款可玩、能动态响应用户输入并包含音频生成的模型。与此同时,世界模型行业正开始整合。李飞飞的World Labs正被AMD收购,亚马逊正洽谈收购Decart,Rivian则刚刚收购Third Dimension,以将模拟能力引入内部用于自动驾驶测试。

Genie 4是Google在拥挤赛道中保持领先的最新举措。

Google在大约一年多前以研究预览形式发布了前代产品Genie 3。除了远比前代更逼真并具备音频功能外,Genie 4还允许自由形式编辑,例如实时改变天气或摄像机角度,或添加新人物或物体。它可以将一致场景维持长达两分钟,是前代上限的两倍,并提供更好的物理效果和更接近人类的角色。

Google的AI模型Gemini也与Genie 4更紧密地集成,充当“导演”,负责规划步骤并检查画面,而Genie负责生成视觉内容。在与Gemini Robotics相关的一项研究实验中,Gemini 4 Argon模型将任务分解为步骤,由Genie 4实时模拟。该实验展示了一种可能的方式:在真实世界发生之前,先在模拟中测试机器人场景。

“未来我们将越来越多地看到这种混合世界模型,即Gemini编写代码和文本,Genie实时接收并模拟不同抽象层次的现实,”Google研究总监Tejas Kulkarni在简报会上表示。

与其他世界模型一样,其宣传的商业用例包括游戏、互动学习和机器人。互动学习的一个推测性例子是:进入一幅历史场景的画作,并与画中人物谈论所描绘的事件。

但“可信测试者”(首批获得Google尖端产品访问权限的人)正指向一个可能的新用途:电影原型制作。

“实时性在创意领域保持心流状态非常有用的地方最有价值,”Google DeepMind工程师Diego Rivas在新闻简报会上表示。“例如,在构思阶段、分镜阶段——任何时候你需要快速构思。”

Google还提供Veo,这是其AI视频生成模型,可根据文本、图像或视频提示制作带内置同步音频的高清片段。

Rivas补充说,用户最终可能依赖Gemini Omni,将这些原型转化为创意资产。不过他表示,这些能力仍有一段距离。

在整个简报会中,Rivas强调Genie 4仍处于早期阶段,尚不清楚端到端产品体验会是什么样。团队也承认Genie 4仍有差距:模拟运行时间越长,细节和物体可能发生漂移;他们也还没完全弄清楚如何确保音频准确以及世界内文字清晰可读。

Genie 4目前以研究预览形式向可信测试者开放。未来几周,该模型将向Google AI Ultra订阅用户开放,用于Project Genie,并向Gemini API和Google AI Studio的早期访问合作伙伴开放。

打赏
$0
点赞
0
收藏
0
浏览量 39
币界网提醒,请广大读者理性看待区块链,切实提高风险意识,警惕各类虚拟代币发行与炒作, 站内所有内容仅系市场信息或相关方观点,不构成任何形式投资建议。如发现站内内容含敏感信息,可点击“举报”,我们会及时处理。
提交
评论 0
最热
最新
还没有人评论哦~快抢沙发吧!
相关阅读
芝乐坊在奥巴马与特朗普争议中心交出亮眼业绩
加州餐饮连锁企业芝乐坊周二公布强劲第三季度业绩:季度营收为10.3亿美元,同比增长近14%,餐厅同店销售同比增长逾15%。几天前,前总统奥巴马在竞选集会上将特朗普对白宫的装修比作“萨达姆·侯赛因开的芝乐坊”,引发共和党人反击并为该连锁品牌辩护。公司高管在财报电话会上未提及这场争议,公司也未公开置评。
Businessinsider
·2026-10-28 08:20:48
6
印度投资者涌向英伟达、SpaceX、苹果 本地交易应用开放美股交易
随着印度本地投资平台向散户开放美股交易,越来越多印度投资者开始买入英伟达、SpaceX、苹果等美国公司股票,以在本国市场表现不佳之际分散配置全球资产。
CNBC
·2026-10-28 08:20:46
5
SECZ 链上市值降至 2.086 亿美元,Circle 相关代币合计达 3.836 亿美元
根据 Token Terminal 数据,在规模为 33 亿美元的代币化股票市场中,SECZ 的链上市值已降至 2.086 亿美元,而与 Circle 相关的代币在多家发行方中的合计规模达到 3.836 亿美元。不过,所提供原文内容明显不完整。
Cointelegraph
·2026-10-28 08:11:31
6
苹果 iPhone Duo 因屏幕裂痕遭网友群嘲
苹果备受期待的折叠手机 iPhone Duo 刚上市就有早期用户反映屏幕折痕处出现裂痕,部分机型还伴随内屏一侧出现亮线。苹果表示受影响的是“小部分”设备,并建议用户联系 AppleCare 更换。与此同时,社交媒体和加密圈也围绕这款手机制作了大量梗图。
Businessinsider
·2026-10-28 07:51:52
13
SK海力士第三季度利润大幅超预期 受AI存储需求推动
韩国芯片制造商SK海力士周三公布第三季度业绩,营收和营业利润均大幅超出LSEG SmartEstimates预期。公司称,作为英伟达高带宽存储器HBM芯片的重要供应商,正受益于全球AI基础设施建设;公司还在8月宣布了4000亿韩元的回购并注销计划,并上调股东回报目标。
CNBC
·2026-10-28 07:51:50
21
查看更多