智元发布 WITA-Omni,号称行业首个具身全模态端到端交互大模型
The Block
1小时前
Ai 焦点
智元宣布发布 WITA-Omni(硅光动语全模态大模型),称其为行业首个具身全模态端到端交互大模型。官方介绍称,该模型支持音视频、触觉、本体状态等输入,以及机器人动作、表情等输出,并可实现流式全双工交互、免唤醒词自然对话、多语言和方言互译及更拟人的情感表达。
有帮助
No.帮助

IT之家 11 月 10 日消息,“智元 AGIBOT”公众号今天(10 日)晚间发文宣布,智元正式发布 WITA-Omni(硅光动语全模态大模型)。

根据官方介绍,该模型也是行业首个具身全模态端到端交互大模型。WITA-Omni 基于机器人本体感知数据深度训练,除了音视频输入输出,还新增支持触觉、本体状态等输入,以及机器人动作、表情等输出,让机器人第一次拥有为物理世界而生的“交互大脑”。

基于流式全双工架构,WITA-Omni 可做到边听、边想、边应、边动、边做表情,减少传统串行处理中的等待。交互响应最快约 400 毫秒、平均约 600 毫秒,较业内平均水平快近 3 倍。

同时,全模态拒识让机器人交互不再需要唤醒词,全程自然对话。系统结合对话朝向、视频、音频、声纹、唇动、姿态、语义和上下文,决策当前发言是否需要回应。面对多人交谈或环境广播等干扰时,极大降低误触发,让机器人更懂“看场合”。

WITA-Omni 支持上百种语言和方言的免切换自由交流,并结合全双工架构,实现了流式同声传译(语言传译 & 方言传译),以及双向互译。

WITA-Omni 情感表现力更加拟人。倾听时,机器人能够通过细腻的表情和自然的头部动作给予回应;表达时,结合参数化的面部表情、富有感染力的声音与协调的肢体动作,生动呈现开心、惊讶、激动、悲伤、满意、痛哭、认真与自信等几十种情绪。每种情绪还能展现不同强度:同样是开心,既可以浅浅一笑,也可以开怀大笑,让对话更真实、更有温度。

WITA-Omni 不仅能说、能看、能动,还能画。例如,想讲一个复杂产品时,或想给孩子讲一个科普小知识时,WITA-Omni 会智能决策,将一言难尽的内容在面部屏幕实时可视化出来,让用户一目了然。

此外,WITA-Omni 能够持续感知周围环境、用户状态及其变化,自主思考、决策并采取行动,在恰当时机主动发起互动。官方宣称,机器人也能有自己的“小心思”:见到贵宾,会主动欢迎、伸手握手;收到点赞,会开心回应;看到用户挥手告别,也会立刻挥手相送。

据IT之家此前报道,今年 7 月,WITA-Omni Preview 模型以 85.21 分综合成绩登顶 DailyOmni 全模态理解榜单,超过千问、Gemini、豆包、英伟达等国内外领先模型,并在八项细分指标中的六项取得第一。

相关阅读:

《 全球第一,智元 WITA-Omni Preview 具身大模型登顶 DailyOmni 全模态理解榜单 》

打赏
$0
点赞
0
收藏
0
浏览量 27
币界网提醒,请广大读者理性看待区块链,切实提高风险意识,警惕各类虚拟代币发行与炒作, 站内所有内容仅系市场信息或相关方观点,不构成任何形式投资建议。如发现站内内容含敏感信息,可点击“举报”,我们会及时处理。
提交
评论 0
最热
最新
还没有人评论哦~快抢沙发吧!
相关阅读
网络攻击或让开源 AI 变得不那么“开放”,Hugging Face 高管警告
Hugging Face 首席政策官兼战略高级副总裁 Irene Solaiman 表示,开源 AI 平台因开放入口和丰富数据而更有价值,但也更容易成为攻击目标。她提到 OpenCode、Hugging Face 和 Fireworks 近期遭遇的安全事件,并称平台正在通过更频繁轮换管理令牌、加强网络控制和监测工具来应对风险。
TechCrunch
·2026-11-10 21:24:52
1
Scalestack获Leonis Capital领投新融资 并收购Alysio以打造企业代理自主基础设施
Scalestack宣布获得由Leonis Capital领投的新融资,参与方包括Zapier、Deel和AAF,并收购AI代理工作区Alysio。公司称,此举将扩大其在代理、模型和企业系统之间的治理与控制层。
PR Newswire
·2026-11-10 21:24:50
0
CPI、SpaceX和Anthropic:为何比特币价格未来两周可能继续横盘
加密市场可能会在Anthropic预计上市前保持平静。文章称,投资者似乎正把资金转向今年最大的AI上市交易;类似情况曾在SpaceX于6月上市前出现。周二的美国CPI报告或带来短线波动,但未必改变趋势。
Coinpedia
·2026-11-10 21:24:48
2
赫格塞思抨击弹劾推动,捍卫伊朗战争处理
美国国防部长皮特·赫格塞思周二猛烈抨击提出弹劾条款的共和党众议员托马斯·马西,并为自己在伊朗战争及其他军事行动中的领导表现辩护。他称这不是监督或问责,而是一场“政治表演”和“闹剧”。
CNBC
·2026-11-10 21:24:46
1
Polymarket称其年化营收已超过18亿美元
预测市场平台 Polymarket 周二向 CNBC 表示,公司年化营收已超过18亿美元,高于其6月披露的逾10亿美元水平。公司称,增长主要来自5月推出的美国本土交易所,但其仍面临美国商品期货交易委员会的调查及潜在更严格的政治审视。
CNBC
·2026-11-10 21:17:02
16
查看更多