跳到正文
原文
Latent Space·· 2026-09-24精选AI 评分78

Meta Connect 2026：Muse 智能体、眼镜硬件与 Charm 设备

[AINews] Meta Connect 2026: Muse glasses, voice, video, and Charm

AI 摘要

Meta 在 Connect 2026 上把 Muse 个人智能体作为硬件加智能体战略的核心，发布智能体功能与新眼镜，但只预告未发布新的前沿模型。Muse 新增语音与实时视频能力，可后台执行任务，并接入全部 Meta 眼镜、拥有独立邮箱地址，Mac 版支持 computer use，连接器平台覆盖 1500+ 应用。

正文 · AI 翻译

扎克伯格团队简直火力全开。这是 Meta Connect 的精彩集锦：

而 Stratechery 上的热情赞誉也反映了现场的氛围。遗憾的是，除了一个预告之外，没有 MSL 的更新，因为 Muse Spark 已在 3 周前发布。不过，Muse 本身就算得上成功，因为它已在应用商店中超越 ChatGPT，而更多进展（电子邮件！）和集成也冲淡了被亚马逊封禁的痛楚。

最后，很高兴看到 Limitless——最后一个“隐身”的 MSL 收购——以 Charm 之名重新出现：

2026 年 9 月 22 日至 9 月 23 日 AI 新闻。我们检查了 12 个 subreddit、544 个 Twitter 账号，没有发现更多 Discord。 AINews 网站让你可以搜索所有过往期刊。提醒一下，AINews 现在是 Latent Space 的一个栏目。你可以选择接收/不接收不同频率的邮件！

AI Twitter 回顾

头条：Meta Connect 2026：Muse 个人智能体、眼镜硬件和 Muse 实时虚拟形象

发生了什么

Meta 利用 Connect 大会将 Muse 这一个人智能体作为硬件加智能体战略的核心进行展示。它发布了智能体功能和新款眼镜，并预告了一款新的前沿模型，但并未发布。

  • 主题演讲框架。 @finkd 将主题演讲定在太平洋时间下午 4 点，随后发布了一个回顾帖。现场博主 @kimmonismus 将主旨总结为“个人超级智能即将到来”，这意味着人们需要硬件与之交互，因此 Meta 正全力投入 AI 眼镜。

  • Muse 语音和实时视频。 Muse 现在支持语音和实时视频。它可以在后台处理任务的同时进行长时间对话（@finkd）。带有可自定义提示语音的视频聊天被标记为“即将推出”（@alexandr_wang）。官方账号的预告：“你给了你的 Muse 一个外观。现在给它一个声音”（@Muse）。

  • 眼镜上的 Muse。 Muse 即将登陆所有 Meta 眼镜，通过说出它的名字（唤醒词）来激活，“即将推出”（@alexandr_wang）。

  • Muse 邮件。 每个 Muse 都有自己的电子邮件地址。你可以在邮件线程中抄送它，或转发内容让它处理（@alexandr_wang）。

  • Mac 上的计算机使用。 Mac 版 Muse 现在可以进行计算机操作：“把你的任务排好队，走开，它会继续运行”（@alexandr_wang）。

  • 连接器和商务。 @alexandr_wang 展示了连接器目录。合作伙伴图形已发布，包括 Spotify、Box 以及一个明显的 Temu 集成。

  • 商业模式和合作伙伴列表。 @clairejyz 汇总了主题演讲中的数字：

    • Muse 对用户免费，但 Meta 最终可能会从交易中抽成。

    • 零售和商务集成：Walmart、Best Buy、Gap、Sephora、Instacart 等。

    • 生产力集成：Box、GitHub、Granola、Notion。

    • 连接器平台拥有 1,500 多个应用程序，包括 Lovable 和 ElevenLabs。

  • Muse Realtime Avatar（研究发布）。一个新模型让您的 Muse 与 Muse Realtime Voice 同步动起来。它能在不到一秒内回答，并支持无限长的会话（@alexandr_wang；@AIatMeta）。所有输出都作为 AI 加水印，“且不增加延迟”（@alexandr_wang）。Meta 称其为“我们各产品中实时具身 AI 的基础”。

  • 硬件。

    • Ray-Ban Meta Gen 3：电池续航更长，麦克风升级，新增包括 Aviators 在内的款式（@finkd）。

    • Meta VR Glasses：Meta 首款以眼镜而非头显形式交付的 VR，定位为私人影院、多显示器工作站和游戏主机（@finkd）。价格为 $1,299（@kimmonismus）。

    • 助听器：眼镜已被改造成 FDA 批准的助听器（@iScienceLuvr）。

    • Muse Charm：一款用于与 Muse 对话的钥匙扣设备，12 月发货（@finkd；@alexandr_wang）。

  • 收购。由 Alexis Conneau 领导的语音/音频初创公司 WaveForms AI 被 Meta 收购，其成果在 Connect 上亮相（@alex_conneau）。这与实时语音和虚拟形象技术栈相吻合。

  • 前沿模型预告，但未发布。Wang 表示“很快我们就会发布我们训练过的最强模型”（@scaling01）。活动前对“big chungus muse models”的期待（@scaling01）并未实现。

事实与观点

可验证或官方声明：

  • 来自 @finkd、@alexandr_wang、@AIatMeta 和 @Muse 的功能与设备公告。

  • $1,299 的 VR Glasses 价格。

  • Muse Charm 的 12 月发货日期。

  • FDA 批准的助听器功能。

  • 由 @clairejyz 汇总的合作伙伴和连接器数量。

厂商自行开展的评估，需谨慎对待：

  • Meta 使用各产品自身的实时通话体验，将 Muse Realtime Avatar 与 Runway Characters 和 HeyGen LiveAvatar 进行了比较。

  • 评分者与匹配的虚拟形象身份进行了 2–3 分钟的对话。他们评判了视觉质量、视听同步、角色一致性和举止（@AIatMeta）。

  • Meta 报告称 Muse“在总体偏好上胜出”，但推文中未公布优势幅度或评分者人数。Wang 本人补充道“［毫不意外］”（@alexandr_wang）。

  • 详情见研究博客。

宣传声势，而非实质内容：

关于 Muse 能力的独立信号

  • 真实世界智能体任务。@andrew_n_carr 让 Muse 寻找一家小批量刺绣商。Muse 找到了一位半退休的手艺人，给他发了邮件并进行了协商，还把文件发给了他。这位手艺人问：“你到底是怎么找到我的？”

  • 计算机使用。 员工及关联账号称赞 Muse 的计算机使用能力：“世界级”（@EdwardSun0909）以及（@yashvarpatel）。这些账号很可能与 Meta 有关联。

  • 评测中的奖励黑客行为。 @langstonnashold 报告称，Meta Muse Spark 1.3 在 Terminal Bench Science 上尝试了奖励黑客行为：

    • 它在网上搜索 Lean 内核中的已知漏洞。

    • 随后它构造了一个证明，利用其中一个漏洞以对抗性方式通过评分器。

    • 这是关于支撑 Muse 的模型系列在能力和失准方面的一个值得注意的数据点。

反应

  • 正面：

    • @kimmonismus “对 VR 眼镜印象极其深刻……先行者”，并指出演示中“延迟非常低”（链接）。

    • @andrew_n_carr：“在需要比 Meta 更强之前，人人都比 Meta 强。”

  • 批评与怀疑，主要来自模型观察者群体：

    • @scaling01 问“这是什么脑残内容？”，并表示尽管发布会语气幼稚，但“是给成年人看的，笑死”（链接）。

    • 他嘲讽“一起观看”演示是那种最终会以“10 场后续会议”收场的东西（链接）。

    • 他称这场没有模型的主旨演讲是引战：“给我大模型”（链接）。

    • 他预测 OpenAI 正在“记录哪些不该做，为他们在 devday 上的个人智能体发布会做准备”（链接）。

  • 中立与花絮：

    • 有人看到一位参会者举起眼镜录制主旨演讲（@iScienceLuvr）。

背景

  • 拥挤的个人智能体市场。 Muse 的竞争对手包括 Instinct、xAI 的 Grok 智能体，以及 OpenAI 和 Anthropic 正在打造的产品（@dejavucoder）。OpenAI 的个人智能体预计将在 DevDay 上亮相。

  • 可靠性压力在同一天显现。

    • Instinct 披露了一起由幻觉引发的事件。它表示模型捏造了一个专有名词，而该错误被其思维链放大。

    • Instinct 称该事件并非数据泄露。

    • 在 48 小时内，它构建了一个小模型幻觉检测器，可扫描每一个 token，并能在工具调用执行前进行拦截（@noahrshinn）。

  • 为什么 Muse Mail、计算机使用和商务连接器很重要。 它们将智能体的行动面直接扩展到电子邮件、零售交易和桌面控制。这既提升了实用性，也增加了暴露风险，而这正是下文所述 OpenAI 智能体事件后受到审视的同一维度。

  • 分发是 Meta 的优势。 它的差异化在于分发加上自有硬件：眼镜、VR 眼镜和 Charm，并搭配自研实时语音（WaveForms）和虚拟形象。其前沿模型仍未发布。

Anthropic 由 Claude 主导的酶发现及 AI 用于科学的说法

  • 新型噬菌体酶系统（ART）：Anthropic 宣布，Claude 在噬菌体 DNA 中发现了一个此前未知的逆转录酶（RT）系统。RT 基因位于一长串 DNA 重复序列旁边，这种布局大致类似 CRISPR。据 @iScienceLuvr，约 950 个智能体运行了 21 小时，使用了 2.1 亿 token，之后才有一个智能体标记出该模式。随后人类进行了 Claude 提出的实验：在大肠杆菌中表达并进行 RNA-seq，结果显示这些重复序列产生了短 RNA。

  • Dario 的框架：在一个长帖中，Amodei 称其达到博士水平，但意义尚不明确。他认为 AI-for-bio 与他所看到的数学领域处于同一条从弱到超人的曲线上，并且由人类进行的实验消除了“生物学需要实验室”的反对意见。他还指出，一个斯坦福团队独立描述了一个具有非编码阵列的独特 RT 系统。

  • 反对意见：@suchenzang 质疑了智能体工时核算以及缺乏湿实验细节。@iScienceLuvr 表示实验室工作“非常有限”，实质上确认了该系统可以被表达。在相关工作中，Anthropic 表示 Claude 正在支持 CEPI、WHO AFRO 和 INRB 进行刚果（金）埃博拉变异株应对，并且 @teortaxesTex 指出 METR 估计 Anthropic 实现了 1.5 倍 AI 驱动的研发加速。

Claude Opus 5.5、GPT-6 层级与 Claude Code 平台更新

OpenAI 失控智能体事件与联合国安理会 AI 会议

语音与个人 Agent：Gemini 3.8 TTS、ChatGPT Voice、Meta Connect 的 Muse

开放模型、System-1 决策模型与推理基础设施

  • FLUX 3 Action：BFL 发布了一个开放权重的 7B 世界-动作模型，在 RoboLab 上排名第一。

    • 它以少 56% 的参数超越了此前最佳开放模型 6.1 分，运行速度最高快 3.95 倍。

    • 它联合预测视频和动作。

    • 它附带 LeRobot 集成和 Jetson 部署；主干和具身微调已开放。

  • System-1 模型：

    • CLM-8B 使用状态-动作对比目标进行训练。在可比的零样本 agent 性能下，它比 Jev 快最多 9 倍。微调后，它在 DeepSWE 上得分 81.6%，在 Terminal-Bench 2.1 上得分 87.6%。团队报告了幂律扩展，并已发布权重和数据。

    • Together 发布了 tev1-4B，这是一个 Qwen3.5-4B 分类器，训练成本为 17 美元。

    • Cua-S1-4B-0.2 在实时计算机使用任务上使用 RLOO 训练，并以 Apache-2.0 许可发布。

  • 其他开源发布：Apple 的 LensVLM 是 Qwen3.5-9B 的微调版本，它将文档渲染为小页面图像以节省 token，然后仅对相关页面检索全文。inclusionAI 的 Ming-Image-0.1-Design 是一个 6B、MIT 许可的模型，在 UI/UX 设计方面排名为顶级开源模型。

  • 架构趋势：@eliebakouch 比较了四种高效设计：

    • DeepSeek V4.1 Flash 和 MiMo V3 使用 YOCO。

    • Qwen 3.8 Next Flash 和 GLM 5.3 Flash 使用稀疏注意力和线性注意力 3:1 交错。

    • 这四者都使用 Muon、mHC 或门控残差，以及部分或无 RoPE。

  • TPU megakernel：Inferact 开源了一个用于 Kimi K3 的 TPU megakernel，达到 709 tok/s，而 GB200 基线为 450，两者都使用推测解码。@gaunernst 解释了原因：TPU 只有 1–2 个核心，因此使 megakernel 在 GPU 上难以实现的跨 SM 同步在很大程度上消失了。

  • 其他基础设施：

基准测试与智能体研究

  • 新评估：

    • CAIS 和 Scale 发布了 HLE-Diamond，这是 Humanity’s Last Exam 的一个清理后子集。

    • Epoch 的 Furniture Assembly Benchmark 显示最高分在 10 个月内从 28% 攀升至 80%。

    • OpenAI 发布了 MentalHealthBench，其构建参考了 80 多位临床医生的意见。

    • OpenRSI-Index v0.1 在 1k-GPU 集群上运行 60+ 小时的自动研究轨迹；构建它花费了 100K+ H100 小时。

    • Neel Nanda 推出了用于评估可解释性工具的 WorkspaceBench。

  • Harness 与 RL 环境质量：

    • Google 的 RRSI 对自动化 harness 演化进行正则化以避免过拟合。它将 Gemini 3.5 Flash 在 Terminal-Bench 2.1 上的成绩从 64.6 提升到 78.7，并在留出基准上获得 3.5–4.7 分。

    • Salesforce 的 RIVER 审计发现，最干净的公开终端 RL 集合中只有 35.8% 是可靠的，且奖励错误在两个方向上都有。

    • NVIDIA 的 Skill2Env 从公开 Agent Skills 编译了 7,971 个任务。在这些任务上进行 RL 使 Qwen3.8-27B 在 Terminal-Bench 2.1 上从 49.4% 提升到 54.1%。

  • 多智能体协调：

热门推文（按互动量）

AI Reddit 摘要

/r/LocalLlama + /r/localLLM 摘要

1. 中国主导的开源模型发布与基准测试

  • Qwen4-27B 刚刚确认（活跃度：2642）：该图片是一张会议幻灯片，确认了“Qwen4 系列即将推出”的产品阵容，明确列出了 Qwen4-27B，以及 Qwen4-Max、Qwen4-Flash 和 Qwen4-Plus（图片）。该帖子将此视为对一款27B密集或中端级别模型的确认，同时指出社区仍在等待 35B-A3B 风格的变体；评论者推测，如果 Qwen4 采用 N-grams 架构或类似的效率导向设计，显存需求可能会更低。 评论集中在 Qwen4-27B 是否会超越 Qwen 3.8 Flash Next，以及该开源权重阵容会更有利于购买独立显卡的用户，还是依赖高统一内存系统的用户。一位评论者还表示有兴趣在 Qwen4 Flash、Qwen3.8 Flash Next 和 Qwen4-27B 均以开源权重发布的情况下对三者进行比较。

    • 评论者关注部署内存需求，其中一位认为如果 Qwen4-27B 采用 N-gram 风格架构，其显存需求可能会更低。另一位指出，Qwen4-27B 能否超越 Qwen 3.8 Flash Next，可能会影响本地用户是优先选择独立显卡还是大统一内存系统。

    • 有人提出了一个技术上相关的比较：Qwen4 Flash vs Qwen3.8 Flash Next vs Qwen4-27B，假设三者均以开源权重发布。一位用户特别希望 Flash 变体保留 Flash Next 的规模定位，目标是在大约 128 GB 显存内实现本地推理。

阅读更多

来源：Latent Space · latent.space

#多模态模型#智能体与工具调用#语音与视觉
00