- 期待已久的 Genie 4 来了!DeepMind 发布 Genie 4,Gemini 3.8 Flash 可观察生成场景、将任务拆解为步骤并逐步校验,场景变化时更新计划。DeepMind 同时展示 Gemini 4 Argon 与 Genie 4 联合模拟 Apollo 人形机器人下跳棋的实验。发布方称 Genie 4 + Gemini 可为机器人世界模型提供测试场所:任务中途移动物体后由 Gemini 重新规划,观察智能体能否恢复。
- Google、UCLA与CMU新论文发现AI编程工具常无法构建虚拟与混合现实应用Google、UCLA与CMU联合论文提出GenXR-Bench,含112个专家编写的XR功能开发、缺陷修复与完整应用构建任务,测试模拟手部与房间输入,与使用真实头显的盲测XR专家一致率为96.5%。评测显示Claude Opus 5以50.9%领先,但无模型在SDK功能任务上超过29.2%;失败运行中64.4%出现坐标系错误,44.9%出现启动竞态条件。作者建议用模拟手部与房间输入验证智能体产出的XR应用,因智能体自写单元测试常漏掉运行时缺陷。
- Genie 4 是 Google DeepMind 首个带原生音频的实时世界模型,可生成环境音、音乐和角色实时对话Google DeepMind 发布 Genie 4,称其为首个带原生音频的实时世界模型,可生成环境音、音乐,以及角色对用户和世界内事件作出反应的实时对话。用户可用文字改写运行中的模拟,如改变天气、移动镜头、添加人物,Gemini 负责把编辑适配进场景并保持连贯。Gemini 3.8 Flash 在循环中充当导演,拆解目标并检查帧;Gemini 4 Argon 借此模拟了 Apptronik 的 Apollo 人形机器人下跳棋。访问先从可信测试者开始,之后开放给 Google AI Ultra 订阅者和早期 Gemini API 合作伙伴。
- 评估具身视觉语言模型的社会推理能力研究在SHREC真实人机社会交互基准上评估Gemini Robotics-ER,并与已发表的通用VLM基线对比:Robotics-ER在错误/能力检测上优于GPT-4o-mini,但在细粒度社会属性判断上更差;增加一帧视觉输入对一个任务有帮助、对另一个任务有损害。作者指出比较跨越不同模型家族,差异不能单独归因于具身专用化,并提示多机器人系统共享基础模型可能使系统性社会感知错误影响多个协调决策。该工作为初步评估,跨情境与视频分析留待后续。
- Hugging Face ❤️ TorchTPU:TPU 原生支持Hugging Face 发布 TorchTPU,为 PyTorch 增加 TPU 原生后端,Transformers、Diffusers 和 Kernels 可直接在 TPU 上运行,无需再经 torch_xla 或 Optimum TPU。安装命令为 pip install torch-tpu 并指定 PyTorch CPU 构建索引;Transformers 中传 device_map="tpu" 即可加载模型,Diffusers 中 pipe.to("tpu") 即可推理。TorchTPU 附带为 TPU 调优的 Pallas 内核、分布式训练支持和 torch.compile 集成。
