跳到正文
11月5日周四
  1. Apple Machine Learning Research49

    Apple 用小型神经网络加速 MIPS 检索,让 RAG 更快更高效

    Apple 在 ICML 2026 论文中提出用小型神经网络学习 MIPS 支持函数,离线训练一次即可在推理时实现更快、更准确的 RAG 检索。论文给出两种模型:SupportNet 用 ICNN 学习支持函数以改进路由,KeyNet 直接输出最佳匹配的 key 向量。该方法面向查询分布稳定的生产场景,以前期摊销成本换取检索速度与准确率提升。

10月26日周一
  1. Apple Machine Learning Research43

    GHARP:基于大规模重建先验的实时高斯头部动画

    Apple 于 2026 年 10 月在 ACCV 发表论文,提出实时 3D 头部动画方法 GHARP,仅需少量输入图像和表情驱动信号。该方法将离线身份建模与运行时动画解耦,动画阶段是面向移动设备优化的轻量网络。GHARP 在 Ava-256 基准上达到 SOTA 质量,在 A100 GPU 上最高提速 13×、高斯数量减少 8×。

10月15日周四
  1. Apple Machine Learning Research44

    Selection-Based Structured Reasoning:迈向高效多模态搜索智能体

    Apple 研究团队提出 Selection-Based Structured Reasoning(SSR)框架,将多模态搜索智能体的逐步推理从开放式生成改为从预置候选中选取。在 2B 和 4B 模型、七个多模态搜索基准上的评估显示,SSR 平均成功率与同规模领先搜索智能体相当,单轮推理延迟降低逾 90%,每题总模型推理延迟降低 28–54%。

  2. Apple Machine Learning Research65

    Apple 演示用 MLX 与 RDMA 在 Mac Studio 上本地及多机运行大模型推理

    Apple 机器学习研究团队发布教程,演示用最新版 MLX 与 RDMA over Thunderbolt 在 Mac Studio 上本地及跨机运行大模型推理,816B 参数的 MoE 模型 Muse Spark Open 在四台 M5 Ultra 上生成速度达 36.73 tokens/s。

    推荐理由:原文在同一基准下对比 M3 Ultra 与 M5 Ultra 单机及多机并行的表现,读者可据此估算在 Mac Studio 上本地运行大模型所需的机器数量与速度。

10月14日周三
  1. Apple Machine Learning Research55

    Apple 在 NeurIPS 发表三模态掩码扩散模型设计空间研究

    Apple 研究团队在 NeurIPS 发表论文,提出首个从零预训练的三模态掩码扩散模型,训练数据覆盖文本、图文和音频文本。论文系统分析多模态缩放规律、模态混合比例、噪声调度和批次大小影响,给出基于 SDE 的重参数化以解耦物理与逻辑批次大小,免去批次大小调优。

10月13日周二
  1. Apple Machine Learning Research46

    混合而非调参:Apple 研究显示数据受限场景下双语预训练优于超参数搜索

    Apple 研究发现,数据受限预训练中混入高资源语言数据比超参数调优提升更大,且差距随模型规模扩大。实验覆盖 150M 至 1.43B 四个模型规模、约 1000 次预训练运行,以阿拉伯语为目标、英语为辅助。混合等效于 2–3 倍唯一目标数据的验证损失增益和 2–13 倍下游准确率增益,建议优先调混合比例并用 μP 迁移超参数。

7月29日周三
6月8日周一
4月14日周二