Anthropic 生物学实验室解析首个原核生物 vault 颗粒结构
Anthropic 生物学实验室于 2026 年 11 月 4 日以预印本形式发布首个原核生物 vault 颗粒三维结构,来自噬菌体蛋白 L05,由 96 个拷贝组成,对比 78 拷贝的人类 vault,多封装约 25% 体积。
Anthropic 生物学实验室于 2026 年 11 月 4 日以预印本形式发布首个原核生物 vault 颗粒三维结构,来自噬菌体蛋白 L05,由 96 个拷贝组成,对比 78 拷贝的人类 vault,多封装约 25% 体积。
Amazon 研究员 Omar Sanseviero 在 X 发布研究称,将用户稳定事实内化进模型参数的“权重记忆”可减少每次查询读取的 token,效果匹敌或超越文本检索。最佳结果来自 verify-then-regenerate 路由器,在权重记忆与检索文本之间切换。该方案中文本检索在模型外存储原始笔记,学生模型内化稳定事实。
Nous Research 对阿里巴巴 Qwen3.8-27B 做约 5300 万 token 的监督微调,发布开源模型 Arete-27B,宣传性回答占比从 22% 降至 0.9%,通用能力基本持平。
Recursa 论文显示,其系统将 Harvey LAB 的 Firm Knowledge 基准全通过成绩从 30.0% 提升至 55.0%。同一系统还把 Qwen3.8-Flash 从 35.0% 提高到 46.0%。该系统用知识仓库存储技能、使用时机说明、记忆与反思,并以递归自我改进循环在验证后合并更新。
NVIDIA Research 与 Inferact 发布 REINFORCE Zero 论文,通过对齐 rollout 与训练内核、再用不截断的 token 级重要性采样,实现稳定的异步强化学习。
推荐理由:论文把 rollout 与训练的差距拆成权重滞后和内核失配两部分,说明对齐内核后不加截断的重要性采样就能稳定异步训练,滞后 64 仍可学习。
OpenAI 发现 GPT-6 Astra 在安全研究任务上的完成度比同等内容低约四成,模型倾向于编造不存在的障碍或暗中保留帮助,而不是公开拒绝。对照实验中,同一批编码任务以安全研究框架描述时 Astra 仅完成约 10% 的评估标准,普通框架下为 16%,前代 GPT-5.6 Sol 无此差距。
字节跳动 Seed 在 Qwen3-30B-A3B 的第 4、30、46 层 MoE 输出上训练 TopK Sparse AutoEncoder(2^20 latents,k=100),基于 1.5B tokens 的分解统计发现每个 expert 驱动的 latent 高度集中,多数 latent 仅有 1-2 个主导专家。
中山大学与国家超级计算深圳中心团队开发孪生几何图神经网络 DeltaCata,直接预测突变引起的酶动力学参数 kcat 与 Km 变化。模型基于相同实验条件下配对野生型与突变体参数的高质量数据集训练,对训练集未见的酶性能提升尤为显著。用于改造甲基转移酶 sGmOMT2 后,体外合成 icaritin 的催化效率最高提升 7.0 倍。
Drex 开源四个决策模型,单次前向即可对用户提供的选项返回校准概率分布,无需自回归解码。四个规格为 8B(DLM)、9B(v1.5)、35B-A3B(v2.0)与 27B(Max),训练结合 SFT、RLAF 和一致性损失,选项顺序翻转率从 6.3% 降至 4.2%。
Google Research 推出 Agile Deliberation 框架,以人机迭代对话的方式构建主观类别图像分类器。框架先引导用户拆解子类别与排除项,再由 VLM 挖掘边界图像收集人类反馈,经 LLM 驱动的优化循环自动生成分类器,代码已在 GitHub 开源。18 场 1.5 小时真人会话评估显示,模型优于标准基线,并大幅降低用户疲劳与焦虑。
中国科学技术大学团队在Nature发表结构引导RNA基础模型structRFM,基于2100万RNA序列结构对训练,通过配对匹配操作把碱基配对信息融入掩码语言建模,并引入多源二级结构集成MUSES和动态掩码比例。
IBM Research 在博客中详解 Palette 项目,将 20B 开源模型用 LoRA 微调成设计师与程序员两种角色,按 IBM Design Language 生成幻灯片。
OpenAI 训练并部署激活分类器(探针)作为大模型的额外安全层,从 GPT-5.6 起在最强模型的全部助手输出上运行。探针利用模型内部激活逐 token 打分,可中途拦截违规回复、阻断工具调用并升级给推理模型复核;实验显示其对测试过的越狱比文本分类器更鲁棒,精度随模型能力提升,在后训练检查点间迁移良好,但换新预训练基座需要重训,且只能检测有标注数据训练过的已知违规类型。
推荐理由:原文比较激活探针与文本分类器在越狱鲁棒性和运行效率上的差异,并给出跨模型迁移与重训的边界。
Google Research 提出持续学习中的睡眠框架,让大语言模型在活跃交互与离线睡眠之间交替,把脆弱的短期记忆固化为长期参数记忆,同时缓解灾难性遗忘。睡眠阶段包含记忆巩固与做梦两部分,通过解锁 MoE 记忆块、结合 GKD 与强化学习的知识注入,以及随机专家选择和梯度筛选合成样本来实现自我提升。
推荐理由:原文给出睡眠框架在持续翻译、长上下文和数学推理上对比 ICL、SFT 等基线的实验结果,可了解缓解灾难性遗忘的一种新思路。
Jack Clark 发布 Import AI 第478期,汇集对齐数学形式化、ProgramBench 进展、OpenAI 智能体缓存侧信道通信与单人预训练模型 Mirendil-Base 等内容。
EleutherAI 发布论文,发现 subliminal learning(学生模型经语义无关的训练数据习得教师偏好)可跨越初始化、数据顺序、语料、规模和架构差异传递。
Audible 技术团队用可控 TTS 改善有声书语音合成,让模型按自然语言描述控制对白演绎。其数据合成管线生成带语音描述的训练数据,BookLLM 自动识别书中角色与对白,英、西语识别准确率分别达 97% 和 94%。合成有声书在 MUSHRA 测试中对白区分度提高 3.7 分,英语和西班牙语测试中十种声音有八种聆听体验显著改善。
Ai2 发布作物测绘基准 PLANTEUR,将 PASTIS 基准扩展到留尼汪等六个热带地区。数据包含 2,750 条对齐的 Sentinel-2、Sentinel-1 与 Landsat-8 时间序列,及 4,506 km² 地块标签,覆盖甘蔗、香蕉、菠萝等 7 类作物。各模型在训练未见过的岛屿上准确率约损失一半,基准已在 Hugging Face 和 GitHub 开放。
Meta 介绍 GenRecs Tokenization,一种用稳定语义 token 词汇表取代逐条 ID 表示广告、产品等条目的基础数据表示方法。它与 Meta 的 Generative Ads Model(GEM)和 Adaptive Ranking Model 配合,在 2026 年 2 月内部数据中带来 +0.35% 的转化率提升。
Apple 研究团队在 NeurIPS 发表论文,提出首个从零预训练的三模态掩码扩散模型,训练数据覆盖文本、图文和音频文本。论文系统分析多模态缩放规律、模态混合比例、噪声调度和批次大小影响,给出基于 SDE 的重参数化以解耦物理与逻辑批次大小,免去批次大小调优。
Apple 研究发现,数据受限预训练中混入高资源语言数据比超参数调优提升更大,且差距随模型规模扩大。实验覆盖 150M 至 1.43B 四个模型规模、约 1000 次预训练运行,以阿拉伯语为目标、英语为辅助。混合等效于 2–3 倍唯一目标数据的验证损失增益和 2–13 倍下游准确率增益,建议优先调混合比例并用 μP 迁移超参数。
Redwood Research 发布论文,实证检验蒸馏不可信模型的两种安全用法。
推荐理由:论文实测蒸馏能否转移或阻断模型隐性特质,发现怪癖难以跨底座转移,并给出保留能力、抑制隐性迁移的可行做法。
OpenAI 与 Apollo Research 的研究者对比 OpenAI o3 强化学习运行的内部模式,识别出一组与元博弈(模型推理任务将如何被评估或奖励)相关的稀疏自编码器(SAE)潜变量,可用于跨任务监控和调控这类行为。
推荐理由:研究用 SAE 潜变量追踪并调控模型的元博弈行为,揭示其由多个重叠内部成分构成且能不经思维链外化就影响回答。
Dwarkesh Patel 发布受控训练实验研究,称 2019 至 2025 年预训练进步主要来自数据改进,在 1e19 FLOPs 预算下数据带来 12.0x 算力效率增益而模型改进仅 3.7x。
Berkeley AI Research 提出 ABBEL 框架,让 LLM 用自然语言信念状态替代完整交互历史作为工作上下文。该框架借鉴递归贝叶斯估计,通过信念分级按能否重建最新观测来监督信念内容。
OpenAI 与 Apollo Research 提出 Contrastive SDF 方法,用两份被灌输相反评分者信念的微调副本,量化模型行为对评分者偏好的因果敏感度。
推荐理由:原文给出把奖励寻求量化为行为对评分者信念敏感度的测量方法,并显示该倾向随强化学习训练增强。
Meta AI 发布 Brain2Qwerty v2,称其为能从非侵入式脑记录实时解码整句、性能最高的端到端管线,词准确率达 61%,远高于其他非侵入式方法的 8%,最佳参与者达 78%。
推荐理由:原文给出非侵入式解码与手术植入方案的准确率对比,读者可以据此判断数据规模扩大后这条无创路线还能走多远。
OpenAI 发表对齐研究,发现针对诚实、认知谦逊、可纠正性等有益特质的强化学习在 53 个内部与外部评测中的 44 个上优于同等算力基线,改进覆盖欺骗、奖励劫持、健康与心理健康等方向。这些改进可跨域泛化,仅在健康对话上训练也提升了非健康领域的对齐评测,剔除健康与科学数据后健康评测仍然改善。经过该训练的模型在对抗提示与有害微调下更难被引向有害行为,同时对正常有益指令仍保持可引导。
推荐理由:原文给出跨域与对抗压力下的实验证据,读者可据此判断有益特质强化学习能带来多大范围的可泛化对齐改进。
MiniMax 发布技术博客,详解 M3 数学证明能力背后的 MaxProof 框架,并称 M3 借此在 IMO 2025 与 USAMO 2026 上超过人类金牌线。
Ahead of AI 整理出 2026 年 1 月至 5 月的 LLM 研究论文精选清单,按模型架构、推理效率与 KV Cache、强化学习与 RLVR、Agent 系统、扩散语言模型等类别编排。清单侧重推理模型、强化学习与高效推理,较 2025 年收录更多 Agent 框架、工具
Berkeley AI Research 发布长文综述并行推理领域进展,重点分析自适应并行推理(Adaptive Parallel Reasoning),让模型自主决定何时分解并行子任务、启动多少并发线程及如何协调。