评分理由: 论文提出HouseMind，一个多模态大语言模型，专注于建筑平面图的理解、生成和编辑。核心与大语言模型（LLMs）高度相关（10分），因为它是一个多模态LLM框架。与指令调优（Instruction Tuning）高度相关（10分），因为模型通过指令调优实现可控生成。与AI for Science相关（10分），因为它将AI应用于建筑领域，属于科学应用。与小型语言模型（SLMs）有一定关联（5分），因为摘要提到模型高效且可本地部署。与预训练（Pre-training）和微调（SFT）有一定关联（5分），因为模型训练涉及多模态对齐和指令调优。与推理（Chain of Thought, System 2 Thinking）有一定关联（5分），因为任务需要几何和空间推理。其他关键词如MoE、RLHF、RAG等未在摘要中提及，评为0分。

建筑平面图设计需要对几何结构、语义信息与空间层级进行联合推理，这对当前人工智能系统仍构成重大挑战。尽管近期扩散模型与语言模型提升了视觉逼真度，但其在空间连贯推理与可控生成方面仍存在困难。本文提出HouseMind——一个多模态大语言模型，将平面图理解、生成与编辑统一于单一框架中。我们引入离散的房间实例（room-instance）标记来构建统一词汇表，从而连接布局设计与符号推理。通过多模态对齐与指令微调，该模型能够根据文本指令生成连贯且可控的平面布局。实验表明，该框架在保持高效性与本地可部署性的同时，实现了更优的几何有效性与生成可控性。

Architectural floor plan design demands joint reasoning over geometry, semantics, and spatial hierarchy, which remains a major challenge for current AI systems. Although recent diffusion and language models improve visual fidelity, they still struggle with coherent spatial reasoning and controllable generation. We present HouseMind, a multimodal large language model that unifies floor plan understanding, generation, and editing in one framework. We introduce discrete room-instance tokens to construct a unified vocabulary that bridges layouts and symbolic reasoning. With multimodal alignment and instruction tuning, the model synthesizes coherent, controllable layouts from text instructions. Experiments show how the framework achieves superior geometric validity and controllability while remaining efficient and locally deployable.

!!! info

论文采用的技术路线主要包含两个核心部分：首先，使用分层VQ-VAE模块对建筑平面图进行结构化Token化，分别对轮廓和房间实例进行编码，将图像转化为离散的Token序列；其次，通过三阶段训练流程（嵌入初始化、多模态预训练、指令微调）对多模态大语言模型进行训练，实现文本与空间表示的对齐。最终，模型通过自回归生成的方式完成理解、生成和编辑任务。

• 统一性强：将理解、生成和编辑整合在一个模型中，简化了工作流程。
• 可控性高：通过离散Token实现了细粒度的房间级控制和文本引导。
• 推理能力强：结合了LLM的符号推理能力和VQ-VAE的几何表示能力。
• 部署友好：相比扩散模型计算效率高，易于在本地部署。

• 分辨率限制：输入输出图像尺寸为64x64px，可能难以表达复杂的建筑细节。
• 数据依赖：模型性能依赖于RPLAN数据集，可能存在数据偏差或对特定建筑风格的泛化问题。
• 拓扑约束：虽然改善了空间连贯性，但在严格的建筑规范（如门的位置、走廊宽度）方面可能仍需后处理验证。

评分理由: 论文核心研究小型多语言模型（3.35B参数）的训练和应用，高度相关关键词包括：Small Language Models（核心研究对象）、Pre-training（基础模型训练）、Post-training（区域感知后训练）、Instruction Tuning（指令调优变体）、Large Language Models（属于大模型范畴）。Scaling Laws AND Data Quality得5分，因论文涉及数据组成和替代扩展路径，但非核心。其余关键词如MoE、RLHF、RAG等未在摘要中提及，得0分。

Tiny Aya重新定义了小型多语言模型所能达到的边界。该模型基于70种语言进行训练，并通过区域感知的后训练阶段进行精调，仅以3.35B参数规模便在翻译质量、多语言理解能力以及高质量目标语言生成方面实现了业界领先水平。本次发布包含一个预训练基础模型、一个全球平衡的指令微调版本，以及三个针对非洲、南亚、欧洲-亚太和西亚地区语言进行专门优化的区域定制模型。本报告详细阐述了Tiny Aya背后的训练策略、数据构成与综合评估框架，并提出了一条以效率为核心、注重语言间性能均衡且兼顾实际部署需求的多语言人工智能发展新路径。

Tiny Aya redefines what a small multilingual language model can achieve. Trained on 70 languages and refined through region-aware posttraining, it delivers state-of-the-art in translation quality, strong multilingual understanding, and high-quality target-language generation, all with just 3.35B parameters. The release includes a pretrained foundation model, a globally balanced instruction-tuned variant, and three region-specialized models targeting languages from Africa, South Asia, Europe, Asia-Pacific, and West Asia. This report details the training strategy, data composition, and comprehensive evaluation framework behind Tiny Aya, and presents an alternative scaling path for multilingual AI: one centered on efficiency, balanced performance across languages, and practical deployment.

!!! info

研究方法包括构建一个大规模多语言分词器，利用语言桶加权策略平衡数据分布；在预训练阶段，通过语言分组平衡和“Cooldown”策略（高质量数据上采样）处理70种语言及代码数据；在后训练阶段，将语言聚类为5个区域，利用合成数据生成（翻译、提示转换、FusioN）创建平衡数据集，并训练全局与区域模型后进行合并。评估采用涵盖翻译、理解、推理、生成及安全性的综合多语言基准测试。

• 效率高：在小参数规模下实现了高性能，适合实际部署。
• 公平性强：显著减少了高资源和低资源语言之间的性能差距。
• 评估全面：评估框架广泛，涵盖了翻译、推理、安全性和文化意识。
• 灵活性：提供基础、全局和区域专用模型，以适应不同的用例。
• 数据为中心：强调数据质量和平衡，而不是仅仅扩大模型规模。

• 规模限制：尽管效率很高，但3.35B参数可能仍然缺乏超大规模模型（如100B+）的某些复杂推理能力。
• 合成数据依赖：严重依赖翻译和合成生成，可能会引入伪影或继承“教师”模型的偏见。
• 区域聚类简化：将语言聚类到5个区域可能会简化某些语言或方言的细微差别。
• 评估局限：虽然基准测试广泛，但可能无法完全捕捉现实世界的细微差别或所有70种语言的特定文化背景。

评分理由: 论文核心研究预训练模型参数分布中任务专家的密度问题，与"Mixture of Experts"高度相关（10分），直接讨论专家解决方案；与"Pre-training"和"Post-training"高度相关（10分），聚焦预训练权重和并行后训练方法；与"Large Language Models"相关（8分），涉及大规模模型特性；与"Model Merging"相关（8分），通过集成预测实现模型组合；与"Small Language Models"有一定关联（5分），对比了小模型情况；其他关键词如Scaling Laws、RLHF、RAG等未在论文中涉及，得0分。

预训练产生的学习参数向量通常被视为后续迭代适应的起点。在本研究中，我们提出将预训练结果视为参数向量上的分布，其支撑集已包含任务特定的专家模型。我们证明，在小型模型中此类专家解仅占据该分布体积的极小部分，因此其发现依赖于梯度下降等结构化优化方法。相比之下，在大型且充分预训练的模型中，任务专家的密度显著增加，使得多样化、能提升任务性能的专家模型大量分布于预训练权重邻域内。基于此视角，我们探索了一种完全并行的简单后训练方法：随机采样 $N$ 个参数扰动，选取最优的 $K$ 个样本，并通过多数投票进行预测集成。尽管方法简单，该策略在当代大规模模型中与PPO、GRPO、ES等标准后训练方法相比仍具有竞争力。

Pretraining produces a learned parameter vector that is typically treated as a starting point for further iterative adaptation. In this work, we instead view the outcome of pretraining as a distribution over parameter vectors, whose support already contains task-specific experts. We show that in small models such expert solutions occupy a negligible fraction of the volume of this distribution, making their discovery reliant on structured optimization methods such as gradient descent. In contrast, in large, well-pretrained models the density of task-experts increases dramatically, so that diverse, task-improving specialists populate a substantial fraction of the neighborhood around the pretrained weights. Motivated by this perspective, we explore a simple, fully parallel post-training method that samples $N$ parameter perturbations at random, selects the top $K$, and ensembles predictions via majority vote. Despite its simplicity, this approach is competitive with standard post-training methods such as PPO, GRPO, and ES for contemporary large-scale models.

!!! info

论文首先对 Qwen2.5 等不同规模的预训练模型施加高斯噪声扰动，并在数学、编程、写作、化学等多个任务上评估性能。通过定义“解决方案密度”和“谱不协调度”量化了权重空间的密度和多样性。随后，提出了 RandOpt 方法：随机生成 N 个权重扰动，在验证集上评估选出前 K 个，最后通过多数投票集成预测。实验将 RandOpt 与 PPO、GRPO、ES 等主流算法进行了对比。

• 理论洞察深刻，揭示了预训练规模如何改变损失景观的几何性质，解释了为何大模型更容易微调。
• 方法极简且高效，RandOpt 抛弃了梯度计算，完全并行化，大幅缩短了训练时间。
• 实验证据详实，通过多个模型规模和多种任务验证了密度和多样性的缩放定律。

• 推理成本较高，由于需要集成 K 个模型，推理时的计算开销和延迟是基线方法的 K 倍。
• 依赖强预训练基座，该方法主要适用于已经进入“灌木丛”状态的大模型，对小模型效果有限。
• 并非旨在追求 SOTA 性能，作者更多将其作为一种探测工具，在某些任务上可能不如精心调优的梯度方法。

评分理由: 论文核心研究LLM代理在临床工作流中的应用，与"Large Language Models"、“LLM Agents”、“Tool Use”、“Multi-agent Systems"高度相关（10分），因为论文明确讨论LLM代理、工具调用和多代理协调。与"AI for Science"相关（10分），因为论文专注于医疗领域的AI应用。其他关键词如MoE、SFT、RAG等未在摘要中提及，与论文内容无关（0分）。

大型语言模型（LLM）智能体通过整合推理、工具调用与持久记忆，扩展了传统生成模型的能力。近期研究表明，此类智能体可通过自动化文档处理、协调诊疗流程及辅助医疗决策，显著改善临床工作流。然而，尽管进展迅速，由于可靠性局限、安全风险及长期记忆机制不足，在医疗环境中部署自主智能体仍面临挑战。本研究提出一种适用于医院环境的LLM智能体架构。该设计引入四个核心组件：受Linux多用户系统启发的受限执行环境；连接患者与临床医生智能体的以文档为中心的交互范式；专为长期临床情境管理设计的页面索引记忆架构；以及支持临床任务序列按需组合的精选医疗技能库。该架构并非赋予智能体无限制的系统访问权限，而是通过预定义技能接口和资源隔离来约束其行为。我们认为，此类系统构成了“医院智能体操作系统”的基础——这是一个能够协调临床工作流，同时保障安全性、透明性与可审计性的计算层。本研究基于OpenClaw（一个将智能体能力构建为离散技能精选库的开源自主动智能体框架）实现设计，并通过临床安全部署所需的基础设施级约束对其进行扩展。

Large language model (LLM) agents extend conventional generative models by integrating reasoning, tool invocation, and persistent memory. Recent studies suggest that such agents may significantly improve clinical workflows by automating documentation, coordinating care processes, and assisting medical decision making. However, despite rapid progress, deploying autonomous agents in healthcare environments remains difficult due to reliability limitations, security risks, and insufficient long-term memory mechanisms. This work proposes an architecture that adapts LLM agents for hospital environments. The design introduces four core components: a restricted execution environment inspired by Linux multi-user systems, a document-centric interaction paradigm connecting patient and clinician agents, a page-indexed memory architecture designed for long-term clinical context management, and a curated medical skills library enabling ad-hoc composition of clinical task sequences. Rather than granting agents unrestricted system access, the architecture constrains actions through predefined skill interfaces and resource isolation. We argue that such a system forms the basis of an Agentic Operating System for Hospital, a computing layer capable of coordinating clinical workflows while maintaining safety, transparency, and auditability. This work grounds the design in OpenClaw, an open-source autonomous agent framework that structures agent capabilities as a curated library of discrete skills, and extends it with the infrastructure-level constraints required for safe clinical deployment.

!!! info

论文采用系统架构设计的研究方法。首先分析现有LLM智能体框架（如ReAct, Reflexion）和RAG技术在医疗场景下的局限性；然后基于OpenClaw开源框架进行扩展，提出包含受限执行、页索引记忆、文档交互和技能库四个核心组件的架构设计；最后论证该架构如何满足医院环境的安全性、记忆结构和动态工作流需求。

• 针对性强：专门针对医疗环境的隐私、审计和结构化文档需求进行了设计，解决了通用智能体框架在医疗落地时的“水土不服”问题。
• 架构创新：提出的页索引记忆架构挑战了主流的向量检索范式，更符合临床病历的时序性和结构性特征。
• 安全可控：通过受限执行环境和资源隔离，显著提高了自主智能体在敏感环境中的部署安全性。
• 灵活性高：通过技能库的动态组合，能够处理传统固定流程系统无法覆盖的复杂、罕见临床病例。

• 论文主要侧重于架构设计和理论论证，尚未提供具体的临床实验数据或大规模部署的性能评估结果。
• 页索引记忆架构完全依赖LLM的语言推理能力来导航文档，对于推理能力较弱的模型可能会导致检索效率低下或错误。
• 实施复杂度较高，相比于即插即用的RAG系统，构建和维护页索引清单及受限环境需要更多的工程投入。

评分理由: 论文提出了一种用于自主多模态查询处理的智能体框架，核心是中央监督器协调跨文本、图像、音频、视频和文档模态的专用工具。与关键词的相关性分析如下：1）高度相关（10分）：“Small Language Models (SLMs)"（摘要中明确提到SLM-assisted modality decomposition）、“LLM Agents/Autonomous Agents”（框架本质是agentic AI）、“Tool Use/Function Calling”（框架协调多种模态工具）；2）中等相关（8分）：“Large Language Models”（使用RouteLLM进行学习路由）、“Multi-agent Systems”（中央监督器协调多个工具代理）；3）无关（0分）：其余关键词未在论文中涉及，论文聚焦于多模态工具协调框架而非模型训练、推理优化、对齐等具体技术。

我们提出一种用于自主多模态查询处理的智能体AI框架，该框架能够协调跨文本、图像、音频、视频和文档模态的专用工具。一个中央监督器（Supervisor）动态分解用户查询，将子任务委派给适配相应模态的工具（例如目标检测、OCR、光学字符识别、语音转录），并通过自适应路由策略而非预定的决策树来综合结果。针对纯文本查询，该框架使用通过RouteLLM学习到的路由机制，而非文本路径则采用SLM辅助的模态分解方法。在涵盖15个任务类别的2,847个查询上进行评估后，我们的框架在保持准确率相当的前提下，相比匹配的层次化基线，实现了准确答案获取时间减少72%、对话返工减少85%以及成本降低67%。这些结果表明，智能化的集中式编排从根本上改善了多模态AI部署的经济性。

We present an agentic AI framework for autonomous multimodal query processing that coordinates specialized tools across text, image, audio, video, and document modalities. A central Supervisor dynamically decomposes user queries, delegates subtasks to modality-appropriate tools (e.g., object detection, OCR, speech transcription), and synthesizes results through adaptive routing strategies rather than predetermined decision trees. For text-only queries, the framework uses learned routing via RouteLLM, while non-text paths use SLM-assisted modality decomposition. Evaluated on 2,847 queries across 15 task categories, our framework achieves 72% reduction in time-to-accurate-answer, 85% reduction in conversational rework, and 67% cost reduction compared to the matched hierarchical baseline while maintaining accuracy parity. These results demonstrate that intelligent centralized orchestration fundamentally improves multimodal AI deployment economics.

!!! info

论文构建了一个中央编排架构，Supervisor读取工具的形式化规范，根据查询特征和历史记忆状态做出上下文路由决策。对于文本查询，利用RouteLLM进行模型级路由；对于多模态查询，利用SLM辅助进行模态分解。研究在包含2,847个查询、跨越15个任务类别的数据集上进行了评估，并与匹配的分层基线进行了对比分析。

• 显著提升了多模态AI系统的经济性和响应速度，大幅降低了运营成本。
• 解决了传统基于规则或预定义树路由系统的脆弱性，能够处理未预见的新型查询模式。
• 架构具有良好的扩展性和复用性，Supervisor本身也是可组合组件，支持递归编排。
• 通过局部故障恢复机制，避免了级联失败和全局重启，提高了系统鲁棒性。

• Supervisor本身的推理能力可能成为系统瓶颈，其决策质量直接影响整体性能。
• 维护工具的形式化接口规范（如前置/后置条件）需要额外的开发和维护开销。
• 对于极端新颖或复杂的模态组合，系统的自适应能力仍取决于Supervisor的泛化能力。

评分理由: 论文提出CrossEarth-SAR，一个用于合成孔径雷达（SAR）图像跨域语义分割的十亿级视觉基础模型，其核心创新在于采用了物理引导的稀疏混合专家（MoE）架构，因此与"Mixture of Experts"高度相关（15分）。作为SAR领域的视觉基础模型，它与"Large Language Models"和"Foundation Models"相关（10分）。研究涉及大规模预训练，与"Pre-training"相关（10分）。该工作属于地球观测科学中的人工智能应用，与"AI for Science"相关（10分）。论文未涉及语言模型、推理、对齐、微调、代理、效率优化等其他具体技术，因此其余关键词评分为0分。

合成孔径雷达（SAR）能够实现全球、全天候的地球观测。然而，由于成像机制的多样性，不同传感器和区域之间的域偏移严重阻碍了其语义泛化能力。为解决这一问题，我们提出了CrossEarth-SAR，这是首个基于新型物理引导稀疏专家混合（MoE）架构构建的十亿级SAR视觉基础模型，该架构融合了物理描述符，并专为跨域语义分割而设计。为促进大规模预训练，我们开发了CrossEarth-SAR-200K数据集，这是一个包含公开和私有SAR影像的弱监督与全监督统一数据集。我们还引入了一套基准测试集，涵盖8个不同域差距下的22个子基准，为SAR影像的域泛化语义分割建立了首个统一标准。大量实验表明，CrossEarth-SAR在20个基准测试中取得了最先进的结果，在多差距迁移场景下的部分基准上，其平均交并比（mIoU）超越先前方法超过10%。所有代码、基准测试集和数据集都将公开提供。

Synthetic Aperture Radar (SAR) enables global, all-weather earth observation. However, owing to diverse imaging mechanisms, domain shifts across sensors and regions severely hinder its semantic generalization. To address this, we present CrossEarth-SAR, the first billion-scale SAR vision foundation model built upon a novel physics-guided sparse mixture-of-experts (MoE) architecture incorporating physical descriptors, explicitly designed for cross-domain semantic segmentation. To facilitate large-scale pre-training, we develop CrossEarth-SAR-200K, a weakly and fully supervised dataset that unifies public and private SAR imagery. We also introduce a benchmark suite comprising 22 sub-benchmarks across 8 distinct domain gaps, establishing the first unified standard for domain generalization semantic segmentation on SAR imagery. Extensive experiments demonstrate that CrossEarth-SAR achieves state-of-the-art results on 20 benchmarks, surpassing previous methods by over 10% mIoU on some benchmarks under multi-gap transfer. All code, benchmark and datasets will be publicly available.

!!! info

论文采用了基于DINOv2的Vision Transformer（ViT）作为主干网络，将其中的前馈网络（FFN）替换为稀疏混合专家层。为了稳定路由过程，引入了SAR物理算子计算三个关键描述符：成像几何（方向熵HDE）、雷达系统（等效视数ENL）和地形散射差异。这些描述符与Token嵌入结合输入路由器，以选择最合适的专家进行激活。模型使用Mask2Former作为解码器，并在CrossEarth-SAR-200K数据集上进行联合优化，训练目标包括分割损失和负载平衡损失。

• 规模与架构创新：首次将十亿级参数模型引入SAR领域，并创新性地结合物理引导的稀疏MoE架构，解决了大模型在特定领域应用的计算瓶颈。
• 物理感知深度学习：将SAR的物理成像机制（如几何、散射特性）深度融入神经网络设计，体现了“AI for Science”的深度融合。
• 数据与基准贡献：构建的大规模数据集和全面基准填补了SAR域泛化研究的空白，具有重要的社区价值。
• 性能优越：在广泛的域间隙下表现出显著的性能提升，证明了模型强大的泛化能力。

• 计算资源需求：尽管采用了稀疏MoE，十亿级参数的模型在训练和推理时仍需较高的计算资源，可能限制其在边缘设备上的部署。
• 数据依赖性：模型性能高度依赖于大规模预训练数据集CrossEarth-SAR-200K，虽然包含部分私有数据，但数据的全面性和标注质量对最终效果至关重要。
• 实现复杂度：引入物理描述符计算和复杂的路由机制增加了系统的工程实现难度。

评分理由: 论文核心研究LLM智能体在主动推理任务中的强化学习训练问题，特别是’信息自锁’现象。高度相关的关键词包括：‘Large Language Models’（论文明确研究LLM agents）、‘LLM Agents’（核心研究对象）、‘Chain of Thought’和’System 2 Thinking’（论文研究主动推理和多步推理能力）。‘Self-Correction’有一定关联，因为论文提出通过注入定向批评来帮助agent改进。其他关键词如MoE、SFT、RAG、量化等均未在摘要中提及，与论文内容无关。

基于结果奖励的强化学习（RL）在训练大语言模型（LLM）智能体执行复杂推理任务方面已取得显著成功。然而，在主动推理场景中，智能体需要策略性地提出问题以获取任务相关信息，我们发现通过RL训练的LLM智能体常受困于信息自锁现象：智能体停止提出信息丰富的问题，且难以内化已获得的信息。为理解这一现象，我们将主动推理分解为两个核心能力：行动选择（Action Selection, AS），即通过查询决定观察流；以及信念追踪（Belief Tracking, BT），即基于收集到的证据更新智能体的信念。我们证明，AS与BT能力的不足会限制RL训练期间的信息探索。此外，探索不足反过来又会阻碍AS与BT能力的提升，形成一个反馈循环，将智能体锁定在低信息状态中。为解决此问题，我们提出一种简单而有效的方法，通过注入易于获取的方向性评判来重新分配学习信号，以帮助智能体摆脱自锁状态。在7个数据集上的大量实验表明，我们的方法显著缓解了信息自锁问题，带来了最高达60%的性能提升。

Reinforcement learning (RL) with outcome-based rewards has achieved significant success in training large language model (LLM) agents for complex reasoning tasks. However, in active reasoning where agents need to strategically ask questions to acquire task-relevant information, we find that LLM agents trained with RL often suffer from information self-locking: the agent ceases to ask informative questions and struggles to internalize already-obtained information. To understand the phenomenon, we decompose active reasoning into two core capabilities: Action Selection (AS), which determines the observation stream through queries, and Belief Tracking (BT), which updates the agent’s belief based on collected evidence. We show that deficient AS and BT capabilities will limit the information exploration during RL training. Furthermore, insufficient exploration in turn hinders the improvement of AS and BT, creating a feedback loop that locks the agent in a low-information regime. To resolve the issue, we propose a simple yet effective approach that reallocates the learning signal by injecting easy- to-obtain directional critiques to help the agent escape self-locking. Extensive experiments with 7 datasets show that our approach significantly mitigates the information self-locking, bringing up to 60% improvements.

!!! info

论文首先将主动推理建模为部分可观测马尔可夫决策过程（POMDP），并定义了AS和BT的代理指标以量化智能体行为。接着，通过理论分析推导了在低AS和BT机制下，学习信号如何被掩盖以及自锁状态如何形成。基于此，作者提出了AREW方法，该方法利用环境反馈（如用户是否提供了新信息）生成方向性批评，并在策略梯度优化中利用这些批评对优势函数进行重新加权，从而强化有效的动作选择和信念更新。最后，在PE-G（偏好估计）和MediQ（医疗诊断）等7个数据集上进行了广泛的实验验证。

• 问题定义新颖且具有实际意义，精准捕捉了当前LLM智能体训练中的一个关键痛点。
• 理论分析扎实，不仅观察到了现象，还通过AS和BT的分解解释了其背后的动力学机制。
• 解决方案（AREW）轻量且高效，不需要复杂的额外模型或昂贵的标注，仅利用易于获取的诊断信号。
• 实验全面，涵盖了不同类型的任务（如偏好估计、医疗诊断）和不同的模型规模，证明了方法的鲁棒性。

• 方法依赖于易于获取的诊断信号（如判断查询是否带来新信息），在某些复杂环境中，这种信号可能难以定义或存在噪声。
• 目前的研究主要集中在主动推理（提问）任务上，对于其他类型的智能体行为（如工具使用、物理交互）的适用性尚需进一步验证。
• 理论分析基于一定的假设条件，现实世界中的环境动态可能比理论模型更为复杂。

评分理由: 论文核心研究动态适配器（结合MoE和LoRA）在LLMs中的高效推理问题，与"Large Language Models”、“Mixture of Experts”、“PEFT/LoRA"高度相关（10分），因为直接研究这些技术的集成与优化。与"Speculative Decoding/Inference Acceleration"高度相关（10分），因为主要贡献是减少推理延迟的加速技术。与其他关键词无关（0分），因为论文专注于系统优化而非模型训练、对齐、应用领域或其他特定技术。

将动态稀疏结构（如混合专家模型，MoE）与参数高效适配器（例如低秩自适应，LoRA）相结合，是增强大语言模型（LLM）能力的一项强大技术。然而，这种架构改进带来了高昂代价：尽管计算负载增加甚微，推理延迟却常常急剧上升，导致解码速度降低超过2.5倍。通过细粒度性能分析，我们发现主要瓶颈并非在于计算本身，而在于传统动态路由所需的大量零散、顺序执行的CUDA内核启动所带来的严重开销。为应对这一挑战，我们提出了AdaFuse框架，该框架基于算法与底层硬件系统的紧密协同设计，以实现高效的动态适配器执行。AdaFuse摒弃了传统的逐层或逐块路由策略，转而采用一种令牌级预门控策略，即在处理每个令牌之前，为其所有适配器层做出一次全局路由决策。这种“一次决策，处处应用”的方法有效地静态化了每个令牌的执行路径，从而为整体优化创造了条件。我们充分利用这一点，开发了一个定制的CUDA内核，该内核执行融合切换操作，将所选所有LoRA适配器的参数在一次高效传递中合并到骨干模型中。在主流开源大语言模型上的实验结果表明，AdaFuse在达到与先进动态适配器相当精度的同时，将解码延迟大幅降低了超过2.4倍，从而弥合了模型能力与推理效率之间的差距。

The integration of dynamic, sparse structures like Mixture-of-Experts (MoE) with parameter-efficient adapters (e.g., LoRA) is a powerful technique for enhancing Large Language Models (LLMs). However, this architectural enhancement comes at a steep cost: despite minimal increases in computational load, the inference latency often skyrockets, leading to decoding speeds slowing by over 2.5 times. Through a fine-grained performance analysis, we pinpoint the primary bottleneck not in the computation itself, but in the severe overhead from fragmented, sequential CUDA kernel launches required for conventional dynamic routing. To address this challenge, we introduce AdaFuse, a framework built on a tight co-design between the algorithm and the underlying hardware system to enable efficient dynamic adapter execution. Departing from conventional layer-wise or block-wise routing, AdaFuse employs a token-level pre-gating strategy, which makes a single, global routing decision for all adapter layers before a token is processed. This “decide-once, apply-everywhere” approach effectively staticizes the execution path for each token, creating an opportunity for holistic optimization. We capitalize on this by developing a custom CUDA kernel that performs a fused switching operation, merging the parameters of all selected LoRA adapters into the backbone model in a single, efficient pass. Experimental results on popular open-source LLMs show that AdaFuse achieves accuracy on par with state-of-the-art dynamic adapters while drastically cutting decoding latency by a factor of over 2.4x, thereby bridging the gap between model capability and inference efficiency.

!!! info

论文首先通过细粒度性能分析，定位动态适配器推理延迟的瓶颈在于CUDA内核启动而非计算本身。随后，提出AdaFuse框架，包含算法层面的令牌级预门控架构，改变传统的逐层路由方式。在系统层面，开发融合CUDA内核以高效管理适配器的合并与切换。最后，在Llama2-7B等开源大模型上进行广泛实验，与MOLA、PESC、MoRAL等基线模型在准确性和解码延迟上进行对比评估。

• 解决了动态适配器在实际部署中的关键性能瓶颈，具有极高的工程实用价值。
• 创新性地结合了算法设计（预门控）与底层系统优化（融合内核），提供了跨层级的解决方案。
• 对延迟来源的分析深入且准确，指出了计算量与实际运行时间之间的非线性关系。
• 在大幅提升推理速度的同时保持了模型精度，实现了能力与效率的良好平衡。

• 令牌级预门控（“决定一次，处处应用”）可能在某些需要逐层精细调整的复杂任务中限制了模型的灵活性。
• 开发自定义CUDA内核增加了实现的复杂度，可能在不同硬件环境下的移植和维护存在挑战。
• 主要优化集中在解码阶段，对于预填充阶段的性能提升可能相对有限。

评分理由: 论文核心研究LLM-based educational agents的scaling laws，与"Large Language Models"和"Scaling Laws"高度相关（10分）。论文明确研究educational agents，与"LLM Agents"高度相关（10分）。论文提到tool completeness和Tool Scaling，与"Tool Use"有一定关联（5分）。论文研究multi-agent platform，与"Multi-agent Systems"有一定关联（5分）。其他关键词如MoE、SLMs、训练方法、推理技术、压缩等均未涉及（0分）。

尽管大型语言模型（LLM）在模型参数量、训练数据量和计算资源方面的缩放规律已得到广泛研究，但基于LLM的教育智能体的缩放行为仍未被探索。我们认为，教育智能体的能力提升不仅依赖于底层模型规模，更应通过一系列结构化维度实现，我们将其统称为智能体缩放定律：角色定义清晰度、技能深度、工具完备性、运行时能力以及教育专家知识注入。该框架的核心是AgentProfile——一种基于JSON的结构化规范，它作为实现教育智能体能力系统性增长的机制。我们提出了EduClaw，一个基于配置驱动的多智能体平台，该平台实践了此缩放定律，并通过构建和部署330多个涵盖K-12学科、包含1100多个技能模块的教育智能体配置，验证了其有效性。我们的实证观察表明，教育智能体的性能可随配置结构丰富度实现可预测的缩放。我们提出了两个互补的缩放轴——工具缩放与技能缩放——作为未来发展方向，并指出，实现更强大教育人工智能的路径不仅在于使用更大规模的模型，更在于构建更强大的结构化能力系统。

While scaling laws for Large Language Models (LLMs) have been extensively studied along dimensions of model parameters, training data, and compute, the scaling behavior of LLM-based educational agents remains unexplored. We propose that educational agent capability scales not merely with the underlying model size, but through structured dimensions that we collectively term the Agent Scaling Law: role definition clarity, skill depth, tool completeness, runtime capability, and educator expertise injection. Central to this framework is AgentProfile, a structured JSON-based specification that serves as the mechanism enabling systematic capability growth of educational agents. We present EduClaw, a profile-driven multi-agent platform that operationalizes this scaling law, demonstrating its effectiveness through the construction and deployment of 330+ educational agent profiles encompassing 1,100+ skill modules across K-12 subjects. Our empirical observations suggest that educational agent performance scales predictably with profile structural richness. We identify two complementary scaling axes – Tool Scaling and Skill Scaling – as future directions, arguing that the path to more capable educational AI lies not solely in larger models, but in stronger structured capability systems.

!!! info

论文采用了理论构建与实证开发相结合的方法。首先，通过理论分析提出了智能体缩放定律的数学模型，将智能体能力分解为角色、维度、技能、工具和运行时等变量。其次，设计了AgentProfile这一结构化数据规范来量化这些变量。最后，开发了EduClaw多智能体平台作为验证环境，构建了包含大量K-12学科智能体和技能模块的生态系统，通过实际部署观察性能随结构丰富度的变化。

• 视角新颖: 将缩放定律从模型层面扩展到智能体层面，提出了结构化能力缩放的新范式。
• 通用性强: AgentProfile设计为领域无关的协议，不仅限于教育，具有广泛的应用潜力。
• 工程落地: 提供了具体的平台（EduClaw）和大规模的实证数据（330+ agents），验证了理论的可行性。
• 解决痛点: 针对教育领域需求长尾分布的问题，提出了通过外化专业化而非微调模型的经济高效解决方案。

• 评估指标缺失: 论文主要描述了平台构建和定性观察，缺乏具体的定量评估指标（如学生成绩提升、交互质量评分）来严格证明缩放定律的数学关系。
• 未来工作未完成: 工具缩放和技能缩放仅作为概念提出，尚未进行深入研究和验证。
• 依赖基础模型: 该方法仍依赖于底层LLM的能力，若基础模型推理能力不足，结构化Profile的效果可能受限。

评分理由: 论文核心是开发波兰语长上下文编码器模型，通过位置嵌入适应和全参数持续预训练实现8192令牌上下文处理，并创建压缩变体。与"Large Language Models"相关（8分），因为涉及LLM架构讨论；与"Pre-training"高度相关（10分），因为采用两阶段训练和持续预训练；与"Context Window Extension"高度相关（15分），因为这是论文核心创新点。其他关键词如MoE、SFT、RAG等未涉及，得0分。

尽管仅解码器架构的大语言模型（LLM）近期主导了自然语言处理领域，但仅编码器架构在判别性任务中仍是成本效益高且参数效率优良的标准方案。然而，诸如BERT等经典编码器受限于较短的上下文窗口，难以处理长文档。本文针对波兰语模型解决了这一限制，引入了一个能够处理长达8192个词元序列的高质量波兰语模型。该模型通过采用两阶段训练流程开发，包括位置嵌入适配和全参数持续预训练。此外，我们提出了通过知识蒸馏训练的压缩模型变体。这些模型在25项任务上进行了评估，包括KLEJ基准测试、新引入的金融任务集（FinBench）以及其他分类与回归任务，特别是需要长文档理解的任务。结果表明，我们的模型在波兰语及多语言模型中取得了最佳平均性能，在长上下文任务上显著优于竞争方案，同时在短文本处理上保持了相当的质量。

While decoder-only Large Language Models (LLMs) have recently dominated the NLP landscape, encoder-only architectures remain a cost-effective and parameter-efficient standard for discriminative tasks. However, classic encoders like BERT are limited by a short context window, which is insufficient for processing long documents. In this paper, we address this limitation for the Polish by introducing a high-quality Polish model capable of processing sequences of up to 8192 tokens. The model was developed by employing a two-stage training procedure that involves positional embedding adaptation and full parameter continuous pre-training. Furthermore, we propose compressed model variants trained via knowledge distillation. The models were evaluated on 25 tasks, including the KLEJ benchmark, a newly introduced financial task suite (FinBench), and other classification and regression tasks, specifically those requiring long-document understanding. The results demonstrate that our model achieves the best average performance among Polish and multilingual models, significantly outperforming competitive solutions in long-context tasks while maintaining comparable quality on short texts.

!!! info

研究基于现有的Polish RoBERTa Large v2模型进行架构扩展。首先将位置嵌入层扩展至8192个位置，并采用Flash Attention和无污染打包优化训练效率。训练过程分为两个阶段：第一阶段冻结模型权重，仅训练新的位置嵌入；第二阶段对全模型进行持续预训练。此外，利用知识蒸馏（基于最后一层token表示的MSE损失）将模型压缩为12层和6层的版本。最后在25个下游任务上进行综合评估。

• 技术路线清晰，两阶段训练策略有效平衡了长文本和短文本的处理能力。
• 引入的工程优化（Flash Attention、无污染打包）显著提升了训练效率和模型质量。
• 提供了不同尺寸的模型变体，兼顾了高性能场景和资源受限场景的需求。
• 评估全面，不仅包含通用基准，还引入了金融领域的专业数据集，具有很高的实用价值。

• 知识蒸馏过程仅使用了最后一层的MSE损失，未利用注意力矩阵蒸馏，可能限制了压缩模型的性能上限。
• 虽然上下文扩展至8192 tokens，但与现代Decoder-only LLM（通常支持32k甚至128k tokens）相比仍有差距。
• 模型主要针对波兰语，其技术方法在其他低资源语言上的泛化效果尚需验证。

评分理由: 论文核心研究LLM向模块化、技能化智能体（LLM Agents/Autonomous Agents）的架构转变，通过挖掘开源仓库（如GitHub）自动获取高质量智能体技能，属于大模型在不同领域的研究应用创新。因此，与"Large Language Models"和"LLM Agents"高度相关（10分）。论文涉及从现有智能体系统（如TheoremExplainAgent, Code2Video）提取技能，这些系统可能使用工具（如Manim动画引擎），因此与"Tool Use"和"Multi-agent Systems"有一定关联（5分）。论文未直接讨论其他关键词的具体技术（如MoE、训练方法、推理优化等），也未涉及特定科学领域（如生物信息学），故其他关键词评分为0分。

从单体式大语言模型向模块化、技能化智能体的转变，代表了人工智能部署领域一次根本性的架构转型。尽管通用模型在陈述性知识上展现出卓越的广度，但其在自主工作流中的应用常受限于专业程序性知识的不足。本报告研究了一种通过挖掘GitHub等平台上的开源仓库，以自动化方式获取高质量智能体技能的系统性框架。我们聚焦于从包括TheoremExplainAgent和Code2Video在内的先进系统中提取可视化与教育能力，这两者均利用了Manim数学动画引擎。该框架涵盖仓库结构分析、通过密集检索进行语义技能识别，以及向标准化SKILL.md格式的转换。我们证明，通过对智能体仓库进行系统性提取，并结合严格的安全治理与多维评估指标，能够实现程序性知识的规模化获取，从而增强大语言模型的能力，而无需进行模型再训练。我们的分析表明，智能体生成的教育内容在知识传递效率上可实现40%的提升，同时其教学品质可与人工编写的教程相媲美。

The transition from monolithic large language models (LLMs) to modular, skill-equipped agents represents a fundamental architectural shift in artificial intelligence deployment. While general-purpose models demonstrate remarkable breadth in declarative knowledge, their utility in autonomous workflows is frequently constrained by insufficient specialized procedural expertise. This report investigates a systematic framework for automated acquisition of high-quality agent skills through mining of open-source repositories on platforms such as GitHub. We focus on the extraction of visualization and educational capabilities from state-of-the-art systems including TheoremExplainAgent and Code2Video, both utilizing the Manim mathematical animation engine. The framework encompasses repository structural analysis, semantic skill identification through dense retrieval, and translation to the standardized SKILL.md format. We demonstrate that systematic extraction from agentic repositories, combined with rigorous security governance and multi-dimensional evaluation metrics, enables scalable acquisition of procedural knowledge that augments LLM capabilities without requiring model retraining. Our analysis reveals that agent-generated educational content can achieve 40% gains in knowledge transfer efficiency while maintaining pedagogical quality comparable to human-crafted tutorials.

!!! info

研究采用三阶段流程：首先，利用repo2AI等工具进行仓库结构分析，生成目录映射和上下文；其次，通过双编码器进行密集检索计算相似度，并利用交叉编码器进行二进制排序以识别潜在技能；最后，将识别出的模式转换为SKILL.md格式，包括生成YAML元数据、编写LLM可消费的程序指令以及打包可执行资产。

• 提供了一种无需重新训练底层大模型即可扩展智能体能力的途径，降低了计算成本。
• 采用SKILL.md标准，促进了技能的互操作性和复用性。
• 实现了从代码挖掘到技能生成的自动化流程，减少了人工编写技能的工作量。
• 通过具体的开源项目验证了框架的有效性，并给出了量化的效率提升数据。

• 框架的效果严重依赖于源仓库代码的质量、文档完整性和逻辑清晰度。
• 提取的技能可能仍受限于原始代码的特定领域，跨领域迁移可能需要额外调整。
• 在大规模自动化挖掘过程中，如何确保提取的代码不包含恶意逻辑或漏洞仍是一个挑战。
• 目前的案例主要集中在可视化和教育领域，在其他复杂领域的适用性有待进一步验证。

评分理由: 论文明确研究LLM驱动的自主代理（LLM Agents）用于复杂多步任务，与关键词1和17高度相关（10分）。论文讨论用户需要模拟长期效果，涉及推理过程，与关键词13和14有一定关联（5分）。其他关键词涉及具体技术细节（如MoE、量化、训练方法等）或特定应用领域（如生物信息学），论文未涉及，得0分。

大型语言模型（LLM）正日益被用于驱动自主智能体执行复杂的多步骤任务。然而，当前的人机交互仍然是点状且反应式的：用户通过批准或纠正单个操作来规避即时风险，却无法预知后续影响。这迫使用户必须在脑海中模拟长期效应，这一过程不仅认知负荷高，且往往不够准确。用户虽能控制单个步骤，却缺乏做出知情决策所需的预见能力。我们认为，有效的协作需要预见性，而不仅仅是控制权。为此，我们提出“仿真循环内嵌”这一交互范式，使用户与智能体能够在做出最终决策前，共同探索模拟的未来轨迹。仿真将干预行为从被动的猜测转变为有依据的探索，同时帮助用户在过程中发现潜在的约束条件与偏好。本视角论文分析了现有范式的局限性，提出了基于仿真的协作概念框架，并通过具体的人机协作场景阐述了其潜在价值。

Large Language Models (LLMs) are increasingly used to power autonomous agents for complex, multi-step tasks. However, human-agent interaction remains pointwise and reactive: users approve or correct individual actions to mitigate immediate risks, without visibility into subsequent consequences. This forces users to mentally simulate long-term effects, a cognitively demanding and often inaccurate process. Users have control over individual steps but lack the foresight to make informed decisions. We argue that effective collaboration requires foresight, not just control. We propose simulation-in-the-loop, an interaction paradigm that enables users and agents to explore simulated future trajectories before committing to decisions. Simulation transforms intervention from reactive guesswork into informed exploration, while helping users discover latent constraints and preferences along the way. This perspective paper characterizes the limitations of current paradigms, introduces a conceptual framework for simulation-based collaboration, and illustrates its potential through concrete human-agent collaboration scenarios.

!!! info

论文主要采用概念框架构建和场景分析的方法。作者首先批判了现有的点对点交互模式，然后提出了包含智能体工作流、动作空间、仿真和仿真影响四个核心概念的理论框架。通过旅行规划的具体场景（如航班转接选择）对比了传统模式与新模式的差异，并分析了实现该范式所需的设计空间权衡及潜在的技术挑战。

• 视角新颖：指出了当前LLM智能体交互中“缺乏远见”的关键痛点，并提出了具有前瞻性的解决方案。
• 理论清晰：构建了完整的概念框架，将抽象的仿真过程具体化为可操作的设计维度。
• 实用性强：通过具体场景展示了仿真如何帮助用户发现风险和机会，对提升复杂任务中的人机协作效率有重要指导意义。

• 技术实现难度高：在开放领域构建可靠的仿真环境极具挑战，依赖LLM进行自我仿真可能产生幻觉。
• 认知负荷问题：展示过多未来轨迹可能让用户感到困惑，如何筛选和呈现关键信息仍是未解难题。
• 缺乏实证数据：作为一篇观点论文，目前主要停留在概念和框架层面，缺乏用户实验数据来验证该范式的有效性。

评分理由: 论文提出HouseMind，一个多模态大语言模型，专注于建筑平面图的理解、生成和编辑。核心与大语言模型（LLMs）高度相关（10分），因为它是一个多模态LLM框架。与指令调优（Instruction Tuning）高度相关（10分），因为模型通过指令调优实现可控生成。与AI for Science相关（10分），因为它将AI应用于建筑领域，属于科学应用。与小型语言模型（SLMs）有一定关联（5分），因为摘要提到模型高效且可本地部署。与预训练（Pre-training）和微调（SFT）有一定关联（5分），因为模型训练涉及多模态对齐和指令调优。与推理（Chain of Thought, System 2 Thinking）有一定关联（5分），因为任务需要几何和空间推理。其他关键词如MoE、RLHF、RAG等未在摘要中提及，评为0分。

建筑平面图设计需要对几何结构、语义信息与空间层级进行联合推理，这对当前人工智能系统仍构成重大挑战。尽管近期扩散模型与语言模型提升了视觉逼真度，但其在空间连贯推理与可控生成方面仍存在困难。本文提出HouseMind——一个多模态大语言模型，将平面图理解、生成与编辑统一于单一框架中。我们引入离散的房间实例（room-instance）标记来构建统一词汇表，从而连接布局设计与符号推理。通过多模态对齐与指令微调，该模型能够根据文本指令生成连贯且可控的平面布局。实验表明，该框架在保持高效性与本地可部署性的同时，实现了更优的几何有效性与生成可控性。

Architectural floor plan design demands joint reasoning over geometry, semantics, and spatial hierarchy, which remains a major challenge for current AI systems. Although recent diffusion and language models improve visual fidelity, they still struggle with coherent spatial reasoning and controllable generation. We present HouseMind, a multimodal large language model that unifies floor plan understanding, generation, and editing in one framework. We introduce discrete room-instance tokens to construct a unified vocabulary that bridges layouts and symbolic reasoning. With multimodal alignment and instruction tuning, the model synthesizes coherent, controllable layouts from text instructions. Experiments show how the framework achieves superior geometric validity and controllability while remaining efficient and locally deployable.

评分理由: 论文核心研究小型多语言模型（3.35B参数）的训练和应用，高度相关关键词包括：Small Language Models（核心研究对象）、Pre-training（基础模型训练）、Post-training（区域感知后训练）、Instruction Tuning（指令调优变体）、Large Language Models（属于大模型范畴）。Scaling Laws AND Data Quality得5分，因论文涉及数据组成和替代扩展路径，但非核心。其余关键词如MoE、RLHF、RAG等未在摘要中提及，得0分。

Tiny Aya重新定义了小型多语言模型所能达到的边界。该模型基于70种语言进行训练，并通过区域感知的后训练阶段进行精调，仅以3.35B参数规模便在翻译质量、多语言理解能力以及高质量目标语言生成方面实现了业界领先水平。本次发布包含一个预训练基础模型、一个全球平衡的指令微调版本，以及三个针对非洲、南亚、欧洲-亚太和西亚地区语言进行专门优化的区域定制模型。本报告详细阐述了Tiny Aya背后的训练策略、数据构成与综合评估框架，并提出了一条以效率为核心、注重语言间性能均衡且兼顾实际部署需求的多语言人工智能发展新路径。

Tiny Aya redefines what a small multilingual language model can achieve. Trained on 70 languages and refined through region-aware posttraining, it delivers state-of-the-art in translation quality, strong multilingual understanding, and high-quality target-language generation, all with just 3.35B parameters. The release includes a pretrained foundation model, a globally balanced instruction-tuned variant, and three region-specialized models targeting languages from Africa, South Asia, Europe, Asia-Pacific, and West Asia. This report details the training strategy, data composition, and comprehensive evaluation framework behind Tiny Aya, and presents an alternative scaling path for multilingual AI: one centered on efficiency, balanced performance across languages, and practical deployment.

评分理由: 论文核心研究预训练模型参数分布中任务专家的密度问题，与"Mixture of Experts"高度相关（10分），直接讨论专家解决方案；与"Pre-training"和"Post-training"高度相关（10分），聚焦预训练权重和并行后训练方法；与"Large Language Models"相关（8分），涉及大规模模型特性；与"Model Merging"相关（8分），通过集成预测实现模型组合；与"Small Language Models"有一定关联（5分），对比了小模型情况；其他关键词如Scaling Laws、RLHF、RAG等未在论文中涉及，得0分。

预训练产生的学习参数向量通常被视为后续迭代适应的起点。在本研究中，我们提出将预训练结果视为参数向量上的分布，其支撑集已包含任务特定的专家模型。我们证明，在小型模型中此类专家解仅占据该分布体积的极小部分，因此其发现依赖于梯度下降等结构化优化方法。相比之下，在大型且充分预训练的模型中，任务专家的密度显著增加，使得多样化、能提升任务性能的专家模型大量分布于预训练权重邻域内。基于此视角，我们探索了一种完全并行的简单后训练方法：随机采样 $N$ 个参数扰动，选取最优的 $K$ 个样本，并通过多数投票进行预测集成。尽管方法简单，该策略在当代大规模模型中与PPO、GRPO、ES等标准后训练方法相比仍具有竞争力。

Pretraining produces a learned parameter vector that is typically treated as a starting point for further iterative adaptation. In this work, we instead view the outcome of pretraining as a distribution over parameter vectors, whose support already contains task-specific experts. We show that in small models such expert solutions occupy a negligible fraction of the volume of this distribution, making their discovery reliant on structured optimization methods such as gradient descent. In contrast, in large, well-pretrained models the density of task-experts increases dramatically, so that diverse, task-improving specialists populate a substantial fraction of the neighborhood around the pretrained weights. Motivated by this perspective, we explore a simple, fully parallel post-training method that samples $N$ parameter perturbations at random, selects the top $K$, and ensembles predictions via majority vote. Despite its simplicity, this approach is competitive with standard post-training methods such as PPO, GRPO, and ES for contemporary large-scale models.

评分理由: 论文核心研究LLM代理在临床工作流中的应用，与"Large Language Models”、“LLM Agents”、“Tool Use”、“Multi-agent Systems"高度相关（10分），因为论文明确讨论LLM代理、工具调用和多代理协调。与"AI for Science"相关（10分），因为论文专注于医疗领域的AI应用。其他关键词如MoE、SFT、RAG等未在摘要中提及，与论文内容无关（0分）。

大型语言模型（LLM）智能体通过整合推理、工具调用与持久记忆，扩展了传统生成模型的能力。近期研究表明，此类智能体可通过自动化文档处理、协调诊疗流程及辅助医疗决策，显著改善临床工作流。然而，尽管进展迅速，由于可靠性局限、安全风险及长期记忆机制不足，在医疗环境中部署自主智能体仍面临挑战。本研究提出一种适用于医院环境的LLM智能体架构。该设计引入四个核心组件：受Linux多用户系统启发的受限执行环境；连接患者与临床医生智能体的以文档为中心的交互范式；专为长期临床情境管理设计的页面索引记忆架构；以及支持临床任务序列按需组合的精选医疗技能库。该架构并非赋予智能体无限制的系统访问权限，而是通过预定义技能接口和资源隔离来约束其行为。我们认为，此类系统构成了“医院智能体操作系统”的基础——这是一个能够协调临床工作流，同时保障安全性、透明性与可审计性的计算层。本研究基于OpenClaw（一个将智能体能力构建为离散技能精选库的开源自主动智能体框架）实现设计，并通过临床安全部署所需的基础设施级约束对其进行扩展。

Large language model (LLM) agents extend conventional generative models by integrating reasoning, tool invocation, and persistent memory. Recent studies suggest that such agents may significantly improve clinical workflows by automating documentation, coordinating care processes, and assisting medical decision making. However, despite rapid progress, deploying autonomous agents in healthcare environments remains difficult due to reliability limitations, security risks, and insufficient long-term memory mechanisms. This work proposes an architecture that adapts LLM agents for hospital environments. The design introduces four core components: a restricted execution environment inspired by Linux multi-user systems, a document-centric interaction paradigm connecting patient and clinician agents, a page-indexed memory architecture designed for long-term clinical context management, and a curated medical skills library enabling ad-hoc composition of clinical task sequences. Rather than granting agents unrestricted system access, the architecture constrains actions through predefined skill interfaces and resource isolation. We argue that such a system forms the basis of an Agentic Operating System for Hospital, a computing layer capable of coordinating clinical workflows while maintaining safety, transparency, and auditability. This work grounds the design in OpenClaw, an open-source autonomous agent framework that structures agent capabilities as a curated library of discrete skills, and extends it with the infrastructure-level constraints required for safe clinical deployment.

评分理由: 论文提出了一种用于自主多模态查询处理的智能体框架，核心是中央监督器协调跨文本、图像、音频、视频和文档模态的专用工具。与关键词的相关性分析如下：1）高度相关（10分）：“Small Language Models (SLMs)"（摘要中明确提到SLM-assisted modality decomposition）、“LLM Agents/Autonomous Agents”（框架本质是agentic AI）、“Tool Use/Function Calling”（框架协调多种模态工具）；2）中等相关（8分）：“Large Language Models”（使用RouteLLM进行学习路由）、“Multi-agent Systems”（中央监督器协调多个工具代理）；3）无关（0分）：其余关键词未在论文中涉及，论文聚焦于多模态工具协调框架而非模型训练、推理优化、对齐等具体技术。

我们提出一种用于自主多模态查询处理的智能体AI框架，该框架能够协调跨文本、图像、音频、视频和文档模态的专用工具。一个中央监督器（Supervisor）动态分解用户查询，将子任务委派给适配相应模态的工具（例如目标检测、OCR、光学字符识别、语音转录），并通过自适应路由策略而非预定的决策树来综合结果。针对纯文本查询，该框架使用通过RouteLLM学习到的路由机制，而非文本路径则采用SLM辅助的模态分解方法。在涵盖15个任务类别的2,847个查询上进行评估后，我们的框架在保持准确率相当的前提下，相比匹配的层次化基线，实现了准确答案获取时间减少72%、对话返工减少85%以及成本降低67%。这些结果表明，智能化的集中式编排从根本上改善了多模态AI部署的经济性。

We present an agentic AI framework for autonomous multimodal query processing that coordinates specialized tools across text, image, audio, video, and document modalities. A central Supervisor dynamically decomposes user queries, delegates subtasks to modality-appropriate tools (e.g., object detection, OCR, speech transcription), and synthesizes results through adaptive routing strategies rather than predetermined decision trees. For text-only queries, the framework uses learned routing via RouteLLM, while non-text paths use SLM-assisted modality decomposition. Evaluated on 2,847 queries across 15 task categories, our framework achieves 72% reduction in time-to-accurate-answer, 85% reduction in conversational rework, and 67% cost reduction compared to the matched hierarchical baseline while maintaining accuracy parity. These results demonstrate that intelligent centralized orchestration fundamentally improves multimodal AI deployment economics.

评分理由: 论文提出CrossEarth-SAR，一个用于合成孔径雷达（SAR）图像跨域语义分割的十亿级视觉基础模型，其核心创新在于采用了物理引导的稀疏混合专家（MoE）架构，因此与"Mixture of Experts"高度相关（15分）。作为SAR领域的视觉基础模型，它与"Large Language Models"和"Foundation Models"相关（10分）。研究涉及大规模预训练，与"Pre-training"相关（10分）。该工作属于地球观测科学中的人工智能应用，与"AI for Science"相关（10分）。论文未涉及语言模型、推理、对齐、微调、代理、效率优化等其他具体技术，因此其余关键词评分为0分。

合成孔径雷达（SAR）能够实现全球、全天候的地球观测。然而，由于成像机制的多样性，不同传感器和区域之间的域偏移严重阻碍了其语义泛化能力。为解决这一问题，我们提出了CrossEarth-SAR，这是首个基于新型物理引导稀疏专家混合（MoE）架构构建的十亿级SAR视觉基础模型，该架构融合了物理描述符，并专为跨域语义分割而设计。为促进大规模预训练，我们开发了CrossEarth-SAR-200K数据集，这是一个包含公开和私有SAR影像的弱监督与全监督统一数据集。我们还引入了一套基准测试集，涵盖8个不同域差距下的22个子基准，为SAR影像的域泛化语义分割建立了首个统一标准。大量实验表明，CrossEarth-SAR在20个基准测试中取得了最先进的结果，在多差距迁移场景下的部分基准上，其平均交并比（mIoU）超越先前方法超过10%。所有代码、基准测试集和数据集都将公开提供。

Synthetic Aperture Radar (SAR) enables global, all-weather earth observation. However, owing to diverse imaging mechanisms, domain shifts across sensors and regions severely hinder its semantic generalization. To address this, we present CrossEarth-SAR, the first billion-scale SAR vision foundation model built upon a novel physics-guided sparse mixture-of-experts (MoE) architecture incorporating physical descriptors, explicitly designed for cross-domain semantic segmentation. To facilitate large-scale pre-training, we develop CrossEarth-SAR-200K, a weakly and fully supervised dataset that unifies public and private SAR imagery. We also introduce a benchmark suite comprising 22 sub-benchmarks across 8 distinct domain gaps, establishing the first unified standard for domain generalization semantic segmentation on SAR imagery. Extensive experiments demonstrate that CrossEarth-SAR achieves state-of-the-art results on 20 benchmarks, surpassing previous methods by over 10% mIoU on some benchmarks under multi-gap transfer. All code, benchmark and datasets will be publicly available.

评分理由: 论文核心研究LLM智能体在主动推理任务中的强化学习训练问题，特别是’信息自锁’现象。高度相关的关键词包括：‘Large Language Models’（论文明确研究LLM agents）、‘LLM Agents’（核心研究对象）、‘Chain of Thought’和’System 2 Thinking’（论文研究主动推理和多步推理能力）。‘Self-Correction’有一定关联，因为论文提出通过注入定向批评来帮助agent改进。其他关键词如MoE、SFT、RAG、量化等均未在摘要中提及，与论文内容无关。

基于结果奖励的强化学习（RL）在训练大语言模型（LLM）智能体执行复杂推理任务方面已取得显著成功。然而，在主动推理场景中，智能体需要策略性地提出问题以获取任务相关信息，我们发现通过RL训练的LLM智能体常受困于信息自锁现象：智能体停止提出信息丰富的问题，且难以内化已获得的信息。为理解这一现象，我们将主动推理分解为两个核心能力：行动选择（Action Selection, AS），即通过查询决定观察流；以及信念追踪（Belief Tracking, BT），即基于收集到的证据更新智能体的信念。我们证明，AS与BT能力的不足会限制RL训练期间的信息探索。此外，探索不足反过来又会阻碍AS与BT能力的提升，形成一个反馈循环，将智能体锁定在低信息状态中。为解决此问题，我们提出一种简单而有效的方法，通过注入易于获取的方向性评判来重新分配学习信号，以帮助智能体摆脱自锁状态。在7个数据集上的大量实验表明，我们的方法显著缓解了信息自锁问题，带来了最高达60%的性能提升。

Reinforcement learning (RL) with outcome-based rewards has achieved significant success in training large language model (LLM) agents for complex reasoning tasks. However, in active reasoning where agents need to strategically ask questions to acquire task-relevant information, we find that LLM agents trained with RL often suffer from information self-locking: the agent ceases to ask informative questions and struggles to internalize already-obtained information. To understand the phenomenon, we decompose active reasoning into two core capabilities: Action Selection (AS), which determines the observation stream through queries, and Belief Tracking (BT), which updates the agent’s belief based on collected evidence. We show that deficient AS and BT capabilities will limit the information exploration during RL training. Furthermore, insufficient exploration in turn hinders the improvement of AS and BT, creating a feedback loop that locks the agent in a low-information regime. To resolve the issue, we propose a simple yet effective approach that reallocates the learning signal by injecting easy- to-obtain directional critiques to help the agent escape self-locking. Extensive experiments with 7 datasets show that our approach significantly mitigates the information self-locking, bringing up to 60% improvements.

评分理由: 论文核心研究动态适配器（结合MoE和LoRA）在LLMs中的高效推理问题，与"Large Language Models”、“Mixture of Experts”、“PEFT/LoRA"高度相关（10分），因为直接研究这些技术的集成与优化。与"Speculative Decoding/Inference Acceleration"高度相关（10分），因为主要贡献是减少推理延迟的加速技术。与其他关键词无关（0分），因为论文专注于系统优化而非模型训练、对齐、应用领域或其他特定技术。

将动态稀疏结构（如混合专家模型，MoE）与参数高效适配器（例如低秩自适应，LoRA）相结合，是增强大语言模型（LLM）能力的一项强大技术。然而，这种架构改进带来了高昂代价：尽管计算负载增加甚微，推理延迟却常常急剧上升，导致解码速度降低超过2.5倍。通过细粒度性能分析，我们发现主要瓶颈并非在于计算本身，而在于传统动态路由所需的大量零散、顺序执行的CUDA内核启动所带来的严重开销。为应对这一挑战，我们提出了AdaFuse框架，该框架基于算法与底层硬件系统的紧密协同设计，以实现高效的动态适配器执行。AdaFuse摒弃了传统的逐层或逐块路由策略，转而采用一种令牌级预门控策略，即在处理每个令牌之前，为其所有适配器层做出一次全局路由决策。这种“一次决策，处处应用”的方法有效地静态化了每个令牌的执行路径，从而为整体优化创造了条件。我们充分利用这一点，开发了一个定制的CUDA内核，该内核执行融合切换操作，将所选所有LoRA适配器的参数在一次高效传递中合并到骨干模型中。在主流开源大语言模型上的实验结果表明，AdaFuse在达到与先进动态适配器相当精度的同时，将解码延迟大幅降低了超过2.4倍，从而弥合了模型能力与推理效率之间的差距。

The integration of dynamic, sparse structures like Mixture-of-Experts (MoE) with parameter-efficient adapters (e.g., LoRA) is a powerful technique for enhancing Large Language Models (LLMs). However, this architectural enhancement comes at a steep cost: despite minimal increases in computational load, the inference latency often skyrockets, leading to decoding speeds slowing by over 2.5 times. Through a fine-grained performance analysis, we pinpoint the primary bottleneck not in the computation itself, but in the severe overhead from fragmented, sequential CUDA kernel launches required for conventional dynamic routing. To address this challenge, we introduce AdaFuse, a framework built on a tight co-design between the algorithm and the underlying hardware system to enable efficient dynamic adapter execution. Departing from conventional layer-wise or block-wise routing, AdaFuse employs a token-level pre-gating strategy, which makes a single, global routing decision for all adapter layers before a token is processed. This “decide-once, apply-everywhere” approach effectively staticizes the execution path for each token, creating an opportunity for holistic optimization. We capitalize on this by developing a custom CUDA kernel that performs a fused switching operation, merging the parameters of all selected LoRA adapters into the backbone model in a single, efficient pass. Experimental results on popular open-source LLMs show that AdaFuse achieves accuracy on par with state-of-the-art dynamic adapters while drastically cutting decoding latency by a factor of over 2.4x, thereby bridging the gap between model capability and inference efficiency.

评分理由: 论文核心研究LLM-based educational agents的scaling laws，与"Large Language Models"和"Scaling Laws"高度相关（10分）。论文明确研究educational agents，与"LLM Agents"高度相关（10分）。论文提到tool completeness和Tool Scaling，与"Tool Use"有一定关联（5分）。论文研究multi-agent platform，与"Multi-agent Systems"有一定关联（5分）。其他关键词如MoE、SLMs、训练方法、推理技术、压缩等均未涉及（0分）。

尽管大型语言模型（LLM）在模型参数量、训练数据量和计算资源方面的缩放规律已得到广泛研究，但基于LLM的教育智能体的缩放行为仍未被探索。我们认为，教育智能体的能力提升不仅依赖于底层模型规模，更应通过一系列结构化维度实现，我们将其统称为智能体缩放定律：角色定义清晰度、技能深度、工具完备性、运行时能力以及教育专家知识注入。该框架的核心是AgentProfile——一种基于JSON的结构化规范，它作为实现教育智能体能力系统性增长的机制。我们提出了EduClaw，一个基于配置驱动的多智能体平台，该平台实践了此缩放定律，并通过构建和部署330多个涵盖K-12学科、包含1100多个技能模块的教育智能体配置，验证了其有效性。我们的实证观察表明，教育智能体的性能可随配置结构丰富度实现可预测的缩放。我们提出了两个互补的缩放轴——工具缩放与技能缩放——作为未来发展方向，并指出，实现更强大教育人工智能的路径不仅在于使用更大规模的模型，更在于构建更强大的结构化能力系统。

While scaling laws for Large Language Models (LLMs) have been extensively studied along dimensions of model parameters, training data, and compute, the scaling behavior of LLM-based educational agents remains unexplored. We propose that educational agent capability scales not merely with the underlying model size, but through structured dimensions that we collectively term the Agent Scaling Law: role definition clarity, skill depth, tool completeness, runtime capability, and educator expertise injection. Central to this framework is AgentProfile, a structured JSON-based specification that serves as the mechanism enabling systematic capability growth of educational agents. We present EduClaw, a profile-driven multi-agent platform that operationalizes this scaling law, demonstrating its effectiveness through the construction and deployment of 330+ educational agent profiles encompassing 1,100+ skill modules across K-12 subjects. Our empirical observations suggest that educational agent performance scales predictably with profile structural richness. We identify two complementary scaling axes – Tool Scaling and Skill Scaling – as future directions, arguing that the path to more capable educational AI lies not solely in larger models, but in stronger structured capability systems.

评分理由: 论文核心是开发波兰语长上下文编码器模型，通过位置嵌入适应和全参数持续预训练实现8192令牌上下文处理，并创建压缩变体。与"Large Language Models"相关（8分），因为涉及LLM架构讨论；与"Pre-training"高度相关（10分），因为采用两阶段训练和持续预训练；与"Context Window Extension"高度相关（15分），因为这是论文核心创新点。其他关键词如MoE、SFT、RAG等未涉及，得0分。

尽管仅解码器架构的大语言模型（LLM）近期主导了自然语言处理领域，但仅编码器架构在判别性任务中仍是成本效益高且参数效率优良的标准方案。然而，诸如BERT等经典编码器受限于较短的上下文窗口，难以处理长文档。本文针对波兰语模型解决了这一限制，引入了一个能够处理长达8192个词元序列的高质量波兰语模型。该模型通过采用两阶段训练流程开发，包括位置嵌入适配和全参数持续预训练。此外，我们提出了通过知识蒸馏训练的压缩模型变体。这些模型在25项任务上进行了评估，包括KLEJ基准测试、新引入的金融任务集（FinBench）以及其他分类与回归任务，特别是需要长文档理解的任务。结果表明，我们的模型在波兰语及多语言模型中取得了最佳平均性能，在长上下文任务上显著优于竞争方案，同时在短文本处理上保持了相当的质量。

While decoder-only Large Language Models (LLMs) have recently dominated the NLP landscape, encoder-only architectures remain a cost-effective and parameter-efficient standard for discriminative tasks. However, classic encoders like BERT are limited by a short context window, which is insufficient for processing long documents. In this paper, we address this limitation for the Polish by introducing a high-quality Polish model capable of processing sequences of up to 8192 tokens. The model was developed by employing a two-stage training procedure that involves positional embedding adaptation and full parameter continuous pre-training. Furthermore, we propose compressed model variants trained via knowledge distillation. The models were evaluated on 25 tasks, including the KLEJ benchmark, a newly introduced financial task suite (FinBench), and other classification and regression tasks, specifically those requiring long-document understanding. The results demonstrate that our model achieves the best average performance among Polish and multilingual models, significantly outperforming competitive solutions in long-context tasks while maintaining comparable quality on short texts.

评分理由: 论文核心研究LLM向模块化、技能化智能体（LLM Agents/Autonomous Agents）的架构转变，通过挖掘开源仓库（如GitHub）自动获取高质量智能体技能，属于大模型在不同领域的研究应用创新。因此，与"Large Language Models"和"LLM Agents"高度相关（10分）。论文涉及从现有智能体系统（如TheoremExplainAgent, Code2Video）提取技能，这些系统可能使用工具（如Manim动画引擎），因此与"Tool Use"和"Multi-agent Systems"有一定关联（5分）。论文未直接讨论其他关键词的具体技术（如MoE、训练方法、推理优化等），也未涉及特定科学领域（如生物信息学），故其他关键词评分为0分。

从单体式大语言模型向模块化、技能化智能体的转变，代表了人工智能部署领域一次根本性的架构转型。尽管通用模型在陈述性知识上展现出卓越的广度，但其在自主工作流中的应用常受限于专业程序性知识的不足。本报告研究了一种通过挖掘GitHub等平台上的开源仓库，以自动化方式获取高质量智能体技能的系统性框架。我们聚焦于从包括TheoremExplainAgent和Code2Video在内的先进系统中提取可视化与教育能力，这两者均利用了Manim数学动画引擎。该框架涵盖仓库结构分析、通过密集检索进行语义技能识别，以及向标准化SKILL.md格式的转换。我们证明，通过对智能体仓库进行系统性提取，并结合严格的安全治理与多维评估指标，能够实现程序性知识的规模化获取，从而增强大语言模型的能力，而无需进行模型再训练。我们的分析表明，智能体生成的教育内容在知识传递效率上可实现40%的提升，同时其教学品质可与人工编写的教程相媲美。

The transition from monolithic large language models (LLMs) to modular, skill-equipped agents represents a fundamental architectural shift in artificial intelligence deployment. While general-purpose models demonstrate remarkable breadth in declarative knowledge, their utility in autonomous workflows is frequently constrained by insufficient specialized procedural expertise. This report investigates a systematic framework for automated acquisition of high-quality agent skills through mining of open-source repositories on platforms such as GitHub. We focus on the extraction of visualization and educational capabilities from state-of-the-art systems including TheoremExplainAgent and Code2Video, both utilizing the Manim mathematical animation engine. The framework encompasses repository structural analysis, semantic skill identification through dense retrieval, and translation to the standardized SKILL.md format. We demonstrate that systematic extraction from agentic repositories, combined with rigorous security governance and multi-dimensional evaluation metrics, enables scalable acquisition of procedural knowledge that augments LLM capabilities without requiring model retraining. Our analysis reveals that agent-generated educational content can achieve 40% gains in knowledge transfer efficiency while maintaining pedagogical quality comparable to human-crafted tutorials.

评分理由: 论文明确研究LLM驱动的自主代理（LLM Agents）用于复杂多步任务，与关键词1和17高度相关（10分）。论文讨论用户需要模拟长期效果，涉及推理过程，与关键词13和14有一定关联（5分）。其他关键词涉及具体技术细节（如MoE、量化、训练方法等）或特定应用领域（如生物信息学），论文未涉及，得0分。

大型语言模型（LLM）正日益被用于驱动自主智能体执行复杂的多步骤任务。然而，当前的人机交互仍然是点状且反应式的：用户通过批准或纠正单个操作来规避即时风险，却无法预知后续影响。这迫使用户必须在脑海中模拟长期效应，这一过程不仅认知负荷高，且往往不够准确。用户虽能控制单个步骤，却缺乏做出知情决策所需的预见能力。我们认为，有效的协作需要预见性，而不仅仅是控制权。为此，我们提出“仿真循环内嵌”这一交互范式，使用户与智能体能够在做出最终决策前，共同探索模拟的未来轨迹。仿真将干预行为从被动的猜测转变为有依据的探索，同时帮助用户在过程中发现潜在的约束条件与偏好。本视角论文分析了现有范式的局限性，提出了基于仿真的协作概念框架，并通过具体的人机协作场景阐述了其潜在价值。

Large Language Models (LLMs) are increasingly used to power autonomous agents for complex, multi-step tasks. However, human-agent interaction remains pointwise and reactive: users approve or correct individual actions to mitigate immediate risks, without visibility into subsequent consequences. This forces users to mentally simulate long-term effects, a cognitively demanding and often inaccurate process. Users have control over individual steps but lack the foresight to make informed decisions. We argue that effective collaboration requires foresight, not just control. We propose simulation-in-the-loop, an interaction paradigm that enables users and agents to explore simulated future trajectories before committing to decisions. Simulation transforms intervention from reactive guesswork into informed exploration, while helping users discover latent constraints and preferences along the way. This perspective paper characterizes the limitations of current paradigms, introduces a conceptual framework for simulation-based collaboration, and illustrates its potential through concrete human-agent collaboration scenarios.

评分理由: 该论文的核心是提出一种名为Cross-Context Review (CCR)的方法，旨在通过将生成和审查过程分离到不同的会话中来提高LLM输出质量。因此，它与"Large Language Models” (LLMs)高度相关（10分），因为论文直接研究LLM的自我审查能力。同时，论文的核心机制是让LLM在独立会话中审查自己的输出，这直接属于"Self-Correction"或"Self-Improvement"的范畴（10分）。论文通过减少错误来间接提高事实性，因此与"Hallucination Mitigation"有一定关联（5分）。其他关键词如MoE、SFT、RAG、Agents等，论文未涉及，故得0分。

大语言模型在生成输出的同一会话中进行自我审查时，往往难以有效识别自身错误。本文提出跨上下文审查（Cross-Context Review, CCR）方法，其核心机制是在全新会话中开展审查工作，且不接触原始生成对话的历史记录。我们设计了一项对照实验：选取30件人工制品（含代码、技术文档、演示脚本）并注入150个错误，在四种审查条件下进行测试——同会话自我审查（SR）、重复自我审查（SR2）、上下文感知子代理审查（SA）以及跨上下文审查（CCR）。经过360次审查实验，CCR的F1分数达到28.6%，显著优于SR（24.6%，p=0.008，d=0.52）、SR2（21.7%，p<0.001，d=0.72）和SA（23.8%，p=0.004，d=0.57）。其中SR2的结果对解读最具意义：在同一会话中重复审查并未超越单次审查效果（p=0.11），这排除了重复性因素对CCR优势的解释。CCR的效能提升源于上下文分离机制本身。该方法兼容任意模型，无需额外基础设施，仅需增加一次会话成本。

Large language models struggle to catch errors in their own outputs when the review happens in the same session that produced them. This paper introduces Cross-Context Review (CCR), a straightforward method where the review is conducted in a fresh session with no access to the production conversation history. We ran a controlled experiment: 30 artifacts (code, technical documents, presentation scripts) with 150 injected errors, tested under four review conditions – same-session Self-Review (SR), repeated Self-Review (SR2), context-aware Subagent Review (SA), and Cross-Context Review (CCR). Over 360 reviews, CCR reached an F1 of 28.6%, outperforming SR (24.6%, p=0.008, d=0.52), SR2 (21.7%, p<0.001, d=0.72), and SA (23.8%, p=0.004, d=0.57). The SR2 result matters most for interpretation: reviewing twice in the same session did not beat reviewing once (p=0.11), which rules out repetition as an explanation for CCR’s advantage. The benefit comes from context separation itself. CCR works with any model, needs no infrastructure, and costs only one extra session.

评分理由: 论文核心是使用LLM代理合成数字足迹，因此与"Large Language Models"和"LLM Agents"高度相关（10分）。论文提到模型在合成数据上微调，与"Post-training"有一定关联（5分）。其他关键词如MoE、SLMs、Scaling Laws、RAG、CoT等均未涉及，得0分。

数字足迹（个体与数字系统交互的记录）对于行为研究、个性化应用开发和机器学习模型训练至关重要。然而，该领域的研究常因缺乏多样化且易于获取的数据而受到限制。为突破这一局限，我们提出一种利用大语言模型（LLM）智能体合成逼真数字足迹的新方法。该方法以结构化用户画像为起点，生成多样化且合理的用户事件序列，最终产出相应的数字产物，如电子邮件、消息、日历条目、提醒事项等。内在评估结果表明，生成的数据集相较于现有基线具有更高的多样性和真实性。此外，在真实世界分布外任务评估中，基于我们合成数据微调的模型表现优于使用其他合成数据集训练的模型。

Digital footprints (records of individuals’ interactions with digital systems) are essential for studying behavior, developing personalized applications, and training machine learning models. However, research in this area is often hindered by the scarcity of diverse and accessible data. To address this limitation, we propose a novel method for synthesizing realistic digital footprints using large language model (LLM) agents. Starting from a structured user profile, our approach generates diverse and plausible sequences of user events, ultimately producing corresponding digital artifacts such as emails, messages, calendar entries, reminders, etc. Intrinsic evaluation results demonstrate that the generated dataset is more diverse and realistic than existing baselines. Moreover, models fine-tuned on our synthetic data outperform those trained on other synthetic datasets when evaluated on real-world out-of-distribution tasks.

评分理由: 论文核心研究大语言模型（LLMs）在训练数据中混入自身生成内容（replay）时出现的模型崩溃（model collapse）问题，这与"Large Language Models"高度相关（10分）。论文明确提及"scaling laws"推动LLM训练数据需求增长，导致公开在线文本被消耗，这与"Scaling Laws” AND “Data Quality"相关（8分）。论文讨论训练管道和数据清理，与"Pre-training"有一定关联（5分）。其他关键词如MoE、SLMs、SFT、RAG、推理加速等均未在论文中涉及，故评0分。

随着扩展定律推动前沿大语言模型（LLM）的训练对数据量的需求不断增长，训练流程正逐渐接近一个临界点：大部分公开可用的在线文本可能被耗尽。与此同时，大语言模型的广泛使用增加了网络上机器生成内容的数量；这些趋势共同提高了生成文本重新进入未来训练语料库的可能性，从而增加了通常被称为模型崩溃的性能退化风险。在实践中，模型开发者通过数据清洗、水印技术、合成数据策略，或在某些情况下采取放任态度来应对这一问题。然而，生成模型中模型崩溃的问题尚未从学习理论的角度得到审视：我们通过极限框架下的语言生成这一理论视角来研究它，引入一个重放对抗者，该对抗者将生成器自身过去的输出增补到示例流中。我们的主要贡献是从学习理论角度对重放何时从根本上限制生成进行了细粒度刻画：虽然重放对于最强的均匀生成概念是无害的，但它在理论上会对较弱的非均匀生成和极限生成概念造成分离。有趣的是，我们的正面结果反映了实践中广泛使用的启发式方法，如数据清洗、水印和输出过滤，而我们的分离结果则揭示了这些方法可能失效的情形。

As scaling laws push the training of frontier large language models (LLMs) toward ever-growing data requirements, training pipelines are approaching a regime where much of the publicly available online text may be consumed. At the same time, widespread LLM usage increases the volume of machine-generated content on the web; together, these trends raise the likelihood of generated text re-entering future training corpora, increasing the associated risk of performance degradation often called model collapse. In practice, model developers address this concern through data cleaning, watermarking, synthetic-data policies, or, in some cases, blissful ignorance. However, the problem of model collapse in generative models has not been examined from a learning-theoretic perspective: we study it through the theoretical lens of the language generation in the limit framework, introducing a replay adversary that augments the example stream with the generator’s own past outputs. Our main contribution is a fine-grained learning-theoretic characterization of when replay fundamentally limits generation: while replay is benign for the strongest notion of uniform generation, it provably creates separations for the weaker notions of non-uniform generation and generation in the limit. Interestingly, our positive results mirror heuristics widely used in practice, such as data cleaning, watermarking, and output filtering, while our separations show when these ideas can fail.

评分理由: 论文研究复合AI系统中传统软件硬件漏洞与LLM特定攻击的结合，核心涉及LLMs和LLM Agents（复合AI系统包含LLM代理），因此这两个关键词高度相关（10分）。其他关键词涉及模型架构、训练方法、推理优化、特定应用领域等，论文未直接讨论，均为0分。

生成式人工智能的快速发展催生了复合人工智能系统——即由多个大语言模型（LLM）、软件工具和数据库系统构成的流水线。复合人工智能系统构建在运行于分布式硬件基础设施的分层传统软件栈之上。其中众多不同的软件组件普遍存在通用漏洞披露（CVE）数据库中记载的传统安全缺陷，而底层的分布式硬件基础设施则持续面临时序攻击、比特翻转故障和基于功耗的侧信道攻击威胁。当前研究主要聚焦于大语言模型特有的风险，如模型提取、训练数据泄露和不安全内容生成，却忽视了传统系统漏洞可能产生的影响。

本研究探讨了传统软件与硬件漏洞如何与大语言模型特有的算法攻击相结合，从而破坏复合人工智能流水线的完整性。我们展示了两种结合系统层漏洞与算法弱点的创新攻击方式：（1）利用软件代码注入漏洞配合防护机制绕过的Rowhammer攻击，将未经篡改的越狱提示词注入大语言模型，导致人工智能安全防护失效；（2）通过操纵知识数据库，诱导大语言模型智能体将敏感用户数据传输至恶意应用程序，从而破坏数据保密性。这些攻击凸显了解决传统漏洞的必要性；我们通过按攻击目标对漏洞进行分类并将其映射到攻击生命周期的不同阶段，系统化梳理了攻击原语并分析了它们的组合方式。该方法支持开展严格的红队测试，并为未来防御策略的制定奠定了基础。

Rapid progress in generative AI has given rise to Compound AI systems - pipelines comprised of multiple large language models (LLM), software tools and database systems. Compound AI systems are constructed on a layered traditional software stack running on a distributed hardware infrastructure. Many of the diverse software components are vulnerable to traditional security flaws documented in the Common Vulnerabilities and Exposures (CVE) database, while the underlying distributed hardware infrastructure remains exposed to timing attacks, bit-flip faults, and power-based side channels. Today, research targets LLM-specific risks like model extraction, training data leakage, and unsafe generation – overlooking the impact of traditional system vulnerabilities. This work investigates how traditional software and hardware vulnerabilities can complement LLM-specific algorithmic attacks to compromise the integrity of a compound AI pipeline. We demonstrate two novel attacks that combine system-level vulnerabilities with algorithmic weaknesses: (1) Exploiting a software code injection flaw along with a guardrail Rowhammer attack to inject an unaltered jailbreak prompt into an LLM, resulting in an AI safety violation, and (2) Manipulating a knowledge database to redirect an LLM agent to transmit sensitive user data to a malicious application, thus breaching confidentiality. These attacks highlight the need to address traditional vulnerabilities; we systematize the attack primitives and analyze their composition by grouping vulnerabilities by their objective and mapping them to distinct stages of an attack lifecycle. This approach enables a rigorous red-teaming exercise and lays the groundwork for future defense strategies.

评分理由: 论文提出Hikari模型，专注于端到端的同时语音到文本翻译和流式转录，属于大模型在特定任务（语音翻译）的应用。核心相关性：1）“Post-training” OR “Supervised Fine-tuning” OR “SFT”（10分）：摘要明确提到"supervised fine-tuning strategy"用于训练模型从延迟中恢复，是核心方法。2）“Large Language Models” OR “LLMs” OR “Foundation Models”（5分）：论文涉及端到端模型，可能基于大模型架构，但未明确提及LLMs，因此给中等分数。3）“Instruction Tuning” OR “Alignment” OR “Value Alignment”（5分）：模型通过编码READ/WRITE决策实现"causal alignment”，与对齐概念相关。其他关键词如MoE、Scaling Laws、RAG等未在摘要中体现，给0分。加权总分计算：101.0 + 51.0 + 5*1.0 = 20.0。

同步机器翻译（Simultaneous Machine Translation, SiMT）传统上依赖于离线机器翻译模型结合人工设计的启发式规则或学习策略。我们提出Hikari模型，这是一种无需策略、完全端到端的系统，通过将读/写决策编码为概率化的等待令牌机制，实现同步语音到文本翻译与流式转录。我们还引入了解码器时间膨胀机制，以减少自回归开销并确保均衡的训练分布。此外，我们提出一种监督微调策略，训练模型从延迟中恢复，显著优化了质量与延迟的权衡关系。在英语到日语、德语和俄语的测试中，Hikari在低延迟与高延迟场景下均取得了最新的最优BLEU分数，超越了近期基线模型。

Simultaneous machine translation (SiMT) has traditionally relied on offline machine translation models coupled with human-engineered heuristics or learned policies. We propose Hikari, a policy-free, fully end-to-end model that performs simultaneous speech-to-text translation and streaming transcription by encoding READ/WRITE decisions into a probabilistic WAIT token mechanism. We also introduce Decoder Time Dilation, a mechanism that reduces autoregressive overhead and ensures a balanced training distribution. Additionally, we present a supervised fine-tuning strategy that trains the model to recover from delays, significantly improving the quality-latency trade-off. Evaluated on English-to-Japanese, German, and Russian, Hikari achieves new state-of-the-art BLEU scores in both low- and high-latency regimes, outperforming recent baselines.

评分理由: 论文研究的是文本到图像生成模型FLUX.1中变分自编码器潜在空间的颜色表示解释，属于计算机视觉和生成模型的解释性AI范畴。与绝大多数关键词（涉及大语言模型、训练技术、推理、对齐、压缩、代理等）完全无关。唯一相关的关键词是"Mechanistic Interpretability” OR “Explainable AI”，因为论文的核心是解释模型内部表示（颜色编码），属于可解释AI/机制可解释性，评分为10分（高度相关，核心内容）。其他关键词评分为0分（完全无关）。

文本到图像生成模型发展迅速，但实现对生成图像的细粒度控制仍然困难，这主要源于对语义信息编码方式的理解有限。我们对FLUX.1 [Dev]变分自编码器潜在空间中的颜色表征提出了一种解释，揭示了其反映色相、饱和度和明度的结构。我们通过证明该潜在颜色子空间（LCS）解释既能预测又能显式控制颜色，验证了其有效性，并引入了一种完全无需训练、仅基于闭式潜在空间操作的FLUX控制方法。代码发布于https://github.com/ExplainableML/LCS。

Text-to-image generation models have advanced rapidly, yet achieving fine-grained control over generated images remains difficult, largely due to limited understanding of how semantic information is encoded. We develop an interpretation of the color representation in the Variational Autoencoder latent space of FLUX.1 [Dev], revealing a structure reflecting Hue, Saturation, and Lightness. We verify our Latent Color Subspace (LCS) interpretation by demonstrating that it can both predict and explicitly control color, introducing a fully training-free method in FLUX based solely on closed-form latent-space manipulation. Code is available at https://github.com/ExplainableML/LCS.

评分理由: 论文STAIRS-Former专注于离线多智能体强化学习（MARL），提出了一种改进的Transformer架构用于多任务多智能体场景。所有关键词中，仅"Multi-agent Systems" OR “Agent Coordination"高度相关（10分），因为论文核心研究多智能体系统中的协调问题。其他关键词均与论文内容无关（0分），因为论文不涉及大语言模型、模型训练技术、推理方法、AI科学应用等主题。

离线多智能体强化学习（MARL）在处理多任务数据集时面临挑战，这主要源于不同任务间智能体数量的差异以及向未知场景泛化的需求。先前的研究通过采用基于观测标记化的Transformer架构与分层技能学习来解决这些问题。然而，这些方法未能充分利用Transformer注意力机制来实现智能体间的协同，且仅依赖单一历史标记，限制了其在部分可观测MARL环境中捕捉长期时序依赖关系的能力。本文提出STAIRS-Former，一种增强空间与时间层次结构的Transformer架构，该架构能够在捕捉长程交互历史的同时，对关键标记实现高效注意力聚焦。我们进一步引入标记丢弃技术，以提升模型在不同智能体数量下的鲁棒性与泛化能力。在包含SMAC、SMAC-v2、MPE及MaMuJoCo在内的多种多智能体基准测试中，基于多任务数据集的大量实验表明，STAIRS-Former持续优于现有方法，并取得了新的最优性能。

Offline multi-agent reinforcement learning (MARL) with multi-task datasets is challenging due to varying numbers of agents across tasks and the need to generalize to unseen scenarios. Prior works employ transformers with observation tokenization and hierarchical skill learning to address these issues. However, they underutilize the transformer attention mechanism for inter-agent coordination and rely on a single history token, which limits their ability to capture long-horizon temporal dependencies in partially observable MARL settings. In this paper, we propose STAIRS-Former, a transformer architecture augmented with spatial and temporal hierarchies that enables effective attention over critical tokens while capturing long interaction histories. We further introduce token dropout to enhance robustness and generalization across varying agent populations. Extensive experiments on diverse multi-agent benchmarks, including SMAC, SMAC-v2, MPE, and MaMuJoCo, with multi-task datasets demonstrate that STAIRS-Former consistently outperforms prior methods and achieves new state-of-the-art performance.

评分理由: 论文核心是提出SemBench框架，专门用于评估大语言模型（LLMs）的语义理解能力，因此与"Large Language Models"高度相关（10分）。论文未涉及其他关键词的具体技术（如MoE、SFT、RAG等）、应用领域（如生物信息学）或评估的特定方面（如幻觉缓解、推理），这些关键词评分为0分。

自然语言处理（NLP）领域的最新进展主要由大型语言模型（LLM）的兴起所推动，这些模型展现出卓越的生成与推理能力。然而，尽管取得了成功，评估这些模型对真实语义的理解能力仍是一个持续存在的挑战。传统的基准测试如上下文词义识别（Word-in-Context, WiC）能有效探测这一能力，但其构建过程资源密集，且通常仅限于高资源语言。本文中，我们提出了SemBench，一个仅使用词典义项定义和句子编码器即可自动生成合成基准测试的框架，用于评估大型语言模型的语义能力。该方法无需人工整理的例句，使其兼具可扩展性和语言无关性。我们在三种不同资源水平的语言（英语、西班牙语和巴斯克语）中，对一系列广泛的大型语言模型进行了SemBench评估。结果显示，SemBench得出的模型排名与标准WiC数据集获得的排名高度相关。此外，我们的分析表明，仅需少量示例即可获得稳定且有意义的排名。总体而言，SemBench为大型语言模型的语义理解能力提供了一种轻量、适应性强且数据高效的跨语言评估框架。

Recent progress in Natural Language Processing (NLP) has been driven by the emergence of Large Language Models (LLMs), which exhibit remarkable generative and reasoning capabilities. However, despite their success, evaluating the true semantic understanding of these models remains a persistent challenge. Traditional benchmarks such as Word-in-Context (WiC) effectively probe this capability, but their creation is resource-intensive and often limited to high-resource languages. In this paper, we introduce SemBench, a framework for automatically generating synthetic benchmarks that assess the semantic competence of LLMs using only dictionary sense definitions and a sentence encoder. This approach eliminates the need for curated example sentences, making it both scalable and language-independent. We evaluate SemBench in three languages (English, Spanish, and Basque) spanning different levels of linguistic resources, and across a wide range of LLMs. Our results show that rankings derived from SemBench strongly correlate with those obtained from standard WiC datasets. Furthermore, our analysis demonstrates that only a small number of examples is required to achieve stable and meaningful rankings. Overall, SemBench provides a lightweight, adaptable, and data-efficient framework for cross-lingual evaluation of semantic understanding in LLMs.

评分理由: 论文《AGMARL-DKS: An Adaptive Graph-Enhanced Multi-Agent Reinforcement Learning for Dynamic Kubernetes Scheduling》专注于使用多智能体强化学习（Multi-Agent Reinforcement Learning, MARL）和图神经网络（GNN）解决Kubernetes动态调度问题。其核心是强化学习在分布式系统中的应用，而非大语言模型（LLM）或深度学习技术原理的创新。因此，绝大多数关键词（涉及LLM技术、训练方法、推理优化、对齐、科学AI应用等）与论文内容完全无关，评分为0。唯一相关的关键词是“Multi-agent Systems” OR “Agent Coordination”，因为论文明确将调度问题建模为合作多智能体问题，每个集群节点作为一个智能体，并涉及智能体协调，这是论文的核心创新之一，评分为10（高度相关）。

当前先进的云原生应用需要能够有效平衡系统稳定性、资源利用率及相关成本的智能调度器。尽管Kubernetes默认提供基于可行性的资源放置方案，但近期研究已开始探索利用强化学习（RL）实现更智能的调度决策。然而，当前基于强化学习的调度器存在三大局限：其一，多数调度器采用单一集中式智能体架构，难以适应大规模异构集群的扩展需求；其二，采用多目标奖励函数的调度器通常仅假设目标间存在简单、静态的线性组合关系；其三，尚无研究能构建出可自适应响应动态条件的压力感知型调度器。为弥补现有研究的不足，本文提出自适应图增强多智能体强化学习动态Kubernetes调度器（Adaptive Graph-enhanced Multi-Agent Reinforcement Learning Dynamic Kubernetes Scheduler, AGMARL-DKS）。该调度器通过三大创新突破现有局限：首先，我们将调度问题构建为协作式多智能体系统，每个集群节点作为独立智能体运行，采用“集中训练-分散执行”模式，从而实现可扩展的解决方案；其次，为实现兼具全局感知与分布式决策的能力，我们利用图神经网络（Graph Neural Network, GNN）为每个智能体构建全局集群上下文的状态表征，这相较于仅依赖局部观测的方法具有显著改进；最后，为在多目标间实现动态权衡，我们采用压力感知的词典序优化策略替代传统的简单静态线性加权方法。在Google Kubernetes Engine（GKE）平台上的评估表明，AGMARL-DKS在容错性、资源利用率和成本控制方面显著优于默认调度器，尤其在批处理任务与关键业务工作负载的调度场景中表现突出。

State-of-the-art cloud-native applications require intelligent schedulers that can effectively balance system stability, resource utilisation, and associated costs. While Kubernetes provides feasibility-based placement by default, recent research efforts have explored the use of reinforcement learning (RL) for more intelligent scheduling decisions. However, current RL-based schedulers have three major limitations. First, most of these schedulers use monolithic centralised agents, which are non-scalable for large heterogeneous clusters. Second, the ones that use multi-objective reward functions assume simple, static, linear combinations of the objectives. Third, no previous work has produced a stress-aware scheduler that can react adaptively to dynamic conditions. To address these gaps in current research, we propose the Adaptive Graph-enhanced Multi-Agent Reinforcement Learning Dynamic Kubernetes Scheduler (AGMARL-DKS). AGMARL-DKS addresses these gaps by introducing three major innovations. First, we construct a scalable solution by treating the scheduling challenge as a cooperative multi-agent problem, where every cluster node operates as an agent, employing centralised training methods before decentralised execution. Second, to be context-aware and yet decentralised, we use a Graph Neural Network (GNN) to build a state representation of the global cluster context at each agent. This represents an improvement over methods that rely solely on local observations. Finally, to make trade-offs between these objectives, we use a stress-aware lexicographical ordering policy instead of a simple, static linear weighting of these objectives. The evaluations in Google Kubernetes Engine (GKE) reveal that AGMARL-DKS significantly outperforms the default scheduler in terms of fault tolerance, utilisation, and cost, especially in scheduling batch and mission-critical workloads.

评分理由: 论文EvoFlows专注于蛋白质工程的深度学习应用，提出了一种基于编辑流的序列到序列建模方法，用于预测蛋白质突变。该研究与绝大多数关键词（如LLMs、MoE、RLHF、RAG等）完全无关，因为这些关键词涉及通用大语言模型的技术原理、训练方法、推理优化或应用范式，而论文的核心是特定领域的蛋白质序列建模。唯一相关的关键词是"AI for Science” OR “Bioinformatics” OR “Cheminformatics”，因为论文明确属于生物信息学领域的AI应用，与蛋白质工程直接相关，因此给予10分（高度相关）。

我们提出EvoFlows，一种专为蛋白质工程设计的可变长度序列到序列蛋白质建模方法。与自回归模型和掩码语言模型不同，EvoFlows对模板蛋白质序列执行有限且可控数量的插入、删除和替换操作。换言之，EvoFlows不仅能预测_进行何种突变_，还能预测_突变发生的位置_。我们的方法利用编辑流（edit flows）来学习进化相关蛋白质序列之间的突变轨迹，同时建模相关天然蛋白质的分布以及连接这些蛋白质的突变路径。通过对来自UNIREF和OAS数据库的多种蛋白质群落进行广泛的计算机模拟评估，我们证明EvoFlows能以与蛋白质工程中常用主流掩码语言模型相当的质量捕获蛋白质序列分布，同时在给定模板蛋白质生成非平凡且类天然突变体方面表现出更强的能力。

We introduce EvoFlows, a variable-length sequence-to-sequence protein modeling approach uniquely suited to protein engineering. Unlike autoregressive and masked language models, EvoFlows perform a limited, controllable number of insertions, deletions, and substitutions on a template protein sequence. In other words, EvoFlows predict not only which mutation to perform, but also where it should occur. Our approach leverages edit flows to learn mutational trajectories between evolutionarily-related protein sequences, simultaneously modeling distributions of related natural proteins and the mutational paths connecting them. Through extensive in silico evaluation on diverse protein communities from UNIREF and OAS, we demonstrate that EvoFlows capture protein sequence distributions with a quality comparable to leading masked language models commonly used in protein engineering, while showing improved ability to generate non-trivial yet natural-like mutants from a given template protein.

评分理由: 论文研究的是视觉生成（图像和视频）领域，提出了一种基于h-transform和预训练扩散模型的训练自由引导方法，用于从粗糙参考生成精细样本。该工作属于计算机视觉和生成模型领域，与绝大多数关键词（主要针对大语言模型LLMs及其相关技术、应用和优化）完全无关。仅与"Pre-training" OR “Continual Pre-training” OR “Domain Adaptation"有一定关联（5分），因为该方法利用了预训练（Pre-training）的扩散模型作为基础，但论文核心并非研究预训练技术本身，而是利用现有预训练模型进行采样过程引导。其他关键词均未涉及。

粗粒度引导视觉生成技术旨在从退化或低保真度的粗粒度参考中合成精细视觉样本，这对众多现实应用至关重要。尽管基于训练的方法效果显著，但其本质上受限于高昂的训练成本以及配对数据收集导致的泛化能力受限。因此，近期无需训练的研究提出利用预训练扩散模型，并在采样过程中引入引导机制。然而，这些无需训练的方法要么需要已知前向（精细到粗粒度）变换算子（例如双三次下采样），要么难以在引导效果与合成质量之间取得平衡。为应对这些挑战，我们提出一种基于h变换的新型引导方法，该工具能够在给定条件下约束随机过程（如采样过程）。具体而言，我们通过在原微分方程中添加漂移函数来修改每个采样时间步的转移概率，从而近似地将生成过程导向理想的精细样本。针对不可避免的近似误差，我们引入了一种噪声水平感知调度策略，随着误差增大逐渐降低该引导项的权重，以确保既遵循引导约束又实现高质量合成。在多种图像与视频生成任务上的大量实验验证了本方法的有效性与泛化能力。

Coarse-guided visual generation, which synthesizes fine visual samples from degraded or low-fidelity coarse references, is essential for various real-world applications. While training-based approaches are effective, they are inherently limited by high training costs and restricted generalization due to paired data collection. Accordingly, recent training-free works propose to leverage pretrained diffusion models and incorporate guidance during the sampling process. However, these training-free methods either require knowing the forward (fine-to-coarse) transformation operator, e.g., bicubic downsampling, or are difficult to balance between guidance and synthetic quality. To address these challenges, we propose a novel guided method by using the h-transform, a tool that can constrain stochastic processes (e.g., sampling process) under desired conditions. Specifically, we modify the transition probability at each sampling timestep by adding to the original differential equation with a drift function, which approximately steers the generation toward the ideal fine sample. To address unavoidable approximation errors, we introduce a noise-level-aware schedule that gradually de-weights the term as the error increases, ensuring both guidance adherence and high-quality synthesis. Extensive experiments across diverse image and video generation tasks demonstrate the effectiveness and generalization of our method.

评分理由: 该论文专注于量子计算在电子结构计算中的应用，特别是针对自旋耦合广义价键波函数的矩阵元素估计。论文的核心是量子测量框架和量子电路设计，与深度学习、大模型技术完全无关。所有关键词（除了最后一个）都涉及大模型、深度学习、自然语言处理、模型优化等技术，与该论文的量子化学计算主题没有关联。最后一个关键词"AI for Science” OR “Bioinformatics” OR “Cheminformatics"得5分，因为论文属于计算化学领域，可视为科学计算中的AI相关应用（尽管是量子计算而非传统AI），但并非核心内容。

本文提出一种基于测量的量子框架，用于评估自旋耦合广义价键波函数中的重叠积分与哈密顿矩阵元。该方法针对非正交价键方法的核心难题：如何估计不同且通常非正交的组态态函数之间的矩阵元。我们并非在量子硬件上制备完整波函数，而是将所需物理量重新表述为泡利算符串的真空期望值，这些值可通过由局域克利福德旋转和计算基测量构成的浅层、无需辅助量子比特的电路获取。与基于哈达玛测试的矩阵元估计方法相比，该构建通过将问题简化为局域泡利测量，避免了辅助量子比特和控制操作。这使得SCGVB问题的代数构建与在量子寄存器上执行的测量任务相分离，并产生了一种适用于近期量子架构的低深度策略。我们通过量子电路模拟在正方形和矩形H4体系上验证了该框架，所得重叠积分与哈密顿矩阵能在所考察的几何构型范围内较精确地复现基于经典Löwdin方法的结果，且推导出的Coulson-Chirgwin权重保持化学一致性。这些结果证明了基于测量的量子辅助方法处理非正交SCGVB展开的可行性，并为将量子测量融入价键电子结构工作流程提供了实用路径。

We present a measurement-driven quantum framework for evaluating overlap and Hamiltonian matrix elements in spin-coupled generalized valence bond (SCGVB) wavefunctions. The approach targets a central difficulty of nonorthogonal valence-bond methods: estimating matrix elements between distinct, generally nonorthogonal configuration state functions. Rather than preparing the full wavefunction on quantum hardware, we reformulate the required quantities as vacuum expectation values of Pauli-string operators that can be accessed using shallow, ancilla-free circuits composed of local Clifford rotations and computational-basis measurements. In contrast to Hadamard-test-based matrix-element estimation, this construction avoids ancilla qubits and controlled operations by reducing the problem to local Pauli measurements. This separates the algebraic construction of the SCGVB problem from the measurement task executed on the quantum register and yields a low-depth strategy compatible with near-term architectures. We demonstrate the framework on square and rectangular H4 using quantum-circuit emulation, where the resulting overlap and Hamiltonian matrices reproduce classical Lowdin-based references with good accuracy across the geometries considered, and where derived Coulson-Chirgwin weights remain chemically consistent. These results support the feasibility of measurement-based quantum assistance for nonorthogonal SCGVB expansions and provide a practical route for incorporating quantum measurements into valence-bond electronic-structure workflows.

评分理由: 该论文专注于计算化学领域，研究一种新的量子化学计算方法（O2BMP2）来高效预测分子激发态能量，特别是倒置单重态-三重态能隙。论文内容与绝大多数关键词（涉及大模型、深度学习、训练技术、推理优化、智能体等）完全无关。仅与最后一个关键词"AI for Science” OR “Bioinformatics” OR “Cheminformatics"有一定关联，因为该研究属于计算化学，是AI for Science（科学AI）在化学/材料科学中的一个具体应用案例，但论文本身并未使用或提及任何AI、机器学习或大模型技术，而是纯粹的量子化学计算方法开发。因此，仅给予该关键词5分（有一定关联），其余关键词均为0分（完全无关）。

对洪德规则的违背导致单重态-三重态能隙反转（INVEST），代表了光物理领域的一个范式转变，对有机发光二极管（OLED）技术具有重大意义。INVEST分子促进了无势垒的反向系间窜越，理论上允许在不依赖热激活的情况下实现100%的内量子效率。然而，准确预测负的单重态-三重态能隙通常需要极高的计算成本。在本研究中，我们评估了我们最近开发的单体莫勒-普莱塞特微扰理论（one-body Møller-Plesset perturbation theory, OBMP2）及其自旋相反变体（spin-opposite variant, O2BMP2）作为高效替代方法的有效性。通过对30个INVEST分子进行基准测试发现，采用适当自旋相反标度的O2BMP2，其精度可达到ADC(3)和EOM-CCSD的水平。此外，由于有可能将计算复杂度降低至$N^4$，O2BMP2在精度与效率之间实现了稳健的平衡，使其适用于下一代INVEST材料的高通量筛选。

The violation of Hund’s rule, resulting in an inverted singlet-triplet (INVEST) gap, represents a paradigm shift in photophysics with major implications for OLED technology. INVEST molecules facilitate barrierless reverse intersystem crossing, theoretically permitting 100% internal quantum efficiency without thermal activation. However, accurately predicting negative singlet-triplet energy gaps typically demands prohibitive computational costs. In this study, we evaluate the efficacy of our recently developed one-body Møller-Plesset perturbation theory (OBMP2) and its spin-opposite variant (O2BMP2) as efficient alternatives. Benchmarking against 30 INVEST molecules reveals that O2BMP2, with appropriate spin-opposite scaling, achieves the accuracy of ADC(3) and EOM-CCSD. Furthermore, with the possibility of reducing computational complexity to $N^4$, O2BMP2 provides a robust balance of accuracy and efficiency, making it suitable for the high-throughput screening of next-generation INVEST materials.

评分理由: 论文核心是构建科学多模态文档推理数据集SciMDR，用于基础模型训练和评估。高度相关关键词：1. ‘Large Language Models/Foundation Models’（论文明确提及用于训练基础模型）；2. ‘Post-training/Supervised Fine-tuning’（实验表明模型在SciMDR上微调后性能显著提升）；3. ‘Chain of Thought/Multi-step Reasoning’（数据集包含显式推理链，关注复杂文档级推理）；4. ‘AI for Science’（专注于科学领域多模态文档理解）。其他关键词如MoE、量化、RAG等未涉及，评分为0。

为基座模型训练构建科学多模态文档推理数据集时，规模、忠实度与真实性之间存在着固有的权衡。为应对这一挑战，我们提出了“合成-再锚定”框架，该两阶段流程包含：(1) 以主张为中心的问答合成，该阶段生成忠实、独立的问答对，并针对聚焦文本片段进行推理；(2) 文档级再锚定，通过程序化方法将这些问答对重新嵌入至完整文档任务中，以确保真实的复杂性。利用此框架，我们构建了SciMDR——一个用于跨模态理解的大规模训练数据集，包含来自2万篇科学论文的30万个带有显式推理链的问答对。我们进一步构建了SciMDR-Eval，这是一个专家标注的评测基准，用于评估完整科学工作流中的多模态理解能力。实验表明，基于SciMDR微调的模型在多个科学问答基准测试中均取得显著提升，尤其在需要复杂文档级推理的任务上表现突出。

Constructing scientific multimodal document reasoning datasets for foundation model training involves an inherent trade-off among scale, faithfulness, and realism. To address this challenge, we introduce the synthesize-and-reground framework, a two-stage pipeline comprising: (1) Claim-Centric QA Synthesis, which generates faithful, isolated QA pairs and reasoning on focused segments, and (2) Document-Scale Regrounding, which programmatically re-embeds these pairs into full-document tasks to ensure realistic complexity. Using this framework, we construct SciMDR, a large-scale training dataset for cross-modal comprehension, comprising 300K QA pairs with explicit reasoning chains across 20K scientific papers. We further construct SciMDR-Eval, an expert-annotated benchmark to evaluate multimodal comprehension within full-length scientific workflows. Experiments demonstrate that models fine-tuned on SciMDR achieve significant improvements across multiple scientific QA benchmarks, particularly in those tasks requiring complex document-level reasoning.

评分理由: 论文核心研究LLM在非可验证领域后训练中的对齐问题，特别是推理型LLM作为评判者的有效性。高度相关的关键词包括：LLMs（核心研究对象）、Post-training/SFT（研究背景）、Alignment（研究目标）、RLHF/DPO（研究方法）、Chain of Thought/System 2 Thinking（推理型评判者的核心特征）。其他关键词如MoE、SLMs、RAG、Quantization等未在论文中涉及，故评分为0。

推理型大语言模型即评委（Reasoning LLMs-as-Judges）能够受益于推理时扩展，为将推理模型的成功延伸至不可验证领域（即输出正确性/质量无法直接检验的领域）提供了一条前景广阔的路径。然而，尽管推理型评委在静态评估基准上已展现出更优性能，其在实际策略训练中的有效性尚未得到系统检验。为此，我们开展了一项严谨研究，以探究非推理型与推理型评委在基于强化学习的大语言模型对齐中的实际影响。我们在一个受控的合成环境中进行了实验，其中“黄金标准”评委（gpt-oss-120b）提供偏好标注来训练较小的评委，结果揭示了非推理型与推理型评委之间的关键差异：非推理型评委极易导致奖励破解，而推理型评委则能引导策略在黄金标准评委评估下取得强劲表现。有趣的是，我们发现由推理型评委训练出的策略之所以能达到如此强的性能，是因为其学会了生成极具效力的对抗性输出——这些输出还能通过欺骗其他大语言模型评委，在诸如Arena-Hard等流行基准测试中获得高分。结合我们的进一步分析，本研究既凸显了在不可验证的大语言模型后训练中应用（推理型）大语言模型评委的重要发现，也指出了其仍有改进空间。

Reasoning LLMs-as-Judges, which can benefit from inference-time scaling, provide a promising path for extending the success of reasoning models to non-verifiable domains where the output correctness/quality cannot be directly checked. However, while reasoning judges have shown better performance on static evaluation benchmarks, their effectiveness in actual policy training has not been systematically examined. Therefore, we conduct a rigorous study to investigate the actual impact of non-reasoning and reasoning judges in reinforcement-learning-based LLM alignment. Our controlled synthetic setting, where a “gold-standard” judge (gpt-oss-120b) provides preference annotations to train smaller judges, reveals key differences between non-reasoning and reasoning judges: non-reasoning judges lead to reward hacking easily, while reasoning judges can lead to policies that achieve strong performance when evaluated by the gold-standard judge. Interestingly, we find that the reasoning-judge-trained policies achieve such strong performance by learning to generate highly effective adversarial outputs that can also score well on popular benchmarks such as Arena-Hard by deceiving other LLM-judges. Combined with our further analysis, our study highlights both important findings and room for improvements for applying (reasoning) LLM-judges in non-verifiable LLM post-training.

评分理由: 论文提出了一种名为’可分离神经架构（SNA）‘的新型神经网络设计范式，旨在通过约束交互阶数和张量秩来分解高维映射，从而统一预测性和生成性智能。其核心贡献是架构层面的理论创新和方法论，而非具体针对大语言模型（LLM）或深度学习技术原理的改进。论文在四个领域（包括强化学习导航、微结构生成、湍流建模和神经语言建模）进行了验证，其中’神经语言建模’部分与’AI for Science’有一定关联，因为论文展示了该方法在科学计算（湍流）和工程（微结构）中的应用潜力，但并未深入探讨生物信息学或化学信息学等具体子领域。其他所有关键词均专门针对LLM的训练、对齐、推理、优化、应用场景或特定技术（如MoE、RAG、CoT等），而本文未涉及这些具体技术，主要关注通用神经架构的数学形式化及其跨领域适用性，因此相关性为0。

物理学、语言学和感知领域的智能系统常呈现可分解的结构特征，但现有模型通常采用单一化的神经架构，未能显式利用这种结构。可分离神经架构通过形式化一个表征类别来解决这一问题，该架构统一了加法模型、二次模型及张量分解神经模型。通过约束交互阶数与张量秩，可分离神经架构引入了一种结构性归纳偏置，将高维映射分解为低元数组件。可分离性并非系统本身的固有属性：它往往通过描述系统所采用的坐标或表征方式自然涌现。关键在于，这种坐标感知的数学框架揭示了混沌时空动力学与语言自回归模型之间的结构相似性。通过将连续物理状态视为平滑可分离的嵌入表示，可分离神经架构实现了混沌系统的分布建模。该方法在保持适用于离散序列的同时，有效缓解了确定性算子产生的非物理性漂移特征。我们在四个领域中验证了该方法的组合灵活性：基于强化学习的自主航点导航、多功能微结构的逆向生成、湍流的分布建模以及神经语言建模。这些成果确立了可分离神经架构作为预测与生成智能的领域无关基元，能够统一确定性与分布性表征。

Intelligent systems across physics, language and perception often exhibit factorisable structure, yet are typically modelled by monolithic neural architectures that do not explicitly exploit this structure. The separable neural architecture (SNA) addresses this by formalising a representational class that unifies additive, quadratic and tensor-decomposed neural models. By constraining interaction order and tensor rank, SNAs impose a structural inductive bias that factorises high-dimensional mappings into low-arity components. Separability need not be a property of the system itself: it often emerges in the coordinates or representations through which the system is expressed. Crucially, this coordinate-aware formulation reveals a structural analogy between chaotic spatiotemporal dynamics and linguistic autoregression. By treating continuous physical states as smooth, separable embeddings, SNAs enable distributional modelling of chaotic systems. This approach mitigates the nonphysical drift characteristics of deterministic operators whilst remaining applicable to discrete sequences. The compositional versatility of this approach is demonstrated across four domains: autonomous waypoint navigation via reinforcement learning, inverse generation of multifunctional microstructures, distributional modelling of turbulent flow and neural language modelling. These results establish the separable neural architecture as a domain-agnostic primitive for predictive and generative intelligence, capable of unifying both deterministic and distributional representations.

评分理由: 该论文专注于神经网络验证技术，提出了一种增量验证方法，通过重用学习到的冲突来加速验证过程。论文内容与所有评分关键词（均围绕大模型、深度学习技术原理、科学应用等）完全无关，因为：1）论文研究的是通用神经网络验证，而非大语言模型或特定深度学习技术；2）未涉及任何评分关键词中的技术（如MoE、Scaling Laws、微调、对齐、推理、代理等）；3）不属于AI for Science等应用领域；4）验证技术本身是底层工具，与评分关键词的创新方向不匹配。

神经网络验证常被用作大型分析流程的核心组件，这些流程会在同一网络上生成一系列紧密相关的验证查询。在现有的神经网络验证器中，每个查询通常被独立求解，且先前运行中学习到的信息会被丢弃，导致搜索空间中相同不可行区域被重复探索。本研究旨在通过减少这种冗余来加速验证过程。我们提出一种增量验证技术，能够在相关验证查询间复用已学习的冲突。该技术可集成于任何基于分支定界的神经网络验证器之上。在验证过程中，验证器会记录与已学习的激活相位不可行组合相对应的冲突，并在多次运行中保留这些信息。我们形式化了验证查询之间的精化关系，并证明在精化条件下，为某查询学习的冲突仍保持有效，从而实现可靠的冲突继承。继承的冲突通过SAT求解器进行一致性检查和传播处理，使得不可行子问题能在搜索早期被检测和剪枝。我们在Marabou验证器中实现了该技术，并在三个验证任务上进行了评估：局部鲁棒性半径确定、输入分割验证以及最小充分特征集提取。实验表明，增量式冲突复用减少了验证工作量，相比非增量基线方法实现了最高达$1.9\times$的加速效果。

Neural network verification is often used as a core component within larger analysis procedures, which generate sequences of closely related verification queries over the same network. In existing neural network verifiers, each query is typically solved independently, and information learned during previous runs is discarded, leading to repeated exploration of the same infeasible regions of the search space. In this work, we aim to expedite verification by reducing this redundancy. We propose an incremental verification technique that reuses learned conflicts across related verification queries. The technique can be added on top of any branch-and-bound-based neural network verifier. During verification, the verifier records conflicts corresponding to learned infeasible combinations of activation phases, and retains them across runs. We formalize a refinement relation between verification queries and show that conflicts learned for a query remain valid under refinement, enabling sound conflict inheritance. Inherited conflicts are handled using a SAT solver to perform consistency checks and propagation, allowing infeasible subproblems to be detected and pruned early during search. We implement the proposed technique in the Marabou verifier and evaluate it on three verification tasks: local robustness radius determination, verification with input splitting, and minimal sufficient feature set extraction. Our experiments show that incremental conflict reuse reduces verification effort and yields speedups of up to $1.9\times$ over a non-incremental baseline.