评分理由: 论文提出AutoProf框架，这是一个用于AI研究监督的多智能体系统，核心是维护一个持续演化的研究世界模型（Research World Model）。该框架明确支持主流大语言模型（LLMs），因此与"Large Language Models"高度相关（10分）。框架的核心是多智能体系统，涉及自主代理、协调和共识机制，因此与"LLM Agents"、“Multi-agent Systems"和"Self-Correction/Self-Improvement"高度相关（均为10分）。其核心创新之一是"Research World Model”，与"World Models"高度相关（10分）。应用领域是AI研究监督，属于"AI for Science"范畴（10分）。框架涉及结构化分析、自我纠正循环和迭代改进，体现了"Chain of Thought"和"System 2 Thinking"的某些方面（均为5分）。智能体可能需要调用工具或API来执行研究任务，与"Tool Use"有一定关联（5分）。论文未涉及其他关键词的具体技术细节，如MoE、模型压缩、训练方法、推理加速、对齐技术等，因此这些关键词评分为0分。

现有自动化研究系统以无状态的线性流程运作，其生成输出时并未保持对研究领域的持续性理解。这些系统按顺序处理论文，在没有结构化缺口分析的情况下提出想法，且缺乏智能体间相互验证或完善发现的机制。我们提出AutoProf（自主教授）——一个多智能体协同框架，其中专业化智能体通过自主探索与自我修正更新，在人类兴趣驱动下提供从文献综述、缺口发现、方法开发、评估到论文撰写的端到端人工智能研究指导。与顺序流程不同，AutoProf维护着一个持续演化的研究世界模型（以知识图谱形式实现），将方法、基准、局限性和未探索缺口作为跨智能体的共享记忆进行捕捉。该框架包含三项核心贡献：第一，结构化缺口发现机制，将方法解构为模块，跨基准评估模块性能，并识别模块层级的缺口；第二，自我修正发现循环，通过分析模块成功或失败的原因、检测基准偏差及评估充分性来实现持续优化；第三，自我改进的开发循环，利用跨领域机制搜索迭代修正失效组件。所有智能体在共识机制下运行，任何发现需经验证后方可提交至共享模型。该框架与模型无关，支持主流大语言模型，并可根据计算资源弹性扩展——从轻量级探索到全面研究均可适配。

Existing automated research systems operate as stateless, linear pipelines, generating outputs without maintaining a persistent understanding of the research landscape. They process papers sequentially, propose ideas without structured gap analysis, and lack mechanisms for agents to verify or refine each other’s findings. We present AutoProf (Autonomous Professor), a multi-agent orchestration framework where specialized agents provide end-to-end AI research supervision driven by human interests, from literature review through gap discovery, method development, evaluation, and paper writing, via autonomous exploration and self-correcting updates. Unlike sequential pipelines, AutoProf maintains a continuously evolving Research World Model implemented as a Knowledge Graph, capturing methods, benchmarks, limitations, and unexplored gaps as shared memory across agents. The framework introduces three contributions: first, structured gap discovery that decomposes methods into modules, evaluates them across benchmarks, and identifies module-level gaps; second, self-correcting discovery loops that analyze why modules succeed or fail, detect benchmark biases, and assess evaluation adequacy; third, self-improving development loops using cross-domain mechanism search to iteratively address failing components. All agents operate under a consensus mechanism where findings are validated before being committed to the shared model. The framework is model-agnostic, supports mainstream large language models, and scales elastically with token budget from lightweight exploration to full-scale investigation.

!!! info

构建了一个多智能体系统，利用知识图谱构建“研究世界模型”作为共享记忆。采用结构化分解策略将复杂方法拆解为模块进行独立评估，并实施迭代循环机制（发现循环和开发循环）进行自我修正和改进。所有智能体通过共识协议验证输出。

• 持久化记忆：通过知识图谱解决了传统AI代理的无状态问题，积累了研究洞察。
• 结构化分析：不仅仅是生成文本，而是进行模块级的缺口分析和评估。
• 自我修正：具备发现和修复自身逻辑漏洞或评估偏差的能力。
• 灵活性：模型无关且可弹性扩展，适应不同规模的预算。

• 复杂性：构建和维护知识图谱以及多智能体共识机制可能非常复杂。
• 依赖LLM：性能严重依赖底层大语言模型的能力，可能存在幻觉问题。
• 计算成本：多智能体交互和迭代循环可能消耗大量计算资源和Token。
• 验证准确性：共识机制虽然存在，但如果所有智能体都产生相同的幻觉，仍可能通过验证。

评分理由: 论文核心研究RAG系统在AI政策分析中的应用，因此"Retrieval-Augmented Generation"得满分15分。论文明确使用DPO进行对齐，“RLHF/DPO"得10分。研究关注幻觉问题，“Hallucination Mitigation"得10分。论文涉及大模型应用，“Large Language Models"得8分；应用于AI政策领域，“AI for Science"得8分。论文提到领域适应和微调，“Pre-training/Domain Adaptation"和"Post-training/SFT"各得5分；涉及对齐，“Instruction Tuning/Alignment"得5分。其他关键词如MoE、量化、推理加速等未涉及，得0分。

检索增强生成系统正日益广泛地应用于复杂政策文件的分析，然而在那些以密集法律语言和动态重叠的监管框架为特征的领域中，要达到专家使用所需的足够可靠性仍具挑战。本研究利用人工智能治理与监管档案库——一个包含947份人工智能政策文件的精选语料库——探讨了检索增强生成在人工智能治理与政策分析中的应用。我们的系统结合了基于ColBERT的检索器（通过对比学习进行微调）和采用直接偏好优化方法对齐人类偏好的生成器。我们构建了合成查询并收集成对偏好数据，以使系统适应政策领域。通过评估检索质量、答案相关性和忠实度的实验，我们发现领域特定的微调能提升检索指标，但并未持续改善端到端问答性能。在某些情况下，当语料库中缺乏相关文档时，更强的检索能力反而会反直觉地导致更自信的幻觉生成。这些结果凸显了构建政策导向检索增强生成系统的关键关切：单个组件的改进未必能转化为更可靠的答案。我们的研究结果为基于动态监管语料库设计有依据的问答系统提供了实践启示。

Retrieval-augmented generation (RAG) systems are increasingly used to analyze complex policy documents, but achieving sufficient reliability for expert usage remains challenging in domains characterized by dense legal language and evolving, overlapping regulatory frameworks. We study the application of RAG to AI governance and policy analysis using the AI Governance and Regulatory Archive (AGORA) corpus, a curated collection of 947 AI policy documents. Our system combines a ColBERT-based retriever fine-tuned with contrastive learning and a generator aligned to human preferences using Direct Preference Optimization (DPO). We construct synthetic queries and collect pairwise preferences to adapt the system to the policy domain. Through experiments evaluating retrieval quality, answer relevance, and faithfulness, we find that domain-specific fine-tuning improves retrieval metrics but does not consistently improve end-to-end question answering performance. In some cases, stronger retrieval counterintuitively leads to more confident hallucinations when relevant documents are absent from the corpus. These results highlight a key concern for those building policy-focused RAG systems: improvements to individual components do not necessarily translate to more reliable answers. Our findings provide practical insights for designing grounded question-answering systems over dynamic regulatory corpora.

!!! info

研究使用了AGORA数据集（947份文档）作为基础。在检索器方面，基于ColBERTv2，利用LLM生成的合成查询和人工标注的正负样本进行对比学习微调。在生成器方面，基于Mistral-7B-Instruct，利用人工标注的成对偏好数据进行直接偏好优化（DPO）微调。评估方面，使用RAGAS框架评估答案相关性和准确性，计算忠实度分数，并使用MRR、Recall@k等指标评估检索性能，同时辅以专家定性审查。

• 针对AI治理这一新兴且复杂的领域进行了深入探索，填补了交互式问答系统的空白。
• 提供了关于RAG系统组件改进与整体性能之间关系的反直觉见解，具有重要的实践指导意义。
• 结合了检索器微调和生成器对齐，构建了完整的端到端实验流程，并进行了多维度的评估。

• 端到端性能提升有限，特定领域微调的效果不如预期。
• 在语料库缺乏相关文档时，系统容易产生自信的幻觉。
• 专家审查指出系统在精确政策解释和跨文档引用方面仍有不足，难以处理复杂的法律嵌套定义。

评分理由: 论文提出LensWalk框架，核心是让大型语言模型（LLM）作为推理器主动控制视觉观察，实现视频理解。这与"Large Language Models"高度相关（10分），因为LLM是核心推理组件；与"LLM Agents"高度相关（10分），因为框架本质是代理系统；与"Chain of Thought"高度相关（10分），因为强调渐进式证据收集服务于推理链；与"System 2 Thinking"较强相关（8分），涉及深度推理；与"Tool Use"较强相关（8分），因为使用视觉语言模型工具；与"Explainable AI"有一定关联（5分），因为提到可解释性；其他关键词如MoE、SFT、RAG等未涉及，得0分。

视频密集且时序化的特性为自动化分析带来了巨大挑战。尽管现有方法采用了强大的视觉语言模型，但主流视频理解技术仍受限于推理与感知之间的固有割裂：它们依赖静态的预处理信息，无法在理解深化过程中主动从视频中搜寻原始证据。为此，我们提出LensWalk——一种灵活的智能体框架，使大语言模型推理器能够主动控制其视觉观察过程。LensWalk构建了紧密的“推理-规划-观察”循环机制，智能体可在每一步动态指定所观察视频的时间范围与采样密度。通过调用一系列由这些参数配置的、基于视觉语言模型的多样化工具，智能体能够执行大范围线索扫描、聚焦特定片段进行事实提取，并整合多时刻证据以完成整体验证。该设计实现了直接服务于智能体动态思维链的渐进式按需证据收集。无需任何模型微调，LensWalk在多种模型架构上实现了显著的即插即用性能提升，在LVBench和Video-MME等具有挑战性的长视频基准测试中，将模型准确率提升了5%以上。我们的分析表明，赋予智能体控制其观察方式的能力，是解锁更精准、鲁棒且可解释的视频推理的关键所在。

The dense, temporal nature of video presents a profound challenge for automated analysis. Despite the use of powerful Vision-Language Models, prevailing methods for video understanding are limited by the inherent disconnect between reasoning and perception: they rely on static, pre-processed information and cannot actively seek raw evidence from video as their understanding evolves. To address this, we introduce LensWalk, a flexible agentic framework that empowers a Large Language Model reasoner to control its own visual observation actively. LensWalk establishes a tight reason-plan-observe loop where the agent dynamically specifies, at each step, the temporal scope and sampling density of the video it observes. Using a suite of versatile, Vision-Language Model based tools parameterized by these specifications, the agent can perform broad scans for cues, focus on specific segments for fact extraction, and stitch evidence from multiple moments for holistic verification. This design allows for progressive, on-demand evidence gathering that directly serves the agent’s evolving chain of thought. Without requiring any model fine-tuning, LensWalk delivers substantial, plug-and-play performance gains on multiple model recipes, boosting their accuracy by over 5% on challenging long-video benchmarks like LVBench and Video-MME. Our analysis reveals that enabling an agent to control how it sees is key to unlocking more accurate, robust, and interpretable video reasoning.

!!! info

论文采用基于智能体的研究方法。核心架构包含LLM推理器和VLM观察器。技术路线是构建一个迭代循环：推理器分析当前问题与证据，规划下一步动作并调用观察工具；观察工具根据参数（时间范围、采样率）从原始视频中提取视觉证据；通过时间戳锚点和记忆表更新全局状态。整个过程是动态的、按需的，而非静态预处理。

• 主动性：突破了静态观察的限制，实现了基于推理需求的动态视觉感知。
• 高效性：通过按需分配观察预算，避免了无关信息的浪费，在提升精度的同时控制了计算成本。
• 通用性：无需微调，可作为插件提升多种现有VLM/LLM组合的性能。
• 可解释性：推理轨迹展示了清晰的观察策略，便于理解模型的决策过程。

• 依赖LLM的规划能力，如果LLM规划错误，可能导致观察偏差。
• 多轮迭代可能增加推理延迟，尽管Token总量低，但交互次数可能较多。
• 对于极短或极简单的视频，复杂的智能体框架可能显得冗余。
• 论文主要关注长视频理解，对于实时视频流处理的适用性未明确探讨。

评分理由: 论文核心研究大语言模型（LLMs）的自蒸馏（self-distillation）这一后训练（post-training）技术，并深入分析其对模型推理能力（特别是数学推理）的影响。研究发现自蒸馏会抑制模型在推理过程中表达不确定性（epistemic verbalization），从而损害其鲁棒性，尤其是在分布外（OOD）任务上。这与’Chain of Thought’、‘System 2 Thinking’、‘Self-Correction’等涉及多步推理、深度思考和自我反思/改进的关键词高度相关。论文明确将自蒸馏定位为一种’post-training paradigm’，因此与’Post-training’关键词高度相关。论文研究对象为LLMs，因此与’Large Language Models’关键词高度相关。论文未涉及其他关键词所描述的具体技术、应用领域或特定专家。

自蒸馏已成为大型语言模型一种有效的后训练范式，通常能在缩短推理轨迹的同时提升模型性能。然而在数学推理任务中，我们发现该方法虽能缩减响应长度，却可能导致性能下降。我们将这种性能退化归因于认知性言语表达的抑制——即模型在推理过程中不确定性表达能力的减弱。通过控制条件上下文丰富度与任务覆盖范围的对比实验，我们证明：让教师模型基于丰富信息进行条件生成会抑制不确定性的表达，这虽能在有限任务覆盖范围内实现快速的领域内优化，却会损害分布外（OOD）性能——因为面对未见问题时，模型需要表达不确定性并进行相应调整才能获得更好表现。在Qwen3-8B、DeepSeek-Distill-Qwen-7B和Olmo3-7B-Instruct三个模型上的实验显示，性能下降幅度最高可达40%。我们的研究结果表明：暴露适当程度的不确定性对于实现鲁棒推理至关重要，同时强调了对推理行为进行优化不应仅仅局限于强化正确答案轨迹，而需关注更本质的认知表达机制。

Self-distillation has emerged as an effective post-training paradigm for LLMs, often improving performance while shortening reasoning traces. However, in mathematical reasoning, we find that it can reduce response length while degrading performance. We trace this degradation to the suppression of epistemic verbalization - the model’s expression of uncertainty during reasoning. Through controlled experiments varying conditioning context richness and task coverage, we show that conditioning the teacher on rich information suppresses uncertainty expression, enabling rapid in-domain optimization with limited task coverage but harming OOD performance, where unseen problems benefit from expressing uncertainty and adjusting accordingly. Across Qwen3-8B, DeepSeek-Distill-Qwen-7B, and Olmo3-7B-Instruct, we observe performance drops of up to 40%. Our findings highlight that exposing appropriate levels of uncertainty is crucial for robust reasoning and underscore the importance of optimizing reasoning behavior beyond merely reinforcing correct answer traces.

!!! info

论文采用了对比分析和控制变量的实验方法。首先，比较了自蒸馏在化学和数学领域的不同表现。其次，通过定义条件互信息来量化上下文信息的丰富度，设置了无引导、答案引导、去除思考内容的答案引导、再生条件引导四种生成设置，观察模型推理行为的变化。最后，使用DeepSeek-R1-Distill-Qwen-7B模型，分别在高不确定性（无引导）和低不确定性（答案引导）的正确数据集上进行监督微调，并在AIME、AMC、MATH500等基准测试上评估其泛化能力。

• 洞察深刻，不仅观察到了性能下降的现象，还深入挖掘了背后的机制（认识性语言化的抑制）。
• 实验设计严谨，通过控制变量（信息丰富度）和对比实验（不同领域、不同训练数据），有力地支撑了研究假设。
• 实用价值高，为LLM的后训练提供了重要指导，指出不能盲目追求推理链的压缩和自信，必须保留不确定性表达以增强鲁棒性。
• 通用性强，在多个主流开源模型上验证了结论。

• 研究主要集中在数学推理领域，在其他复杂推理任务（如代码生成、逻辑推理）中的普适性可能需要进一步验证。
• 论文主要分析了问题原因，未提出具体的算法改进方案来自动保留或增强认识性语言化。
• 实验主要在7B-8B参数规模的模型上进行，在更大参数模型上这种抑制效应是否依然显著尚不明确。

评分理由: 论文核心研究计算机使用代理（CUAs），属于自主代理和工具使用领域，与"LLM Agents"和"Tool Use"高度相关（10分）。论文提到基础动作模型（foundation action models）和视觉世界模型（visual world models），与"Large Language Models"和"World Models"有一定关联（5分）。数据集旨在解决数据稀缺瓶颈，支持扩展，与"Scaling Laws” AND “Data Quality"相关（5分）。注释包含多步推理，与"Chain of Thought"和"System 2 Thinking"相关（5分）。其他关键词如MoE、SLMs、训练方法、推理优化、科学AI等未在论文中涉及，得0分。

计算机使用智能体（Computer-use Agents, CUAs）在自动化复杂桌面工作流程方面前景广阔，但通用智能体的发展受限于连续、高质量人类演示视频的稀缺。近期研究强调，连续视频（而非稀疏截图）是扩展这类智能体规模的关键缺失要素。然而，现有最大的开放数据集ScaleCUA仅包含200万张截图，相当于不足20小时的视频数据。为突破这一瓶颈，我们推出CUA-Suite——一个面向专业桌面计算机使用智能体的大规模专家演示视频与密集标注生态系统。其核心是VideoCUA数据集，该数据集提供涵盖87种多样化应用的约1万个人类演示任务，包含30帧/秒的连续屏幕录制、运动学光标轨迹以及多层推理标注，总计约55小时、600万帧的专家级视频。与仅捕获最终点击坐标的稀疏数据集不同，这些连续视频流完整保留了人机交互的时序动态，构成信息超集，可无损转换为现有智能体框架所需的格式。CUA-Suite进一步提供两项互补资源：UI-Vision（用于评估CUAs grounding与规划能力的严谨基准）和GroundCUA（包含5.6万张标注截图及超360万个UI元素标注的大规模grounding数据集）。初步评估表明，当前基础动作模型在处理专业桌面应用时面临显著挑战（任务失败率约60%）。除评估功能外，CUA-Suite丰富的多模态语料库支持新兴研究方向，包括通用屏幕解析、连续空间控制、基于视频的奖励建模及视觉世界模型。所有数据与模型均已公开发布。

Computer-use agents (CUAs) hold great promise for automating complex desktop workflows, yet progress toward general-purpose agents is bottlenecked by the scarcity of continuous, high-quality human demonstration videos. Recent work emphasizes that continuous video, not sparse screenshots, is the critical missing ingredient for scaling these agents. However, the largest existing open dataset, ScaleCUA, contains only 2 million screenshots, equating to less than 20 hours of video. To address this bottleneck, we introduce CUA-Suite, a large-scale ecosystem of expert video demonstrations and dense annotations for professional desktop computer-use agents. At its core is VideoCUA, which provides approximately 10,000 human-demonstrated tasks across 87 diverse applications with continuous 30 fps screen recordings, kinematic cursor traces, and multi-layerfed reasoning annotations, totaling approximately 55 hours and 6 million frames of expert video. Unlike sparse datasets that capture only final click coordinates, these continuous video streams preserve the full temporal dynamics of human interaction, forming a superset of information that can be losslessly transformed into the formats required by existing agent frameworks. CUA-Suite further provides two complementary resources: UI-Vision, a rigorous benchmark for evaluating grounding and planning capabilities in CUAs, and GroundCUA, a large-scale grounding dataset with 56K annotated screenshots and over 3.6 million UI element annotations. Preliminary evaluation reveals that current foundation action models struggle substantially with professional desktop applications (~60% task failure rate). Beyond evaluation, CUA-Suite’s rich multimodal corpus supports emerging research directions including generalist screen parsing, continuous spatial control, video-based reward modeling, and visual world models. All data and models are publicly released.

!!! info

研究采用了人类专家演示与密集标注相结合的方法。首先，人类专家在87种桌面软件上执行任务，记录屏幕录制和动作日志。随后，对关键帧进行边界框、OCR和交互标注，并经过多步专家验证以确保质量。最终构建了包含连续视频轨迹、UI元素定位和推理文本的CUA-Suite生态系统，并利用UI-VISION基准对现有模型进行评估。

• 数据质量高且规模大，由人类专家验证，解决了自动生成数据噪声大的问题。
• 强调时间连续性，提供连续视频而非稀疏截图，有助于学习视觉世界模型和连续控制策略。
• 生态系统全面，不仅提供训练数据，还提供了评估基准和定位数据，形成闭环研究生态。
• 完全开源，极大地推动了计算机使用代理领域的研究进展。

• 数据收集成本极高，依赖人工标注和专家演示，难以快速扩展到更多应用。
• 虽然覆盖了87种应用，但相对于海量的桌面软件生态，覆盖面仍有限，可能存在分布偏差。
• 当前模型在该数据集上的表现依然不佳（60%失败率），说明仅靠数据可能不足以解决所有问题，算法架构仍需进一步创新。

评分理由: 论文核心是使用大语言模型（LLMs）构建一个环境接地的多智能体系统，用于机器人环境中的自动化渗透测试。因此，与"Large Language Models”（LLMs）高度相关（10分），因为论文明确探索LLMs在此应用。与"LLM Agents"和"Multi-agent Systems"高度相关（10分），因为论文提出了一个多智能体架构。与"Tool Use"有一定关联（5分），因为渗透测试涉及利用工具进行漏洞利用，但论文未明确讨论LLMs的API工具调用功能。其他关键词如MoE、SFT、RAG、量化等，论文未涉及技术细节或创新，因此评分为0分。

数字基础设施日益增长的复杂性与互联性，使得可扩展且可靠的安全评估方法变得至关重要。机器人系统作为一类尤为重要的运营技术（Operational Technology），其现代形态是高度网络化的信息物理系统，广泛应用于工业自动化、物流及自主服务等领域。本文探讨了在机器人环境中利用大语言模型进行自动化渗透测试的方法。我们提出了一种专为机器人系统定制的、基于环境的多智能体架构。该方法在执行过程中动态构建一个基于图的共享记忆，用以捕获可观测的系统状态，包括网络拓扑、通信通道、漏洞及已尝试的攻击手段。这实现了结构化的自动化测试，同时在整个测试过程中保持了可追溯性和有效的上下文管理。通过在专门的机器人夺旗场景（ROS/ROS2）中进行多轮迭代评估，该系统表现出高可靠性，在全部测试运行（n=5）中均成功完成挑战，成功率达100%。这一性能显著超越了文献中的基准水平，同时满足了如《欧盟人工智能法案》等框架所要求的可追溯性与人工监督。

The increasing complexity and interconnectivity of digital infrastructures make scalable and reliable security assessment methods essential. Robotic systems represent a particularly important class of operational technology, as modern robots are highly networked cyber-physical systems deployed in domains such as industrial automation, logistics, and autonomous services. This paper explores the use of large language models for automated penetration testing in robotic environments. We propose an environment-grounded multi-agent architecture tailored to Robotics-based systems. The approach dynamically constructs a shared graph-based memory during execution that captures the observable system state, including network topology, communication channels, vulnerabilities, and attempted exploits. This enables structured automation while maintaining traceability and effective context management throughout the testing process. Evaluated across multiple iterations within a specialized robotics Capture-the-Flag scenario (ROS/ROS2), the system demonstrated high reliability, successfully completing the challenge in 100% of test runs (n=5). This performance significantly exceeds literature benchmarks while maintaining the traceability and human oversight required by frameworks like the EU AI Act.

!!! info

论文采用基于LangGraph的多智能体工作流架构。系统分为三个主要阶段：规划阶段由规划器生成结构化任务列表；执行阶段由执行器将任务转化为Nmap扫描或ROS漏洞利用命令；记忆保存阶段由记忆智能体将结果更新到持久化的知识图谱中。系统通过区分临时的工作流状态和持久的图记忆来管理上下文。评估在专门的机器人CTF环境（ROS/ROS2）中进行，通过多次迭代测试系统的成功率，并与文献中的基准进行对比，同时分析了不同LLM架构和模型大小对性能的影响。

• 高可靠性与自动化：在测试中实现了100%的成功率，显著优于现有方法。
• 卓越的可追溯性：图记忆结构提供了透明的决策记录，便于审计和人工监督，符合法规要求。
• 上下文感知能力：动态构建的记忆使智能体能够基于已发现信息生成后续任务，避免了信息丢失。
• 领域针对性：专门针对机器人系统的复杂性和特定协议（如ROS）进行了优化，填补了OT安全自动化的空白。

• 评估环境主要基于模拟的CTF场景，在真实工业环境中的复杂性和干扰因素可能未被完全覆盖。
• 系统仍需人工干预以切换操作模式（如从扫描模式切换到利用模式），尚未实现完全的端到端自主化。
• 依赖的工具集相对有限（主要是Nmap和自定义脚本），面对未知的复杂漏洞或特定防御机制时可能能力不足。
• LLM本身的幻觉风险和上下文窗口限制虽然通过架构有所缓解，但仍是潜在的瓶颈。

评分理由: 论文核心研究大语言模型（LLMs）在数学推理任务中，通过强化学习（RL）训练时遇到的梯度消失问题，并提出了一种名为HDPO的混合蒸馏策略优化方法。该方法通过特权自蒸馏（self-distillation）来增强标准RL，特别针对模型完全无法解决的“悬崖”提示（cliff prompts）。因此，论文与“Large Language Models”和“RLHF”高度相关（10分），因为其核心就是LLMs的RL训练优化。与“Chain of Thought”和“Self-Correction”有一定关联（5分），因为数学推理涉及多步推理，且自蒸馏可视为一种自我改进机制。与“AI for Science”也有一定关联（5分），因为数学推理是科学AI的一个子领域。其他关键词如MoE、SFT、RAG、量化等，论文未涉及，故得0分。

采用强化学习（RL）训练的大语言模型在数学推理任务中面临一个根本性挑战：对于模型完全无法解决的“悬崖”式问题，RL梯度会完全消失，导致这些失败模式无法获得任何学习信号。我们提出了混合蒸馏策略优化（Hybrid Distillation Policy Optimization, HDPO），该方法通过针对悬崖式问题的特权自蒸馏来增强标准RL训练。在每一步训练中，HDPO首先识别所有采样轨迹均失败的提示，随后通过向模型提供真实信息生成特权轨迹，筛选出正确解，并将教师模型在词元级别的分布蒸馏至学生模型。由于教师与学生模型共享权重（仅输入不同），与跨模型蒸馏不同，其可实现性差距在理论上是有界的。我们证明，在硬阈值极限下，采用R=1过滤的特权生成能够恢复最优的KL正则化RL策略。在OpenMathInstruct-2数据集上使用Qwen2.5-Math-1.5B-Instruct模型进行的实验表明，HDPO在保持贪婪准确率的同时，持续提升了覆盖度指标（pass@4提升0.8-1.1%，pass@8提升0.4-1.7%），其中蒸馏权重λ为探索-利用权衡提供了直接控制。

Large language models trained with reinforcement learning (RL) for mathematical reasoning face a fundamental challenge: on problems the model cannot solve at all - “cliff” prompts - the RL gradient vanishes entirely, preventing any learning signal from reaching these failure modes. We introduce Hybrid Distillation Policy Optimization (HDPO), which augments standard RL with privileged self-distillation targeting cliff prompts. On each training step, HDPO identifies prompts where all rollouts fail, generates privileged rollouts by providing the model with ground-truth information, filters for correct solutions, and distills the teacher’s token-level distribution into the student. Because teacher and student share the same weights - differing only in their input - the realizability gap is provably bounded, unlike cross-model distillation. We prove that R=1 filtered privileged generation recovers the optimal KL-regularized RL policy in the hard-threshold limit. Experiments on OpenMathInstruct-2 with Qwen2.5-Math-1.5B-Instruct show that HDPO consistently improves coverage metrics (pass@4 by +0.8-1.1%, pass@8 by +0.4-1.7%) while maintaining greedy accuracy, with the distillation weight lambda providing direct control over the exploration-exploitation tradeoff.

!!! info

论文采用混合训练策略，结合了组相对策略优化（GRPO）与特权自蒸馏。首先进行标准的GRPO更新；然后识别出所有rollout均失败的“悬崖”提示；接着将基本真值附加到输入中作为特权信息，生成特权rollout并过滤出正确解（R=1）；最后使用Jensen-Shannon散度（JSD）作为损失函数，将特权模型（教师）的token级分布蒸馏回原始模型（学生）。整个过程在同一模型权重下进行，仅输入上下文不同。

• 机制简单高效：仅需额外的正向传播和标准JSD损失，无需复杂的课程调度、回放缓冲区或提示生成器。
• 理论保证充分：提供了关于可实现性差距和最优策略恢复的严格数学证明。
• 解决核心痛点：直接针对RL训练中梯度消失的死区问题，利用模型自身能力生成训练数据。
• 提升多样性：使用JSD损失有助于保持解的多样性，避免模式崩溃，从而提高pass@k指标。

• 依赖基本真值：该方法需要问题的基本真值来进行特权生成，虽然数学领域常见，但在其他开放域任务中可能受限。
• 计算开销增加：需要对悬崖提示进行额外的特权生成和蒸馏步骤，增加了训练时的计算成本。
• 领域验证有限：目前主要在数学推理任务上进行了验证，在其他推理领域的泛化效果尚需进一步研究。

评分理由: 论文核心研究LLMs中的性别偏见问题，特别是对齐（alignment）如何影响偏见表达与编码。高度相关（10分）的关键词包括：1) “Large Language Models” OR “LLMs” OR “Foundation Models”（论文明确研究LLMs）；2) “Post-training” OR “Supervised Fine-tuning” OR “SFT”（论文通过监督微调进行对齐）；3) “Instruction Tuning” OR “Alignment” OR “Value Alignment”（论文核心研究对齐对偏见的影响）。中等相关（5分）的关键词：“Mechanistic Interpretability” OR “Explainable AI”（论文分析内部表示与偏见编码，涉及模型可解释性）。其他关键词与论文主题（偏见分析、对齐效果）无直接关联，得0分。

在训练过程中，大语言模型（LLMs）习得的社会规律可能导致下游应用中出现性别偏见。大多数缓解措施侧重于减少生成输出中的偏见，通常通过结构化基准进行评估，这引发了两个问题：输出层面的评估无法揭示对齐过程是否改变了模型的内在表征，且结构化基准可能无法反映真实使用场景。我们提出一个统一框架，利用相同的中性提示词联合分析大语言模型的内在和外显性别偏见，从而能够直接比较内部表征中编码的性别相关信息与生成输出中表达的偏见。与先前研究报道的弱相关或不一致关联不同，我们在统一测量协议下发现潜在性别信息与表达出的偏见之间存在稳定关联。我们进一步通过旨在减少性别偏见的有监督微调来检验对齐效果。结果表明，尽管微调确实减少了外显偏见，但内部表征中仍存在可测量的性别相关关联，且这些关联在对抗性提示下可能被重新激活。最后，我们考察两种现实场景并证明，在结构化基准上观察到的去偏见效果不一定能推广到其他情境，例如故事生成任务中。

During training, Large Language Models (LLMs) learn social regularities that can lead to gender bias in downstream applications. Most mitigation efforts focus on reducing bias in generated outputs, typically evaluated on structured benchmarks, which raises two concerns: output-level evaluation does not reveal whether alignment modifies the model’s underlying representations, and structured benchmarks may not reflect realistic usage scenarios. We propose a unified framework to jointly analyze intrinsic and extrinsic gender bias in LLMs using identical neutral prompts, enabling direct comparison between gender-related information encoded in internal representations and bias expressed in generated outputs. Contrary to prior work reporting weak or inconsistent correlations, we find a consistent association between latent gender information and expressed bias when measured under the unified protocol. We further examine the effect of alignment through supervised fine-tuning aimed at reducing gender bias. Our results suggest that while the latter indeed reduces expressed bias, measurable gender-related associations are still present in internal representations, and can be reactivated under adversarial prompting. Finally, we consider two realistic settings and show that debiasing effects observed on structured benchmarks do not necessarily generalize, e.g., to the case of story generation.

!!! info

论文构建了包含概念（如职业、疾病）和中性人设（如“我的朋友”）的提示集。对于外在偏见，通过LLM生成补全，并利用LLM-as-a-judge方法根据性别线索（代词、名词）分类，计算实体级和概念级偏见分数。对于内在偏见，提取模型处理提示时最终token的隐藏状态，分析其中编码的性别信息。研究还应用了旨在减少性别偏见的监督微调（SFT），并使用对抗性提示测试偏见的可复活性。最后，通过方向消融实验移除特定性别方向，以验证其因果作用。

• 框架设计严谨，通过使用相同提示消除了内在与外在偏见分析之间的变量干扰，提高了结论的可信度。
• 深入揭示了模型对齐的机制本质，区分了“行为抑制”与“知识移除”，对理解LLM安全性具有重要意义。
• 不仅关注基准测试，还考察了故事生成等现实应用场景，结论更具实际指导价值。
• 结合了相关性分析、对抗性测试和消融实验多种手段，论证逻辑严密。

• 研究主要关注隐性性别偏见（刻板印象），对于显性偏见或其他类型的偏见（如种族、宗教）涉及较少。
• 对抗性提示的构造可能无法覆盖所有可能的攻击方式，偏见重新激活的阈值和范围有待进一步探索。
• 依赖LLM-as-a-judge进行输出分类，评估结果可能受到评判模型自身偏见的影响。
• 主要关注特定概念（如职业），对于更复杂语境下的偏见表现可能需要扩展分析。

评分理由: 论文核心研究MoE模型的参数高效微调方法，与"Mixture of Experts"和"PEFT/LoRA"高度相关（10分），因为直接研究MoE架构和LoRA微调技术。与"Large Language Models"相关（8分），因为MoE模型通常是大语言模型的一种架构。与"Post-training/SFT"有一定关联（5分），因为涉及微调阶段。其他关键词如SLMs、Scaling Laws、RAG、Agents等与论文内容无关（0分）。

对混合专家（Mixture-of-Experts, MoE）模型进行标准LoRA微调时，通常将适配器应用于所有专家。然而，我们的性能分析表明，每层的专家路由分布高度倾斜：每层中只有一小部分专家处理大多数令牌，而许多其他专家很少被激活（即“冷”专家）。我们提出了MoE-Sieve，一种简单的路由引导式LoRA微调框架，并结合了对不同架构和任务中专家路由的系统性分析研究。该方法很简单：在一个小型校准集上分析路由计数，每层选择前k个被路由最多的专家，并仅对这些专家应用LoRA。在两个架构不同的MoE模型和三项多样化任务中，每层仅微调前25%被路由最多的专家，其性能仍与完整LoRA微调相当，所有条件下的平均差异在+/-1个百分点以内。这使LoRA可训练参数减少了70-73%，适配器检查点大小减少了71-73%，实际训练时间最多减少了50%。我们还观察到专家数量与种子间方差之间存在非单调关系，这与以下假设一致：调整冷专家可能引入梯度噪声而不会提升准确性。进一步的消融实验表明，在相同参数预算下随机选择专家的性能约差2.5个百分点，这说明路由信号至关重要，而逐层贪婪预算优化并未优于均匀的前k选择。

Standard LoRA fine-tuning of Mixture-of-Experts (MoE) models applies adapters to every expert, yet our profiling shows that per-layer expert routing is highly skewed: a small subset of experts handles most tokens in each layer, while many others are rarely activated (“cold”). We propose MoE-Sieve, a simple routing-guided framework for LoRA fine-tuning, and pair it with a systematic profiling study of expert routing across architectures and tasks. The method is simple: profile routing counts on a small calibration set, select the top-k most-routed experts per layer, and apply LoRA only to those experts. Across two architecturally distinct MoE models and three diverse tasks, tuning only the top 25% routed experts per layer remains competitive with full LoRA, with mean differences within +/-1 percentage point across all conditions. This reduces LoRA trainable parameters by 70-73%, adapter checkpoint size by 71-73%, and wall-clock training time by up to 50%. We also observe a non-monotonic relationship between expert count and seed-to-seed variance, consistent with the hypothesis that adapting cold experts can introduce gradient noise without improving accuracy. Further ablations show that random expert selection at matched budget is about 2.5 percentage points worse, indicating that the routing signal matters, while greedy per-layer budget optimization does not improve over uniform top-k.

!!! info

论文采用三步走的技术路线：首先，在小型校准集上进行单次前向传播，统计每层每个专家的激活次数；其次，根据激活计数选择每层路由频率最高的Top-k专家；最后，仅对选定的专家以及始终激活的注意力、路由器和共享专家模块应用LoRA进行微调。研究在OLMoE-1B-7B和Qwen1.5-MoE-A2.7B等不同架构的模型上，通过Spider、GSM8K和HellaSwag等任务验证了该方法的有效性，并与全量LoRA及随机选择基线进行了对比。

• 显著提升了MoE模型微调的参数效率和计算效率，降低了部署门槛。
• 方法极其简单（Profile -> Count -> Pick Top-k -> Fine-tune），易于实现且无需复杂的超参数搜索。
• 具有广泛的通用性，在多种不同架构的MoE模型和不同任务上均表现良好。
• 提供了对MoE路由动态的深入实证分析，为后续研究提供了理论基础。

• 依赖于校准集的代表性，如果校准数据与微调数据分布差异较大，选定的专家可能不是最优。
• 最优的专家预算比例（如Top-25%）可能因模型架构而异，需要针对新模型进行一定的调整。
• 专家选择在微调前是静态确定的，无法适应微调过程中可能发生的路由模式变化。

评分理由: 论文核心研究LLM推理中的早期退出解码技术，直接涉及"Large Language Models”（10分）和"Speculative Decoding”（8分，因早期退出是推理加速的一种形式）。论文明确比较了Mixture-of-Experts模型，故"Mixture of Experts"得8分。论文提到预训练模型和架构改进，与"Pre-training"有一定关联（5分）。其他关键词如SLMs、SFT、RAG等与论文内容无直接关系，均得0分。

在大语言模型推理中，早期退出是指在预测达到足够置信度时于中间层停止计算，从而降低延迟与成本。然而，近期的大语言模型采用了改进的预训练方案和架构，减少了层间冗余，这可能限制了早期退出的机会。我们重新评估了现代大语言模型中的分层早期退出机制，并分析了训练过程中中间表示的演化规律。我们引入了一种量化模型内在早期退出适用性的指标，并提出了一个基准测试，供研究者探索不同模型和工作负载上潜在的早期退出收益。我们的研究结果显示，在新一代模型中，早期退出的有效性呈下降趋势。进一步发现，稠密Transformer通常比混合专家模型和状态空间模型具有更大的早期退出潜力。此外，参数量更大的模型（特别是超过200亿参数的模型）以及未经专门调优的预训练基础模型，往往表现出更高的早期退出潜力。

In Large Language Model (LLM) inference, early-exit refers to stopping computation at an intermediate layer once the prediction is sufficiently confident, thereby reducing latency and cost. However, recent LLMs adopt improved pretraining recipes and architectures that reduce layer redundancy, potentially limiting early-exit opportunities. We re-evaluate layer-wise early-exit in modern LLMs and analyze how intermediate representations evolve during training. We introduce a metric to quantify a model’s intrinsic suitability for early-exit and propose a benchmark for researchers to explore the potential early-exit benefits on different models and workloads. Our results show a diminishing trend in early-exit effectiveness across newer model generations. We further find that dense transformers generally offer greater early-exit potential than Mixture-of-Experts and State Space Models. In addition, larger models, particularly those with more than 20 billion parameters, and base pretrained models without specialized tuning tend to exhibit higher early-exit potential.

!!! info

论文基于OpenCompass框架，选取GPQA、GSM8K、HumanEval和MMLU等多样化数据集，对Llama系列、Qwen系列、OpenAI OSS及Mamba等不同架构和规模的现代LLM进行系统评估。通过计算中间层与最终层的隐藏状态或Logits的余弦相似度以及跳过比率，构建加权几何平均数作为早退适应性得分（EAS），从而量化模型的早退潜力。

• 视角新颖：挑战了早退机制在现代先进LLM中依然有效的传统假设，指出了收益递减的现象。
• 量化指标：提出的EAS指标提供了一个通用的、无需特定训练即可评估模型早退潜力的标准。
• 覆盖全面：评估涵盖了多种模型架构（密集、MoE、SSM）、规模和训练阶段，结论具有广泛的参考价值。

• 评估局限性：主要基于Oracle评估（即假设知道最佳退出点），实际应用中的动态退出策略可能难以达到理论上的加速上限。
• 模型覆盖：虽然涵盖了多种模型，但可能未包含所有最新的闭源模型或特定领域的微调模型。
• 未提出解决方案：论文主要揭示了问题（收益递减），并未提出针对现代LLM的新型早退算法来逆转这一趋势。

评分理由: 论文专注于大型视觉语言模型（LVLMs）中的物体幻觉问题，提出了一种基于注意力失衡校正的轻量级解码时干预方法。与关键词的相关性分析如下：1）与"Large Language Models"高度相关（10分），因为LVLMs是LLMs在视觉语言领域的扩展；2）与"Hallucination Mitigation"高度相关（10分），这是论文的核心研究问题；3）与"Mechanistic Interpretability"有一定关联（5分），论文通过分析注意力模式来解释幻觉成因；4）与"AI for Science"有一定关联（5分），论文提到在自动驾驶和医学图像分析等高风险场景的应用；5）其他关键词如MoE、SFT、RAG等与论文内容无直接关系，得0分。

大型视觉语言模型（LVLMs）中的物体幻觉严重削弱了其在现实应用中的可靠性，对其在自动驾驶和医学图像分析等高风险场景中的部署构成了关键障碍。通过系统性实证研究，我们发现跨模态（即视觉与语言）及模态内（各独立标记间）的注意力分配失衡与物体幻觉的发生存在强因果关联。基于这一洞察，我们提出了“注意力失衡”这一新概念，它不仅能量化注意力差异的程度，还能可视化地揭示驱动物体幻觉的内在模式（例如对无关语言标记的过度关注或对判别性视觉特征的关注不足）。为缓解物体幻觉，我们进一步提出注意力失衡矫正（AIR），这是一种轻量级的解码时干预方法，通过重新分配注意力权重并调整注意力分布来纠正模态间与标记间的失衡。在四种主流LVLM和三个基准测试（CHAIR、POPE和MM-Vet）上使用七种基线方法进行的广泛评估表明，AIR能持续降低物体幻觉率，相较于基线方法最高可减少35.1%，同时在不同视觉语言任务中将LVLMs的通用能力最高提升15.9%。

Object hallucination in Large Vision-Language Models (LVLMs) severely compromises their reliability in real-world applications, posing a critical barrier to their deployment in high-stakes scenarios such as autonomous driving and medical image analysis. Through systematic empirical investigation, we identify that the imbalanced attention allocation, both across modalities (i.e., vision and language) and within modalities (among individual tokens), exhibits a strong causal correlation with the occurrence of object hallucination. Leveraging this insight, we introduce a novel concept termed attention imbalance, which not only quantifies the degree of attention disparity but also visually delineates the underlying patterns (e.g., over-attentiveness to irrelevant language tokens or under-attentiveness to discriminative visual features) that drive object hallucination. To mitigate object hallucination, we further propose Attention Imbalance Rectification (AIR), a lightweight decoding-time intervention method that reallocates attention weights and adjusts attention distributions to rectify modality-wise and token-wise imbalances. Extensive evaluations on four mainstream LVLMs and three benchmarks (CHAIR, POPE, and MM-Vet) with seven baselines demonstrate that AIR consistently reduces object hallucination rates, achieving up to a 35.1% reduction compared to the baselines, while improving up to 15.9% of LVLMs’ general capability across diverse vision-language tasks.

!!! info

论文首先通过系统实证分析，计算模态间注意力不平衡（MAI）和模态内注意力不平衡（TAI），建立其与幻觉的相关性。随后，提出AIR方法，在模型推理阶段对注意力矩阵进行干预：一是进行模态平衡注意力重分配，缓解跨模态的过度不平衡；二是应用方差约束投影正则化，使注意力分布均匀化。

• 理论解释深刻，从注意力机制角度揭示了幻觉的成因。
• 方法轻量高效，无需额外训练或微调，仅在解码时进行干预。
• 泛化能力强，适用于多种LVLM架构，且在减少幻觉的同时不损害甚至提升通用性能。

• 虽然是轻量级干预，但在解码过程中修改注意力权重仍可能引入一定的计算延迟。
• 主要针对“物体”幻觉，对于其他类型的幻觉（如属性、关系幻觉）的效果可能有限。
• 需要设定特定的阈值（如TAI的阈值τ），可能需要针对不同模型进行调整。

评分理由: 论文核心研究大语言模型（LLMs）在联邦学习（FL）环境下的多语言指令微调（Instruction Tuning），这直接对应关键词"Large Language Models"和"Instruction Tuning”。研究涉及对LLMs进行微调，属于"Post-training"或"Supervised Fine-tuning"范畴。论文未涉及其他关键词如MoE、量化、推理加速、科学AI应用等具体技术或领域。

在多语言环境下进行大语言模型的联邦学习面临着显著挑战，这些挑战主要源于客户端间异构的语言分布以及语言资源可用性的差异。为解决这些问题，我们扩展了FederatedScope-LLM框架，以支持大语言模型的多语言指令微调实验。同时，我们引入了一种新颖的客户端特定早停机制——本地动态早停（Local Dynamic Early Stopping, LDES-FL），该机制允许客户端根据本地验证性能暂停和恢复本地训练，从而提升训练效率和可持续性。通过一系列实验，我们研究了客户端的语言构成——从完全单语到日益多语化的客户端——如何影响多语言质量、公平性和训练成本。单语本地微调对于单一语言专业化仍然最为有效，而联邦训练则更适合学习单一平衡的多语言模型。在联邦学习中，增加客户端内部的多语言性能够产生更强、更公平的全局模型，缩小与集中式多语言微调的差距，并为资源较少的语言带来最大的收益，尽管这是以更多的优化步骤为代价的。总体而言，我们的研究结果表明，客户端的语言构成是多语言联邦学习中的一个关键设计变量，它塑造了性能、公平性和效率。

Federated Learning (FL) of Large Language Models (LLMs) in multilingual environments presents significant challenges stemming from heterogeneous language distributions across clients and disparities in language resource availability. To address these challenges, we extended the FederatedScope-LLM framework to support multilingual instruction-tuning experiments with LLMs. We also introduced a novel client-specific early stopping mechanism, Local Dynamic Early Stopping (LDES-FL), which allows clients to pause and resume local training based on client-side validation performance, enhancing training efficiency and sustainability. Through a series of experiments, we studied how client language composition - from fully monolingual to increasingly multilingual clients - affects multilingual quality, fairness and training cost. Monolingual local fine-tuning remains the most effective for single-language specialization, whereas federated training is better suited to learning a single balanced multilingual model. In FL, increasing within-client multilinguality leads to stronger and fairer global models, narrows the gap to centralized multilingual fine-tuning, and yields the largest gains for lower-resource languages, albeit at the cost of more optimization steps. Overall, our results identify client language composition as a key design variable in multilingual FL, shaping performance, fairness and efficiency

!!! info

论文基于FederatedScope-LLM框架进行扩展，构建了支持多语言FL的实验平台。采用参数高效微调（PEFT）技术，具体使用LoRA（Low-Rank Adaptation）来减少通信和计算开销。研究设计了不同语言构成的实验场景（如100% mono, 85% mono等），通过控制变量法模拟从非IID到近似IID的数据分布。引入LDES-FL机制，利用本地验证集监控损失，实现动态早停。使用FedAvg作为聚合策略，在保持客户端数据量恒定的前提下进行对比实验。

• 针对性强：填补了多语言LLM联邦学习领域的研究空白，聚焦于语言分布异构这一关键问题。
• 实用性强：提出的LDES-FL机制能有效提升资源受限客户端的训练效率和可持续性。
• 实验设计严谨：通过控制变量法系统分析了不同语言构成对模型性能和公平性的影响，结论具有指导意义。
• 开源贡献：提供了扩展后的代码库，便于社区复现和进一步研究。

• 实验假设所有客户端的数据集大小相同，这与现实世界中数据高度不平衡的情况存在差距。
• 主要关注指令微调阶段，对于预训练阶段的多语言联邦学习未做深入探讨。
• 虽然提出了LDES-FL，但在极端异构数据下的收敛性证明和理论分析可能还不够充分。

评分理由: 论文开发了A^3-Align，一个用于广告美学评估的多模态大语言模型（LLM），因此与"Large Language Models"高度相关（10分）。模型通过指令调优进行训练以实现与A^3-Law范式的对齐，因此与"Instruction Tuning"或"Alignment"高度相关（10分）。数据集包含Chain-of-Thought（CoT）原理，模型训练也采用CoT引导学习，因此与"Chain of Thought"高度相关（10分）。论文未涉及其他关键词的具体技术或应用，因此其他关键词评分为0分。

广告图像对商业转化率与品牌资产具有显著影响，然而当前的评估方法依赖主观判断，缺乏可扩展性、标准化准则与可解释性。为应对这些挑战，我们提出了A³（广告美学评估）框架，该综合框架包含四个组成部分：一个范式（A³-Law）、一个数据集（A³-Dataset）、一个多模态大语言模型（A³-Align）以及一个基准测试集（A³-Bench）。A³的核心是理论驱动的范式A³-Law，它包含三个层次化阶段：（1）感知注意（Perceptual Attention），评估感知图像信号吸引注意力的能力；（2）形式兴趣（Formal Interest），评估图像色彩与空间布局的形式构成在引发兴趣方面的表现；（3）欲望影响（Desire Impact），衡量图像唤起的欲望及其说服性影响。基于A³-Law，我们构建了A³-Dataset，其中包含来自3万张广告图像的12万条指令-响应对，每张图像均附有丰富的多维度标签与思维链（Chain-of-Thought, CoT）推理标注。我们进一步开发了A³-Align模型，该模型在A³-Law指导下，基于A³-Dataset通过思维链引导学习进行训练。在A³-Bench上的大量实验表明，与现有模型相比，A³-Align实现了与A³-Law更优的对齐，且这种对齐能力能够良好泛化至优质广告筛选与规范性广告批评任务，显示出其广泛部署的潜力。数据集、代码与模型可通过以下链接获取：https://github.com/euleryuan/A3-Align。

Advertising images significantly impact commercial conversion rates and brand equity, yet current evaluation methods rely on subjective judgments, lacking scalability, standardized criteria, and interpretability. To address these challenges, we present A^3 (Advertising Aesthetic Assessment), a comprehensive framework encompassing four components: a paradigm (A^3-Law), a dataset (A^3-Dataset), a multimodal large language model (A^3-Align), and a benchmark (A^3-Bench). Central to A^3 is a theory-driven paradigm, A^3-Law, comprising three hierarchical stages: (1) Perceptual Attention, evaluating perceptual image signals for their ability to attract attention; (2) Formal Interest, assessing formal composition of image color and spatial layout in evoking interest; and (3) Desire Impact, measuring desire evocation from images and their persuasive impact. Building on A^3-Law, we construct A^3-Dataset with 120K instruction-response pairs from 30K advertising images, each richly annotated with multi-dimensional labels and Chain-of-Thought (CoT) rationales. We further develop A^3-Align, trained under A^3-Law with CoT-guided learning on A^3-Dataset. Extensive experiments on A^3-Bench demonstrate that A^3-Align achieves superior alignment with A^3-Law compared to existing models, and this alignment generalizes well to quality advertisement selection and prescriptive advertisement critique, indicating its potential for broader deployment. Dataset, code, and models can be found at: https://github.com/euleryuan/A3-Align.

!!! info

论文首先提出了A3-Law范式，基于信号检测理论、格式塔心理学和符号学将评估分层。随后，通过“以人为中心”和“模型增强”两个阶段构建A3-Dataset。在模型训练方面，采用两阶段流程：第一阶段通过监督微调（SFT）让模型学习A3-Law规则和思维链；第二阶段利用强化学习（GRPO）优化模型，使其与多信号奖励对齐，最终得到A3-Align模型。

• 理论驱动：将抽象的美学和认知心理学理论（如AIDA模型）转化为具体的、可执行的评估规则。
• 可解释性：利用思维链推理提供逐步的诊断反馈，解决了传统模型“黑盒”和推理不稳定的问题。
• 系统性强：涵盖了从理论范式、数据集构建、模型训练到基准测试的完整闭环。
• 实用价值高：不仅提供评分，还能生成具体的改进建议，直接服务于广告优化。

• 虽然引入了规则，但美学评估本身仍具有一定的主观性，完全标准化仍具挑战。
• 研究主要聚焦于广告图像，对于其他类型图像（如艺术摄影）的美学评估泛化能力有待验证。
• 构建大规模高质量数据集和训练大模型需要巨大的计算资源和人力成本。

评分理由: 论文提出AutoProf框架，这是一个用于AI研究监督的多智能体系统，核心是维护一个持续演化的研究世界模型（Research World Model）。该框架明确支持主流大语言模型（LLMs），因此与"Large Language Models"高度相关（10分）。框架的核心是多智能体系统，涉及自主代理、协调和共识机制，因此与"LLM Agents”、“Multi-agent Systems"和"Self-Correction/Self-Improvement"高度相关（均为10分）。其核心创新之一是"Research World Model”，与"World Models"高度相关（10分）。应用领域是AI研究监督，属于"AI for Science"范畴（10分）。框架涉及结构化分析、自我纠正循环和迭代改进，体现了"Chain of Thought"和"System 2 Thinking"的某些方面（均为5分）。智能体可能需要调用工具或API来执行研究任务，与"Tool Use"有一定关联（5分）。论文未涉及其他关键词的具体技术细节，如MoE、模型压缩、训练方法、推理加速、对齐技术等，因此这些关键词评分为0分。

现有自动化研究系统以无状态的线性流程运作，其生成输出时并未保持对研究领域的持续性理解。这些系统按顺序处理论文，在没有结构化缺口分析的情况下提出想法，且缺乏智能体间相互验证或完善发现的机制。我们提出AutoProf（自主教授）——一个多智能体协同框架，其中专业化智能体通过自主探索与自我修正更新，在人类兴趣驱动下提供从文献综述、缺口发现、方法开发、评估到论文撰写的端到端人工智能研究指导。与顺序流程不同，AutoProf维护着一个持续演化的研究世界模型（以知识图谱形式实现），将方法、基准、局限性和未探索缺口作为跨智能体的共享记忆进行捕捉。该框架包含三项核心贡献：第一，结构化缺口发现机制，将方法解构为模块，跨基准评估模块性能，并识别模块层级的缺口；第二，自我修正发现循环，通过分析模块成功或失败的原因、检测基准偏差及评估充分性来实现持续优化；第三，自我改进的开发循环，利用跨领域机制搜索迭代修正失效组件。所有智能体在共识机制下运行，任何发现需经验证后方可提交至共享模型。该框架与模型无关，支持主流大语言模型，并可根据计算资源弹性扩展——从轻量级探索到全面研究均可适配。

Existing automated research systems operate as stateless, linear pipelines, generating outputs without maintaining a persistent understanding of the research landscape. They process papers sequentially, propose ideas without structured gap analysis, and lack mechanisms for agents to verify or refine each other’s findings. We present AutoProf (Autonomous Professor), a multi-agent orchestration framework where specialized agents provide end-to-end AI research supervision driven by human interests, from literature review through gap discovery, method development, evaluation, and paper writing, via autonomous exploration and self-correcting updates. Unlike sequential pipelines, AutoProf maintains a continuously evolving Research World Model implemented as a Knowledge Graph, capturing methods, benchmarks, limitations, and unexplored gaps as shared memory across agents. The framework introduces three contributions: first, structured gap discovery that decomposes methods into modules, evaluates them across benchmarks, and identifies module-level gaps; second, self-correcting discovery loops that analyze why modules succeed or fail, detect benchmark biases, and assess evaluation adequacy; third, self-improving development loops using cross-domain mechanism search to iteratively address failing components. All agents operate under a consensus mechanism where findings are validated before being committed to the shared model. The framework is model-agnostic, supports mainstream large language models, and scales elastically with token budget from lightweight exploration to full-scale investigation.

评分理由: 论文核心研究RAG系统在AI政策分析中的应用，因此"Retrieval-Augmented Generation"得满分15分。论文明确使用DPO进行对齐，“RLHF/DPO"得10分。研究关注幻觉问题，“Hallucination Mitigation"得10分。论文涉及大模型应用，“Large Language Models"得8分；应用于AI政策领域，“AI for Science"得8分。论文提到领域适应和微调，“Pre-training/Domain Adaptation"和"Post-training/SFT"各得5分；涉及对齐，“Instruction Tuning/Alignment"得5分。其他关键词如MoE、量化、推理加速等未涉及，得0分。

检索增强生成系统正日益广泛地应用于复杂政策文件的分析，然而在那些以密集法律语言和动态重叠的监管框架为特征的领域中，要达到专家使用所需的足够可靠性仍具挑战。本研究利用人工智能治理与监管档案库——一个包含947份人工智能政策文件的精选语料库——探讨了检索增强生成在人工智能治理与政策分析中的应用。我们的系统结合了基于ColBERT的检索器（通过对比学习进行微调）和采用直接偏好优化方法对齐人类偏好的生成器。我们构建了合成查询并收集成对偏好数据，以使系统适应政策领域。通过评估检索质量、答案相关性和忠实度的实验，我们发现领域特定的微调能提升检索指标，但并未持续改善端到端问答性能。在某些情况下，当语料库中缺乏相关文档时，更强的检索能力反而会反直觉地导致更自信的幻觉生成。这些结果凸显了构建政策导向检索增强生成系统的关键关切：单个组件的改进未必能转化为更可靠的答案。我们的研究结果为基于动态监管语料库设计有依据的问答系统提供了实践启示。

Retrieval-augmented generation (RAG) systems are increasingly used to analyze complex policy documents, but achieving sufficient reliability for expert usage remains challenging in domains characterized by dense legal language and evolving, overlapping regulatory frameworks. We study the application of RAG to AI governance and policy analysis using the AI Governance and Regulatory Archive (AGORA) corpus, a curated collection of 947 AI policy documents. Our system combines a ColBERT-based retriever fine-tuned with contrastive learning and a generator aligned to human preferences using Direct Preference Optimization (DPO). We construct synthetic queries and collect pairwise preferences to adapt the system to the policy domain. Through experiments evaluating retrieval quality, answer relevance, and faithfulness, we find that domain-specific fine-tuning improves retrieval metrics but does not consistently improve end-to-end question answering performance. In some cases, stronger retrieval counterintuitively leads to more confident hallucinations when relevant documents are absent from the corpus. These results highlight a key concern for those building policy-focused RAG systems: improvements to individual components do not necessarily translate to more reliable answers. Our findings provide practical insights for designing grounded question-answering systems over dynamic regulatory corpora.

评分理由: 论文提出LensWalk框架，核心是让大型语言模型（LLM）作为推理器主动控制视觉观察，实现视频理解。这与"Large Language Models"高度相关（10分），因为LLM是核心推理组件；与"LLM Agents"高度相关（10分），因为框架本质是代理系统；与"Chain of Thought"高度相关（10分），因为强调渐进式证据收集服务于推理链；与"System 2 Thinking"较强相关（8分），涉及深度推理；与"Tool Use"较强相关（8分），因为使用视觉语言模型工具；与"Explainable AI"有一定关联（5分），因为提到可解释性；其他关键词如MoE、SFT、RAG等未涉及，得0分。

视频密集且时序化的特性为自动化分析带来了巨大挑战。尽管现有方法采用了强大的视觉语言模型，但主流视频理解技术仍受限于推理与感知之间的固有割裂：它们依赖静态的预处理信息，无法在理解深化过程中主动从视频中搜寻原始证据。为此，我们提出LensWalk——一种灵活的智能体框架，使大语言模型推理器能够主动控制其视觉观察过程。LensWalk构建了紧密的“推理-规划-观察”循环机制，智能体可在每一步动态指定所观察视频的时间范围与采样密度。通过调用一系列由这些参数配置的、基于视觉语言模型的多样化工具，智能体能够执行大范围线索扫描、聚焦特定片段进行事实提取，并整合多时刻证据以完成整体验证。该设计实现了直接服务于智能体动态思维链的渐进式按需证据收集。无需任何模型微调，LensWalk在多种模型架构上实现了显著的即插即用性能提升，在LVBench和Video-MME等具有挑战性的长视频基准测试中，将模型准确率提升了5%以上。我们的分析表明，赋予智能体控制其观察方式的能力，是解锁更精准、鲁棒且可解释的视频推理的关键所在。

The dense, temporal nature of video presents a profound challenge for automated analysis. Despite the use of powerful Vision-Language Models, prevailing methods for video understanding are limited by the inherent disconnect between reasoning and perception: they rely on static, pre-processed information and cannot actively seek raw evidence from video as their understanding evolves. To address this, we introduce LensWalk, a flexible agentic framework that empowers a Large Language Model reasoner to control its own visual observation actively. LensWalk establishes a tight reason-plan-observe loop where the agent dynamically specifies, at each step, the temporal scope and sampling density of the video it observes. Using a suite of versatile, Vision-Language Model based tools parameterized by these specifications, the agent can perform broad scans for cues, focus on specific segments for fact extraction, and stitch evidence from multiple moments for holistic verification. This design allows for progressive, on-demand evidence gathering that directly serves the agent’s evolving chain of thought. Without requiring any model fine-tuning, LensWalk delivers substantial, plug-and-play performance gains on multiple model recipes, boosting their accuracy by over 5% on challenging long-video benchmarks like LVBench and Video-MME. Our analysis reveals that enabling an agent to control how it sees is key to unlocking more accurate, robust, and interpretable video reasoning.

评分理由: 论文核心研究大语言模型（LLMs）的自蒸馏（self-distillation）这一后训练（post-training）技术，并深入分析其对模型推理能力（特别是数学推理）的影响。研究发现自蒸馏会抑制模型在推理过程中表达不确定性（epistemic verbalization），从而损害其鲁棒性，尤其是在分布外（OOD）任务上。这与’Chain of Thought’、‘System 2 Thinking’、‘Self-Correction’等涉及多步推理、深度思考和自我反思/改进的关键词高度相关。论文明确将自蒸馏定位为一种’post-training paradigm’，因此与’Post-training’关键词高度相关。论文研究对象为LLMs，因此与’Large Language Models’关键词高度相关。论文未涉及其他关键词所描述的具体技术、应用领域或特定专家。

自蒸馏已成为大型语言模型一种有效的后训练范式，通常能在缩短推理轨迹的同时提升模型性能。然而在数学推理任务中，我们发现该方法虽能缩减响应长度，却可能导致性能下降。我们将这种性能退化归因于认知性言语表达的抑制——即模型在推理过程中不确定性表达能力的减弱。通过控制条件上下文丰富度与任务覆盖范围的对比实验，我们证明：让教师模型基于丰富信息进行条件生成会抑制不确定性的表达，这虽能在有限任务覆盖范围内实现快速的领域内优化，却会损害分布外（OOD）性能——因为面对未见问题时，模型需要表达不确定性并进行相应调整才能获得更好表现。在Qwen3-8B、DeepSeek-Distill-Qwen-7B和Olmo3-7B-Instruct三个模型上的实验显示，性能下降幅度最高可达40%。我们的研究结果表明：暴露适当程度的不确定性对于实现鲁棒推理至关重要，同时强调了对推理行为进行优化不应仅仅局限于强化正确答案轨迹，而需关注更本质的认知表达机制。

Self-distillation has emerged as an effective post-training paradigm for LLMs, often improving performance while shortening reasoning traces. However, in mathematical reasoning, we find that it can reduce response length while degrading performance. We trace this degradation to the suppression of epistemic verbalization - the model’s expression of uncertainty during reasoning. Through controlled experiments varying conditioning context richness and task coverage, we show that conditioning the teacher on rich information suppresses uncertainty expression, enabling rapid in-domain optimization with limited task coverage but harming OOD performance, where unseen problems benefit from expressing uncertainty and adjusting accordingly. Across Qwen3-8B, DeepSeek-Distill-Qwen-7B, and Olmo3-7B-Instruct, we observe performance drops of up to 40%. Our findings highlight that exposing appropriate levels of uncertainty is crucial for robust reasoning and underscore the importance of optimizing reasoning behavior beyond merely reinforcing correct answer traces.

评分理由: 论文核心研究计算机使用代理（CUAs），属于自主代理和工具使用领域，与"LLM Agents"和"Tool Use"高度相关（10分）。论文提到基础动作模型（foundation action models）和视觉世界模型（visual world models），与"Large Language Models"和"World Models"有一定关联（5分）。数据集旨在解决数据稀缺瓶颈，支持扩展，与"Scaling Laws” AND “Data Quality"相关（5分）。注释包含多步推理，与"Chain of Thought"和"System 2 Thinking"相关（5分）。其他关键词如MoE、SLMs、训练方法、推理优化、科学AI等未在论文中涉及，得0分。

计算机使用智能体（Computer-use Agents, CUAs）在自动化复杂桌面工作流程方面前景广阔，但通用智能体的发展受限于连续、高质量人类演示视频的稀缺。近期研究强调，连续视频（而非稀疏截图）是扩展这类智能体规模的关键缺失要素。然而，现有最大的开放数据集ScaleCUA仅包含200万张截图，相当于不足20小时的视频数据。为突破这一瓶颈，我们推出CUA-Suite——一个面向专业桌面计算机使用智能体的大规模专家演示视频与密集标注生态系统。其核心是VideoCUA数据集，该数据集提供涵盖87种多样化应用的约1万个人类演示任务，包含30帧/秒的连续屏幕录制、运动学光标轨迹以及多层推理标注，总计约55小时、600万帧的专家级视频。与仅捕获最终点击坐标的稀疏数据集不同，这些连续视频流完整保留了人机交互的时序动态，构成信息超集，可无损转换为现有智能体框架所需的格式。CUA-Suite进一步提供两项互补资源：UI-Vision（用于评估CUAs grounding与规划能力的严谨基准）和GroundCUA（包含5.6万张标注截图及超360万个UI元素标注的大规模grounding数据集）。初步评估表明，当前基础动作模型在处理专业桌面应用时面临显著挑战（任务失败率约60%）。除评估功能外，CUA-Suite丰富的多模态语料库支持新兴研究方向，包括通用屏幕解析、连续空间控制、基于视频的奖励建模及视觉世界模型。所有数据与模型均已公开发布。

Computer-use agents (CUAs) hold great promise for automating complex desktop workflows, yet progress toward general-purpose agents is bottlenecked by the scarcity of continuous, high-quality human demonstration videos. Recent work emphasizes that continuous video, not sparse screenshots, is the critical missing ingredient for scaling these agents. However, the largest existing open dataset, ScaleCUA, contains only 2 million screenshots, equating to less than 20 hours of video. To address this bottleneck, we introduce CUA-Suite, a large-scale ecosystem of expert video demonstrations and dense annotations for professional desktop computer-use agents. At its core is VideoCUA, which provides approximately 10,000 human-demonstrated tasks across 87 diverse applications with continuous 30 fps screen recordings, kinematic cursor traces, and multi-layerfed reasoning annotations, totaling approximately 55 hours and 6 million frames of expert video. Unlike sparse datasets that capture only final click coordinates, these continuous video streams preserve the full temporal dynamics of human interaction, forming a superset of information that can be losslessly transformed into the formats required by existing agent frameworks. CUA-Suite further provides two complementary resources: UI-Vision, a rigorous benchmark for evaluating grounding and planning capabilities in CUAs, and GroundCUA, a large-scale grounding dataset with 56K annotated screenshots and over 3.6 million UI element annotations. Preliminary evaluation reveals that current foundation action models struggle substantially with professional desktop applications (~60% task failure rate). Beyond evaluation, CUA-Suite’s rich multimodal corpus supports emerging research directions including generalist screen parsing, continuous spatial control, video-based reward modeling, and visual world models. All data and models are publicly released.

评分理由: 论文核心是使用大语言模型（LLMs）构建一个环境接地的多智能体系统，用于机器人环境中的自动化渗透测试。因此，与"Large Language Models”（LLMs）高度相关（10分），因为论文明确探索LLMs在此应用。与"LLM Agents"和"Multi-agent Systems"高度相关（10分），因为论文提出了一个多智能体架构。与"Tool Use"有一定关联（5分），因为渗透测试涉及利用工具进行漏洞利用，但论文未明确讨论LLMs的API工具调用功能。其他关键词如MoE、SFT、RAG、量化等，论文未涉及技术细节或创新，因此评分为0分。

数字基础设施日益增长的复杂性与互联性，使得可扩展且可靠的安全评估方法变得至关重要。机器人系统作为一类尤为重要的运营技术（Operational Technology），其现代形态是高度网络化的信息物理系统，广泛应用于工业自动化、物流及自主服务等领域。本文探讨了在机器人环境中利用大语言模型进行自动化渗透测试的方法。我们提出了一种专为机器人系统定制的、基于环境的多智能体架构。该方法在执行过程中动态构建一个基于图的共享记忆，用以捕获可观测的系统状态，包括网络拓扑、通信通道、漏洞及已尝试的攻击手段。这实现了结构化的自动化测试，同时在整个测试过程中保持了可追溯性和有效的上下文管理。通过在专门的机器人夺旗场景（ROS/ROS2）中进行多轮迭代评估，该系统表现出高可靠性，在全部测试运行（n=5）中均成功完成挑战，成功率达100%。这一性能显著超越了文献中的基准水平，同时满足了如《欧盟人工智能法案》等框架所要求的可追溯性与人工监督。

The increasing complexity and interconnectivity of digital infrastructures make scalable and reliable security assessment methods essential. Robotic systems represent a particularly important class of operational technology, as modern robots are highly networked cyber-physical systems deployed in domains such as industrial automation, logistics, and autonomous services. This paper explores the use of large language models for automated penetration testing in robotic environments. We propose an environment-grounded multi-agent architecture tailored to Robotics-based systems. The approach dynamically constructs a shared graph-based memory during execution that captures the observable system state, including network topology, communication channels, vulnerabilities, and attempted exploits. This enables structured automation while maintaining traceability and effective context management throughout the testing process. Evaluated across multiple iterations within a specialized robotics Capture-the-Flag scenario (ROS/ROS2), the system demonstrated high reliability, successfully completing the challenge in 100% of test runs (n=5). This performance significantly exceeds literature benchmarks while maintaining the traceability and human oversight required by frameworks like the EU AI Act.

评分理由: 论文核心研究大语言模型（LLMs）在数学推理任务中，通过强化学习（RL）训练时遇到的梯度消失问题，并提出了一种名为HDPO的混合蒸馏策略优化方法。该方法通过特权自蒸馏（self-distillation）来增强标准RL，特别针对模型完全无法解决的“悬崖”提示（cliff prompts）。因此，论文与“Large Language Models”和“RLHF”高度相关（10分），因为其核心就是LLMs的RL训练优化。与“Chain of Thought”和“Self-Correction”有一定关联（5分），因为数学推理涉及多步推理，且自蒸馏可视为一种自我改进机制。与“AI for Science”也有一定关联（5分），因为数学推理是科学AI的一个子领域。其他关键词如MoE、SFT、RAG、量化等，论文未涉及，故得0分。

采用强化学习（RL）训练的大语言模型在数学推理任务中面临一个根本性挑战：对于模型完全无法解决的“悬崖”式问题，RL梯度会完全消失，导致这些失败模式无法获得任何学习信号。我们提出了混合蒸馏策略优化（Hybrid Distillation Policy Optimization, HDPO），该方法通过针对悬崖式问题的特权自蒸馏来增强标准RL训练。在每一步训练中，HDPO首先识别所有采样轨迹均失败的提示，随后通过向模型提供真实信息生成特权轨迹，筛选出正确解，并将教师模型在词元级别的分布蒸馏至学生模型。由于教师与学生模型共享权重（仅输入不同），与跨模型蒸馏不同，其可实现性差距在理论上是有界的。我们证明，在硬阈值极限下，采用R=1过滤的特权生成能够恢复最优的KL正则化RL策略。在OpenMathInstruct-2数据集上使用Qwen2.5-Math-1.5B-Instruct模型进行的实验表明，HDPO在保持贪婪准确率的同时，持续提升了覆盖度指标（pass@4提升0.8-1.1%，pass@8提升0.4-1.7%），其中蒸馏权重λ为探索-利用权衡提供了直接控制。

Large language models trained with reinforcement learning (RL) for mathematical reasoning face a fundamental challenge: on problems the model cannot solve at all - “cliff” prompts - the RL gradient vanishes entirely, preventing any learning signal from reaching these failure modes. We introduce Hybrid Distillation Policy Optimization (HDPO), which augments standard RL with privileged self-distillation targeting cliff prompts. On each training step, HDPO identifies prompts where all rollouts fail, generates privileged rollouts by providing the model with ground-truth information, filters for correct solutions, and distills the teacher’s token-level distribution into the student. Because teacher and student share the same weights - differing only in their input - the realizability gap is provably bounded, unlike cross-model distillation. We prove that R=1 filtered privileged generation recovers the optimal KL-regularized RL policy in the hard-threshold limit. Experiments on OpenMathInstruct-2 with Qwen2.5-Math-1.5B-Instruct show that HDPO consistently improves coverage metrics (pass@4 by +0.8-1.1%, pass@8 by +0.4-1.7%) while maintaining greedy accuracy, with the distillation weight lambda providing direct control over the exploration-exploitation tradeoff.

评分理由: 论文核心研究LLMs中的性别偏见问题，特别是对齐（alignment）如何影响偏见表达与编码。高度相关（10分）的关键词包括：1) “Large Language Models” OR “LLMs” OR “Foundation Models”（论文明确研究LLMs）；2) “Post-training” OR “Supervised Fine-tuning” OR “SFT”（论文通过监督微调进行对齐）；3) “Instruction Tuning” OR “Alignment” OR “Value Alignment”（论文核心研究对齐对偏见的影响）。中等相关（5分）的关键词：“Mechanistic Interpretability” OR “Explainable AI”（论文分析内部表示与偏见编码，涉及模型可解释性）。其他关键词与论文主题（偏见分析、对齐效果）无直接关联，得0分。

在训练过程中，大语言模型（LLMs）习得的社会规律可能导致下游应用中出现性别偏见。大多数缓解措施侧重于减少生成输出中的偏见，通常通过结构化基准进行评估，这引发了两个问题：输出层面的评估无法揭示对齐过程是否改变了模型的内在表征，且结构化基准可能无法反映真实使用场景。我们提出一个统一框架，利用相同的中性提示词联合分析大语言模型的内在和外显性别偏见，从而能够直接比较内部表征中编码的性别相关信息与生成输出中表达的偏见。与先前研究报道的弱相关或不一致关联不同，我们在统一测量协议下发现潜在性别信息与表达出的偏见之间存在稳定关联。我们进一步通过旨在减少性别偏见的有监督微调来检验对齐效果。结果表明，尽管微调确实减少了外显偏见，但内部表征中仍存在可测量的性别相关关联，且这些关联在对抗性提示下可能被重新激活。最后，我们考察两种现实场景并证明，在结构化基准上观察到的去偏见效果不一定能推广到其他情境，例如故事生成任务中。

During training, Large Language Models (LLMs) learn social regularities that can lead to gender bias in downstream applications. Most mitigation efforts focus on reducing bias in generated outputs, typically evaluated on structured benchmarks, which raises two concerns: output-level evaluation does not reveal whether alignment modifies the model’s underlying representations, and structured benchmarks may not reflect realistic usage scenarios. We propose a unified framework to jointly analyze intrinsic and extrinsic gender bias in LLMs using identical neutral prompts, enabling direct comparison between gender-related information encoded in internal representations and bias expressed in generated outputs. Contrary to prior work reporting weak or inconsistent correlations, we find a consistent association between latent gender information and expressed bias when measured under the unified protocol. We further examine the effect of alignment through supervised fine-tuning aimed at reducing gender bias. Our results suggest that while the latter indeed reduces expressed bias, measurable gender-related associations are still present in internal representations, and can be reactivated under adversarial prompting. Finally, we consider two realistic settings and show that debiasing effects observed on structured benchmarks do not necessarily generalize, e.g., to the case of story generation.

评分理由: 论文核心研究MoE模型的参数高效微调方法，与"Mixture of Experts"和"PEFT/LoRA"高度相关（10分），因为直接研究MoE架构和LoRA微调技术。与"Large Language Models"相关（8分），因为MoE模型通常是大语言模型的一种架构。与"Post-training/SFT"有一定关联（5分），因为涉及微调阶段。其他关键词如SLMs、Scaling Laws、RAG、Agents等与论文内容无关（0分）。

对混合专家（Mixture-of-Experts, MoE）模型进行标准LoRA微调时，通常将适配器应用于所有专家。然而，我们的性能分析表明，每层的专家路由分布高度倾斜：每层中只有一小部分专家处理大多数令牌，而许多其他专家很少被激活（即“冷”专家）。我们提出了MoE-Sieve，一种简单的路由引导式LoRA微调框架，并结合了对不同架构和任务中专家路由的系统性分析研究。该方法很简单：在一个小型校准集上分析路由计数，每层选择前k个被路由最多的专家，并仅对这些专家应用LoRA。在两个架构不同的MoE模型和三项多样化任务中，每层仅微调前25%被路由最多的专家，其性能仍与完整LoRA微调相当，所有条件下的平均差异在+/-1个百分点以内。这使LoRA可训练参数减少了70-73%，适配器检查点大小减少了71-73%，实际训练时间最多减少了50%。我们还观察到专家数量与种子间方差之间存在非单调关系，这与以下假设一致：调整冷专家可能引入梯度噪声而不会提升准确性。进一步的消融实验表明，在相同参数预算下随机选择专家的性能约差2.5个百分点，这说明路由信号至关重要，而逐层贪婪预算优化并未优于均匀的前k选择。

Standard LoRA fine-tuning of Mixture-of-Experts (MoE) models applies adapters to every expert, yet our profiling shows that per-layer expert routing is highly skewed: a small subset of experts handles most tokens in each layer, while many others are rarely activated (“cold”). We propose MoE-Sieve, a simple routing-guided framework for LoRA fine-tuning, and pair it with a systematic profiling study of expert routing across architectures and tasks. The method is simple: profile routing counts on a small calibration set, select the top-k most-routed experts per layer, and apply LoRA only to those experts. Across two architecturally distinct MoE models and three diverse tasks, tuning only the top 25% routed experts per layer remains competitive with full LoRA, with mean differences within +/-1 percentage point across all conditions. This reduces LoRA trainable parameters by 70-73%, adapter checkpoint size by 71-73%, and wall-clock training time by up to 50%. We also observe a non-monotonic relationship between expert count and seed-to-seed variance, consistent with the hypothesis that adapting cold experts can introduce gradient noise without improving accuracy. Further ablations show that random expert selection at matched budget is about 2.5 percentage points worse, indicating that the routing signal matters, while greedy per-layer budget optimization does not improve over uniform top-k.

评分理由: 论文核心研究LLM推理中的早期退出解码技术，直接涉及"Large Language Models”（10分）和"Speculative Decoding”（8分，因早期退出是推理加速的一种形式）。论文明确比较了Mixture-of-Experts模型，故"Mixture of Experts"得8分。论文提到预训练模型和架构改进，与"Pre-training"有一定关联（5分）。其他关键词如SLMs、SFT、RAG等与论文内容无直接关系，均得0分。

在大语言模型推理中，早期退出是指在预测达到足够置信度时于中间层停止计算，从而降低延迟与成本。然而，近期的大语言模型采用了改进的预训练方案和架构，减少了层间冗余，这可能限制了早期退出的机会。我们重新评估了现代大语言模型中的分层早期退出机制，并分析了训练过程中中间表示的演化规律。我们引入了一种量化模型内在早期退出适用性的指标，并提出了一个基准测试，供研究者探索不同模型和工作负载上潜在的早期退出收益。我们的研究结果显示，在新一代模型中，早期退出的有效性呈下降趋势。进一步发现，稠密Transformer通常比混合专家模型和状态空间模型具有更大的早期退出潜力。此外，参数量更大的模型（特别是超过200亿参数的模型）以及未经专门调优的预训练基础模型，往往表现出更高的早期退出潜力。

In Large Language Model (LLM) inference, early-exit refers to stopping computation at an intermediate layer once the prediction is sufficiently confident, thereby reducing latency and cost. However, recent LLMs adopt improved pretraining recipes and architectures that reduce layer redundancy, potentially limiting early-exit opportunities. We re-evaluate layer-wise early-exit in modern LLMs and analyze how intermediate representations evolve during training. We introduce a metric to quantify a model’s intrinsic suitability for early-exit and propose a benchmark for researchers to explore the potential early-exit benefits on different models and workloads. Our results show a diminishing trend in early-exit effectiveness across newer model generations. We further find that dense transformers generally offer greater early-exit potential than Mixture-of-Experts and State Space Models. In addition, larger models, particularly those with more than 20 billion parameters, and base pretrained models without specialized tuning tend to exhibit higher early-exit potential.

评分理由: 论文专注于大型视觉语言模型（LVLMs）中的物体幻觉问题，提出了一种基于注意力失衡校正的轻量级解码时干预方法。与关键词的相关性分析如下：1）与"Large Language Models"高度相关（10分），因为LVLMs是LLMs在视觉语言领域的扩展；2）与"Hallucination Mitigation"高度相关（10分），这是论文的核心研究问题；3）与"Mechanistic Interpretability"有一定关联（5分），论文通过分析注意力模式来解释幻觉成因；4）与"AI for Science"有一定关联（5分），论文提到在自动驾驶和医学图像分析等高风险场景的应用；5）其他关键词如MoE、SFT、RAG等与论文内容无直接关系，得0分。

大型视觉语言模型（LVLMs）中的物体幻觉严重削弱了其在现实应用中的可靠性，对其在自动驾驶和医学图像分析等高风险场景中的部署构成了关键障碍。通过系统性实证研究，我们发现跨模态（即视觉与语言）及模态内（各独立标记间）的注意力分配失衡与物体幻觉的发生存在强因果关联。基于这一洞察，我们提出了“注意力失衡”这一新概念，它不仅能量化注意力差异的程度，还能可视化地揭示驱动物体幻觉的内在模式（例如对无关语言标记的过度关注或对判别性视觉特征的关注不足）。为缓解物体幻觉，我们进一步提出注意力失衡矫正（AIR），这是一种轻量级的解码时干预方法，通过重新分配注意力权重并调整注意力分布来纠正模态间与标记间的失衡。在四种主流LVLM和三个基准测试（CHAIR、POPE和MM-Vet）上使用七种基线方法进行的广泛评估表明，AIR能持续降低物体幻觉率，相较于基线方法最高可减少35.1%，同时在不同视觉语言任务中将LVLMs的通用能力最高提升15.9%。

Object hallucination in Large Vision-Language Models (LVLMs) severely compromises their reliability in real-world applications, posing a critical barrier to their deployment in high-stakes scenarios such as autonomous driving and medical image analysis. Through systematic empirical investigation, we identify that the imbalanced attention allocation, both across modalities (i.e., vision and language) and within modalities (among individual tokens), exhibits a strong causal correlation with the occurrence of object hallucination. Leveraging this insight, we introduce a novel concept termed attention imbalance, which not only quantifies the degree of attention disparity but also visually delineates the underlying patterns (e.g., over-attentiveness to irrelevant language tokens or under-attentiveness to discriminative visual features) that drive object hallucination. To mitigate object hallucination, we further propose Attention Imbalance Rectification (AIR), a lightweight decoding-time intervention method that reallocates attention weights and adjusts attention distributions to rectify modality-wise and token-wise imbalances. Extensive evaluations on four mainstream LVLMs and three benchmarks (CHAIR, POPE, and MM-Vet) with seven baselines demonstrate that AIR consistently reduces object hallucination rates, achieving up to a 35.1% reduction compared to the baselines, while improving up to 15.9% of LVLMs’ general capability across diverse vision-language tasks.

评分理由: 论文核心研究大语言模型（LLMs）在联邦学习（FL）环境下的多语言指令微调（Instruction Tuning），这直接对应关键词"Large Language Models"和"Instruction Tuning”。研究涉及对LLMs进行微调，属于"Post-training"或"Supervised Fine-tuning"范畴。论文未涉及其他关键词如MoE、量化、推理加速、科学AI应用等具体技术或领域。

在多语言环境下进行大语言模型的联邦学习面临着显著挑战，这些挑战主要源于客户端间异构的语言分布以及语言资源可用性的差异。为解决这些问题，我们扩展了FederatedScope-LLM框架，以支持大语言模型的多语言指令微调实验。同时，我们引入了一种新颖的客户端特定早停机制——本地动态早停（Local Dynamic Early Stopping, LDES-FL），该机制允许客户端根据本地验证性能暂停和恢复本地训练，从而提升训练效率和可持续性。通过一系列实验，我们研究了客户端的语言构成——从完全单语到日益多语化的客户端——如何影响多语言质量、公平性和训练成本。单语本地微调对于单一语言专业化仍然最为有效，而联邦训练则更适合学习单一平衡的多语言模型。在联邦学习中，增加客户端内部的多语言性能够产生更强、更公平的全局模型，缩小与集中式多语言微调的差距，并为资源较少的语言带来最大的收益，尽管这是以更多的优化步骤为代价的。总体而言，我们的研究结果表明，客户端的语言构成是多语言联邦学习中的一个关键设计变量，它塑造了性能、公平性和效率。

Federated Learning (FL) of Large Language Models (LLMs) in multilingual environments presents significant challenges stemming from heterogeneous language distributions across clients and disparities in language resource availability. To address these challenges, we extended the FederatedScope-LLM framework to support multilingual instruction-tuning experiments with LLMs. We also introduced a novel client-specific early stopping mechanism, Local Dynamic Early Stopping (LDES-FL), which allows clients to pause and resume local training based on client-side validation performance, enhancing training efficiency and sustainability. Through a series of experiments, we studied how client language composition - from fully monolingual to increasingly multilingual clients - affects multilingual quality, fairness and training cost. Monolingual local fine-tuning remains the most effective for single-language specialization, whereas federated training is better suited to learning a single balanced multilingual model. In FL, increasing within-client multilinguality leads to stronger and fairer global models, narrows the gap to centralized multilingual fine-tuning, and yields the largest gains for lower-resource languages, albeit at the cost of more optimization steps. Overall, our results identify client language composition as a key design variable in multilingual FL, shaping performance, fairness and efficiency

评分理由: 论文开发了A^3-Align，一个用于广告美学评估的多模态大语言模型（LLM），因此与"Large Language Models"高度相关（10分）。模型通过指令调优进行训练以实现与A^3-Law范式的对齐，因此与"Instruction Tuning"或"Alignment"高度相关（10分）。数据集包含Chain-of-Thought（CoT）原理，模型训练也采用CoT引导学习，因此与"Chain of Thought"高度相关（10分）。论文未涉及其他关键词的具体技术或应用，因此其他关键词评分为0分。

广告图像对商业转化率与品牌资产具有显著影响，然而当前的评估方法依赖主观判断，缺乏可扩展性、标准化准则与可解释性。为应对这些挑战，我们提出了A³（广告美学评估）框架，该综合框架包含四个组成部分：一个范式（A³-Law）、一个数据集（A³-Dataset）、一个多模态大语言模型（A³-Align）以及一个基准测试集（A³-Bench）。A³的核心是理论驱动的范式A³-Law，它包含三个层次化阶段：（1）感知注意（Perceptual Attention），评估感知图像信号吸引注意力的能力；（2）形式兴趣（Formal Interest），评估图像色彩与空间布局的形式构成在引发兴趣方面的表现；（3）欲望影响（Desire Impact），衡量图像唤起的欲望及其说服性影响。基于A³-Law，我们构建了A³-Dataset，其中包含来自3万张广告图像的12万条指令-响应对，每张图像均附有丰富的多维度标签与思维链（Chain-of-Thought, CoT）推理标注。我们进一步开发了A³-Align模型，该模型在A³-Law指导下，基于A³-Dataset通过思维链引导学习进行训练。在A³-Bench上的大量实验表明，与现有模型相比，A³-Align实现了与A³-Law更优的对齐，且这种对齐能力能够良好泛化至优质广告筛选与规范性广告批评任务，显示出其广泛部署的潜力。数据集、代码与模型可通过以下链接获取：https://github.com/euleryuan/A3-Align。

Advertising images significantly impact commercial conversion rates and brand equity, yet current evaluation methods rely on subjective judgments, lacking scalability, standardized criteria, and interpretability. To address these challenges, we present A^3 (Advertising Aesthetic Assessment), a comprehensive framework encompassing four components: a paradigm (A^3-Law), a dataset (A^3-Dataset), a multimodal large language model (A^3-Align), and a benchmark (A^3-Bench). Central to A^3 is a theory-driven paradigm, A^3-Law, comprising three hierarchical stages: (1) Perceptual Attention, evaluating perceptual image signals for their ability to attract attention; (2) Formal Interest, assessing formal composition of image color and spatial layout in evoking interest; and (3) Desire Impact, measuring desire evocation from images and their persuasive impact. Building on A^3-Law, we construct A^3-Dataset with 120K instruction-response pairs from 30K advertising images, each richly annotated with multi-dimensional labels and Chain-of-Thought (CoT) rationales. We further develop A^3-Align, trained under A^3-Law with CoT-guided learning on A^3-Dataset. Extensive experiments on A^3-Bench demonstrate that A^3-Align achieves superior alignment with A^3-Law compared to existing models, and this alignment generalizes well to quality advertisement selection and prescriptive advertisement critique, indicating its potential for broader deployment. Dataset, code, and models can be found at: https://github.com/euleryuan/A3-Align.

评分理由: 论文核心研究LLMs的强化学习训练方法（RLVR），提出DGO框架改进经验利用和知识内化，与"Large Language Models"高度相关（10分）。涉及推理任务改进，与"Chain of Thought”、“System 2 Thinking"有一定关联（各5分），框架包含经验反思与优化，与"Self-Correction"相关（5分）。其他关键词如MoE、SFT、RAG等未在摘要中体现，评为0分。

近年来，强化学习已成为提升大语言模型能力的重要途径。其中，基于可验证奖励的强化学习已成为推理任务中一种颇具前景的范式。然而，现有的基于强化学习的训练方法仍只是对人类学习过程的粗略近似。人类学习者能够同时利用外部经验和内部经验来引导探索，并将有用的轨迹逐步内化为稳定的知识。受此差距启发，我们提出：在基于可验证奖励的强化学习训练中，大语言模型如何能更好地利用并内化经验？为回答此问题，我们提出了双重引导优化，这是一个利用外部经验与内部经验来提升训练效果的统一框架。具体而言，DGO首先从先前探索过的轨迹中构建一个经验库。随后，策略在经验库与模型内部知识的共同引导下进行探索。由此产生的轨迹将进一步用于优化经验库并更新模型参数，从而形成一个经验利用与内化的闭环。实验表明，DGO在各项基准测试中均持续优于基线方法，这表明对经验更有效的利用与内化能够带来更优越的推理能力。

Recently, reinforcement learning~(RL) has become an important approach for improving the capabilities of large language models~(LLMs). In particular, reinforcement learning from verifiable rewards~(RLVR) has emerged as a promising paradigm for reasoning tasks. However, existing RL-based training still remains only a rough approximation to human learning. Human learners leverage both external and internal experience to guide exploration and gradually internalize useful trajectories into stable knowledge. Motivated by this gap, we ask: how can LLMs better utilize and internalize experience during RLVR training? To answer this question, we propose \textbf{D}ual \textbf{G}uidance \textbf{O}ptimization~(\textbf{DGO}), a unified framework that leverages \emph{external} and \emph{internal experience} to improve training effectiveness. Specifically, DGO first constructs an experience bank from previously explored trajectories. The policy then performs exploration under the joint guidance of the experience bank and the model’s internal knowledge. The resulting trajectories are further used to refine the experience bank and optimize model parameters, forming a closed loop of experience utilization and internalization. Experiments show that DGO consistently outperforms baseline methods, suggesting that better utilization and internalization of experience lead to more effective reasoning.

评分理由: 论文核心是开发一个基于Doha历史词典的检索增强生成（RAG）框架，以提升阿拉伯语大语言模型（LLMs）对古兰经和圣训等复杂历史宗教文本的理解能力。因此，与"Large Language Models"和"Retrieval-Augmented Generation"高度相关（10分）。论文通过RAG框架旨在提高模型的事实准确性，间接涉及幻觉缓解，故"Hallucination Mitigation"给5分。其他关键词如MoE、SFT、量化等均未在摘要中提及或与核心方法无关，故给0分。

大型语言模型（LLM）在许多语言任务中取得了显著进展，但在处理《古兰经》和圣训等复杂的历史与宗教阿拉伯语文本时仍面临困难。为应对这一局限，我们开发了一种基于历时词典知识的检索增强生成（RAG）框架。与以往依赖通用语料库的RAG系统不同，我们的方法从《多哈阿拉伯语历史词典》（DHDA）中检索证据，该词典是记录阿拉伯语词汇历史演变的大规模资源。所提出的流程将混合检索与基于意图的路由机制相结合，为LLM提供精确且符合语境的历史信息。实验表明，该方法将包括Fanar和ALLaM在内的阿拉伯语原生LLM的准确率提升至85%以上，显著缩小了其与专有大规模模型Gemini的性能差距。Gemini在我们的实验中还充当了LLM即评判员系统以进行自动评估。自动评判结果通过人工评估验证，显示出高度一致性（kappa = 0.87）。错误分析进一步揭示了关键的语言学挑战，包括变音符号和复合表达问题。这些发现证明了将历时词典资源整合到检索增强生成框架中对提升阿拉伯语理解能力——尤其是针对历史与宗教文本——的价值。代码与资源已公开于：https://github.com/somayaeltanbouly/Doha-Dictionary-RAG。

Large language models (LLMs) have achieved remarkable progress in many language tasks, yet they continue to struggle with complex historical and religious Arabic texts such as the Quran and Hadith. To address this limitation, we develop a retrieval-augmented generation (RAG) framework grounded in diachronic lexicographic knowledge. Unlike prior RAG systems that rely on general-purpose corpora, our approach retrieves evidence from the Doha Historical Dictionary of Arabic (DHDA), a large-scale resource documenting the historical development of Arabic vocabulary. The proposed pipeline combines hybrid retrieval with an intent-based routing mechanism to provide LLMs with precise, contextually relevant historical information. Our experiments show that this approach improves the accuracy of Arabic-native LLMs, including Fanar and ALLaM, to over 85%, substantially reducing the performance gap with Gemini, a proprietary large-scale model. Gemini also serves as an LLM-as-a-judge system for automatic evaluation in our experiments. The automated judgments were verified through human evaluation, demonstrating high agreement (kappa = 0.87). An error analysis further highlights key linguistic challenges, including diacritics and compound expressions. These findings demonstrate the value of integrating diachronic lexicographic resources into retrieval-augmented generation frameworks to enhance Arabic language understanding, particularly for historical and religious texts. The code and resources are publicly available at: https://github.com/somayaeltanbouly/Doha-Dictionary-RAG.

评分理由: 论文核心研究强化学习环境的演变，特别关注向语言驱动的基础智能体（LLM Agents）的范式转变。摘要明确提到"Large Language Models (LLMs)“和"LLM Agents”，因此这两个关键词高度相关（10分）。其他关键词如MoE、SFT、RAG、量化等均未在摘要中提及或与论文主题直接相关，故评0分。

强化学习（RL）领域的显著进展，本质上与用于训练和评估智能体的环境密不可分。本研究超越了传统的定性综述，对RL环境的演进进行了大规模、数据驱动的实证研究。通过程序化处理海量学术文献并严格提炼超过2000篇核心出版物，我们提出了一种量化方法，以描绘从孤立的物理模拟到通用、语言驱动的智能体（Foundation Agents）的转变路径。我们采用一种新颖的多维度分类法，针对不同的应用领域和所需的认知能力，对基准测试进行了系统分析。我们的自动化语义与统计分析揭示了一个深刻的、数据验证的范式转变：该领域已分化为由大语言模型（LLMs）主导的“语义先验”生态系统和“领域特定泛化”生态系统。此外，我们刻画了这些不同领域的“认知指纹”，以揭示跨任务协同、多领域干扰以及零样本泛化的内在机制。最终，本研究为设计下一代具身语义模拟器（Embodied Semantic Simulators）提供了一份严谨的、量化的路线图，旨在弥合连续物理控制与高层逻辑推理之间的鸿沟。

The remarkable progress of reinforcement learning (RL) is intrinsically tied to the environments used to train and evaluate artificial agents. Moving beyond traditional qualitative reviews, this work presents a large-scale, data-driven empirical investigation into the evolution of RL environments. By programmatically processing a massive corpus of academic literature and rigorously distilling over 2,000 core publications, we propose a quantitative methodology to map the transition from isolated physical simulations to generalist, language-driven foundation agents. Implementing a novel, multi-dimensional taxonomy, we systematically analyze benchmarks against diverse application domains and requisite cognitive capabilities. Our automated semantic and statistical analysis reveals a profound, data-verified paradigm shift: the bifurcation of the field into a “Semantic Prior” ecosystem dominated by Large Language Models (LLMs) and a “Domain-Specific Generalization” ecosystem. Furthermore, we characterize the “cognitive fingerprints” of these distinct domains to uncover the underlying mechanisms of cross-task synergy, multi-domain interference, and zero-shot generalization. Ultimately, this study offers a rigorous, quantitative roadmap for designing the next generation of Embodied Semantic Simulators, bridging the gap between continuous physical control and high-level logical reasoning.

评分理由: 论文核心研究大语言模型（LLMs）的推理效率问题，提出了一种基于自蒸馏的多令牌预测方法（MTP-D）来加速推理。因此，与"Large Language Models"高度相关（10分），因为论文明确以LLMs为研究对象；与"Speculative Decoding"或"Inference Acceleration"高度相关（10分），因为MTP是一种推测解码技术，旨在通过并行预测多个未来令牌来加速LLM推理。论文未涉及其他关键词，如MoE、SLMs、训练方法、对齐、代理、量化等，因此这些关键词得0分。

随着大语言模型（LLM）规模的扩大，推理效率成为关键瓶颈。多令牌预测（MTP）技术通过并行预测多个未来令牌，有望加速LLM推理。然而，现有MTP方法仍面临两大挑战：MTP头的接受率有限，以及多个MTP头的联合训练困难。为此，我们提出MTP-D，一种简单高效且附加训练成本极低的自蒸馏方法，该方法在最大程度保持主头性能的同时，显著提升了MTP头的接受率（+7.5%）。我们还为MTP-D引入了循环扩展策略，实现了高效且经济的MTP头扩展，并进一步将单头MTP的推理速度显著提升至（+220.4%）。此外，通过在七个基准测试上进行大量实验，我们系统性地探索并验证了关于蒸馏策略的关键见解以及MTP潜在的可扩展性。这些结果表明，我们的MTP-D及循环扩展策略有效提升了MTP头的性能与推理效率，推动了MTP在LLM中的实际应用。

As Large Language Models (LLMs) scale up, inference efficiency becomes a critical bottleneck. Multi-Token Prediction (MTP) could accelerate LLM inference by predicting multiple future tokens in parallel. However, existing MTP approaches still face two challenges: limited acceptance rates of MTP heads, and difficulties in jointly training multiple MTP heads. Therefore, we propose MTP-D, a simple yet effective self-distillation method with minimal additional training cost, which boosts MTP head acceptance rates (+7.5%) while maximumly preserving main-head performance. We also introduce a looped extension strategy for MTP-D, enabling effective and economical MTP head extension and further significant inference speedup to 1-head MTP (+220.4%). Moreover, we systematically explore and validate key insights on the distillation strategies and the potential scalability of MTP through extensive experiments on seven benchmarks. These results demonstrate that our MTP-D and looped extension strategy effectively enhance MTP-head performance and inference efficiency, facilitating the practical usage of MTP in LLMs.

评分理由: 论文《LLMpedia》的核心是评估大语言模型（LLMs）的事实性（Factuality），通过生成百科全书文章来测试模型参数记忆中的知识准确性。因此，它与关键词"Large Language Models” OR “LLMs” OR “Foundation Models"高度相关（10分），因为研究直接针对LLMs。同时，论文重点在于揭示模型的事实性缺陷，与"Hallucination Mitigation” OR “Factuality” OR “Truthfulness"高度相关（10分）。其他关键词如MoE、SFT、RAG、推理方法、代理、压缩等，论文未涉及这些具体技术，因此评分为0分。

MMLU等基准测试表明，旗舰语言模型的事实准确性已接近饱和，得分超过90%。我们指出这一结论并不完整。\emph{LLMpedia}完全基于参数化记忆生成百科全书式文章，在未使用检索增强的情况下，为三个模型系列生成了约100万篇文章。对于gpt-5-mini模型，在维基百科覆盖的主题上可验证的真实率仅为74.7%——比基准测试反映的情况低15个百分点以上，这印证了固定问题评估存在的可得性偏差。在维基百科覆盖范围之外，仅能通过精选网络证据验证的前沿主题真实率进一步降至63.2%。维基百科仅涵盖已浮现主题的61%，且三个模型系列在主题选择上的重叠率仅为7.3%。在受先前Grokipedia分析启发的捕获陷阱基准测试中，LLMpedia在文本相似度约为维基百科一半的情况下实现了显著更高的事实准确性。与Grokipedia不同，本研究的每个提示、生成文本及评估结论均已公开，使LLMpedia成为首个完全开放的参数化百科全书——架起了事实性评估与知识具象化之间的桥梁。所有数据、代码及可浏览界面详见https://llmpedia.net。

Benchmarks such as MMLU suggest flagship language models approach factuality saturation, with scores above 90%. We show this picture is incomplete. \emph{LLMpedia} generates encyclopedic articles entirely from parametric memory, producing ${\sim}$1M articles across three model families without retrieval. For gpt-5-mini, the verifiable true rate on Wikipedia-covered subjects is only 74.7% – more than 15 percentage points below the benchmark-based picture, consistent with the availability bias of fixed-question evaluation. Beyond Wikipedia, frontier subjects verifiable only through curated web evidence fall further to 63.2% true rate. Wikipedia covers just 61% of surfaced subjects, and three model families overlap by only 7.3% in subject choice. In a capture-trap benchmark inspired by prior analysis of Grokipedia, LLMpedia achieves substantially higher factuality at roughly half the textual similarity to Wikipedia. Unlike Grokipedia, every prompt, artifact, and evaluation verdict is publicly released, making LLMpedia the first fully open parametric encyclopedia – bridging factuality evaluation and knowledge materialization. All data, code, and a browsable interface are at https://llmpedia.net.

评分理由: 该论文核心研究大语言模型（LLMs）在临床医疗领域的应用，具体探索使用冻结的LLM将ICU时间序列数据转换为自然语言摘要，再生成可移植的患者嵌入表示，以解决跨医院模型部署的分布偏移问题。因此，与"Large Language Models"高度相关（10分），与"AI for Science"中的生物信息学/医疗应用高度相关（10分）。论文未涉及其他关键词的技术原理或方法创新，如MoE、模型压缩、推理加速、对齐调优等，故其他关键词评分为0分。

临床机器学习部署缓慢且脆弱：在一家医院有效的模型，在另一家医院面临分布偏移时性能常会下降。本研究探讨一个简单问题——大型语言模型能否创建可移植的患者嵌入，即一种患者表征，使得基于一家医院构建的下游预测器能够在其他地方使用，且只需极少甚至无需重新训练与微调。为此，我们使用一个冻结的LLM将不规则的重症监护室时间序列映射为简洁的自然语言摘要，随后通过一个冻结的文本嵌入模型对每个摘要进行嵌入，以获得固定长度的向量，该向量能够作为多种下游预测器的输入。在三个队列（MIMIC-IV、HIRID、PPICU）中，针对多项临床预测与分类任务，我们发现该方法简单易用，在分布内性能上与网格插补、自监督表征学习以及时间序列基础模型相比具有竞争力，同时在迁移至新医院时表现出更小的相对性能下降。我们研究了提示设计对性能的影响，发现结构化提示对于降低预测模型的方差至关重要，且不改变平均准确率。使用这些可移植表征能够改进少样本学习，并且相较于基线，并未增加年龄或性别等人口统计信息的可复原性，这表明其带来的额外隐私风险很小。我们的工作揭示了LLMs作为工具的潜力，可通过降低工程开销，实现生产级预测模型的可扩展部署。

Deploying clinical ML is slow and brittle: models that work at one hospital often degrade under distribution shifts at the next. In this work, we study a simple question – can large language models (LLMs) create portable patient embeddings i.e. representations of patients enable a downstream predictor built on one hospital to be used elsewhere with minimal-to-no retraining and fine-tuning. To do so, we map from irregular ICU time series onto concise natural language summaries using a frozen LLM, then embed each summary with a frozen text embedding model to obtain a fixed length vector capable of serving as input to a variety of downstream predictors. Across three cohorts (MIMIC-IV, HIRID, PPICU), on multiple clinically grounded forecasting and classification tasks, we find that our approach is simple, easy to use and competitive with in-distribution with grid imputation, self-supervised representation learning, and time series foundation models, while exhibiting smaller relative performance drops when transferring to new hospitals. We study the variation in performance across prompt design, with structured prompts being crucial to reducing the variance of the predictive models without altering mean accuracy. We find that using these portable representations improves few-shot learning and does not increase demographic recoverability of age or sex relative to baselines, suggesting little additional privacy risk. Our work points to the potential that LLMs hold as tools to enable the scalable deployment of production grade predictive models by reducing the engineering overhead.

评分理由: 论文核心研究LLMs的政治偏见评估，直接高度相关于"Large Language Models"和"Instruction Tuning” OR “Alignment” OR “Value Alignment”（涉及价值观对齐）。其他关键词如MoE、SLMs、Scaling Laws、Pre-training、RLHF、RAG、CoT、Agents、Quantization等均未在摘要中提及或相关，故评0分。

随着大型语言模型（LLM）日益成为主要信息来源，其潜在的政治偏见可能影响其客观性。现有的LLM社会偏见基准主要评估性别和种族刻板印象；即使涉及政治偏见，也通常仅进行粗略层面的衡量，忽视了塑造社会政治倾向的具体价值观。本研究采用PoliticsBench——一种基于EQ-Bench-v3心理测量基准改进的新型多轮角色扮演框架，对八个主流LLM（Claude、Deepseek、Gemini、GPT、Grok、Llama、Qwen Base、Qwen Instruction-Tuned）的政治偏见进行探究。我们测试了商业开发的LLM是否表现出系统性左倾偏见，且该偏见在多阶段角色扮演的后期更为显著。通过二十个渐进式情境模拟，每个模型陈述其立场并决定行动方案。我们依据十项政治价值观量表对这些回答进行评分，探究聊天机器人偏离中立标准背后的价值取向。八个模型中有七个呈现左倾倾向，仅Grok表现为右倾。每个左倾LLM均强烈表现出自由主义特征，同时适度体现保守主义特质。研究发现角色扮演各阶段的对齐分数存在轻微波动，但未呈现特定规律。尽管大多数模型采用基于后果的推理方式，Grok则频繁运用事实与统计数据展开论证。本研究首次通过多阶段自由文本交互，实现了对LLM政治价值观的心理测量学评估。

While Large Language Models (LLMs) are increasingly used as primary sources of information, their potential for political bias may impact their objectivity. Existing benchmarks of LLM social bias primarily evaluate gender and racial stereotypes. When political bias is included, it is typically measured at a coarse level, neglecting the specific values that shape sociopolitical leanings. This study investigates political bias in eight prominent LLMs (Claude, Deepseek, Gemini, GPT, Grok, Llama, Qwen Base, Qwen Instruction-Tuned) using PoliticsBench: a novel multi-turn roleplay framework adapted from the EQ-Bench-v3 psychometric benchmark. We test whether commercially developed LLMs display a systematic left-leaning bias that becomes more pronounced in later stages of multi-stage roleplay. Through twenty evolving scenarios, each model reported its stance and determined its course of action. Scoring these responses on a scale of ten political values, we explored the values underlying chatbots’ deviations from unbiased standards. Seven of our eight models leaned left, while Grok leaned right. Each left-leaning LLM strongly exhibited liberal traits and moderately exhibited conservative ones. We discovered slight variations in alignment scores across stages of roleplay, with no particular pattern. Though most models used consequence-based reasoning, Grok frequently argued with facts and statistics. Our study presents the first psychometric evaluation of political values in LLMs through multi-stage, free-text interactions.

评分理由: 论文主要研究一个用于护理院的语音智能扬声器系统，该系统结合了基于Whisper的语音识别和检索增强生成（RAG）方法（混合、稀疏和密集）。因此，与"Retrieval-Augmented Generation” OR “RAG” OR “Retrieval-Generation"高度相关（10分），因为RAG是核心方法之一。论文提到使用GPT-5.2，因此与"Large Language Models” OR “LLMs” OR “Foundation Models"有一定关联（8分），但LLMs不是主要创新点，而是作为系统组件。其他关键词如MoE、SLMs、Scaling Laws、训练方法、推理优化、代理系统等均未在摘要中提及，因此得0分。论文涉及医疗保健应用，但未明确属于"AI for Science” OR “Bioinformatics” OR “Cheminformatics”（这些通常指生物信息学或化学信息学），因此得0分。

人工智能（AI）在健康与社会照护领域正日益受到关注，其应用旨在减轻行政工作负担，使工作人员能将更多时间投入患者照护。本文评估了一款支持语音功能的护理院智能音箱，该设备旨在协助养老院的日常活动，包括通过语音查询居民记录、设置提醒及安排任务。研究提出了一套以安全为核心的评估框架，对系统进行端到端测试，结合了基于Whisper的语音识别与检索增强生成（RAG）方法（混合式、稀疏式与密集式）。通过监督式护理院实地试验与受控测试，我们评估了涵盖11个照护类别的330份语音转录文本，其中包含184次涉及提醒功能的交互。评估重点包括：（1）对居民身份与照护类别的正确识别；（2）提醒事项的识别与提取；（3）不确定情境下端到端任务安排的准确性（包括安全延迟/澄清机制）。鉴于护理院环境对安全性的高度要求，研究特别关注系统在嘈杂环境及不同口音下的可靠性，并通过置信度评分、澄清提示和人机协同监督机制予以支持。在最优配置（GPT-5.2）下，居民身份与照护类别匹配率达到100%（95%置信区间：98.86-100），提醒识别率达到89.09%（95%置信区间：83.81-92.80），且未遗漏任何提醒事项（召回率100%），但存在少量误报。通过日历集成实现的端到端任务安排达成84.65%的提醒数量精确匹配率（95%置信区间：78.00-89.56），表明将非正式口语指令转化为可执行事件时仍存在边界案例。研究结果表明，经过严谨评估并配备适当保障措施的语音交互系统，能够在养老院场景中支持准确的记录保存、高效的任务管理，并促进人工智能的可信应用。

Artificial intelligence (AI) is increasingly being explored in health and social care to reduce administrative workload and allow staff to spend more time on patient care. This paper evaluates a voice-enabled Care Home Smart Speaker designed to support everyday activities in residential care homes, including spoken access to resident records, reminders, and scheduling tasks. A safety-focused evaluation framework is presented that examines the system end-to-end, combining Whisper-based speech recognition with retrieval-augmented generation (RAG) approaches (hybrid, sparse, and dense). Using supervised care-home trials and controlled testing, we evaluated 330 spoken transcripts across 11 care categories, including 184 reminder-containing interactions. These evaluations focus on (i) correct identification of residents and care categories, (ii) reminder recognition and extraction, and (iii) end-to-end scheduling correctness under uncertainty (including safe deferral/clarification). Given the safety-critical nature of care homes, particular attention is also paid to reliability in noisy environments and across diverse accents, supported by confidence scoring, clarification prompts, and human-in-the-loop oversight. In the best-performing configuration (GPT-5.2), resident ID and care category matching reached 100% (95% CI: 98.86-100), while reminder recognition reached 89.09% (95% CI: 83.81-92.80) with zero missed reminders (100% recall) but some false positives. End-to-end scheduling via calendar integration achieved 84.65% exact reminder-count agreement (95% CI: 78.00-89.56), indicating remaining edge cases in converting informal spoken instructions into actionable events. The findings suggest that voice-enabled systems, when carefully evaluated and appropriately safeguarded, can support accurate documentation, effective task management, and trustworthy use of AI in care home settings.

评分理由: 论文《Enes Causal Discovery》提出了一种用于因果发现的混合专家（Mixture of Experts, MoE）架构，因此与关键词"Mixture of Experts” OR “MoE” OR “Sparse Models"高度相关（10分）。论文涉及科学领域（因果发现）的AI应用，与关键词"AI for Science” OR “Bioinformatics” OR “Cheminformatics"有一定关联（5分），但未明确涉及生物信息学或化学信息学。论文未提及大语言模型（LLMs）、深度学习技术原理创新或其他评分关键词，因此其余关键词得分为0分。

所提出的架构采用专家混合模型，使得模型实体（如因果关系）能够被进一步参数化。具体而言，本研究尝试利用神经网络实现神经元，因为对该数据集而言，实现神经元构成了一项重大挑战。需要说明的是，通常使用简单快速的皮尔逊系数线性模型即可获得良好评分，这构成了一个需要优秀模型才能超越的强基准线。此外，在观测数据的因果发现方面存在主要限制：与萨克斯研究不同，本研究未使用干预措施而仅依赖先验知识；其中最具制约性的限制是数据本身的问题，本文对此进行了处理。随后，本文描述了方法与模型，并展示了实验结果。

Enes The proposed architecture is a mixture of experts, which allows for the model entities, such as the causal relationships, to be further parameterized. More specifically, an attempt is made to exploit a neural net as implementing neurons poses a great challenge for this dataset. To explain, a simple and fast Pearson coefficient linear model usually achieves good scores. An aggressive baseline that requires a really good model to overcome that is. Moreover, there are major limitations when it comes to causal discovery of observational data. Unlike the sachs one did not use interventions but only prior knowledge; the most prohibiting limitation is that of the data which is addressed. Thereafter, the method and the model are described and after that the results are presented.

评分理由: 论文《Project and Generate: Divergence-Free Neural Operators for Incompressible Flows》专注于流体动力学中的机器学习模型，特别是通过引入一个统一框架来强制不可压缩连续性方程作为硬约束，以解决物理上不可接受的模拟问题。论文的核心内容涉及神经网络算子、物理约束、流体模拟和生成建模，属于科学计算和物理信息机器学习领域。所有关键词中，只有“AI for Science” OR “Bioinformatics” OR “Cheminformatics”与论文高度相关，因为论文直接应用AI于科学领域（流体动力学），属于“AI for Science”的范畴。其他关键词主要涉及大语言模型（LLMs）、模型训练、推理优化、代理系统等，与论文的流体动力学和物理约束建模主题完全无关，因此评分为0。加权总分计算为：仅“AI for Science”关键词得10分，权重1.0，总分10.0。作者列表中未包含指定的专家。

基于学习的流体动力学模型通常在无约束函数空间中运行，导致物理上不可接受的不稳定模拟。虽然基于惩罚的方法提供了软正则化，但它们无法提供结构性保证，从而产生虚假发散和长期崩溃问题。在本研究中，我们提出了一个统一框架，将不可压缩连续性方程作为确定性和生成性建模的硬性内在约束加以强制执行。首先，为使确定性模型投影至无散子空间，我们集成了基于亥姆霍兹-霍奇分解的可微分谱勒让投影，将回归假设空间限制在物理可容许的速度场中。其次，在生成物理一致的分布时，我们发现当先验分布不兼容时，简单投影模型输出是不够的。为此，我们通过基于旋度的前推映射构建了无散高斯参考测度，确保整个概率流在构造上始终保持子空间一致性。在二维纳维-斯托克斯方程上的实验表明，该方法在离散误差范围内实现了精确的不可压缩性，并显著提升了稳定性和物理一致性。

Learning-based models for fluid dynamics often operate in unconstrained function spaces, leading to physically inadmissible, unstable simulations. While penalty-based methods offer soft regularization, they provide no structural guarantees, resulting in spurious divergence and long-term collapse. In this work, we introduce a unified framework that enforces the incompressible continuity equation as a hard, intrinsic constraint for both deterministic and generative modeling. First, to project deterministic models onto the divergence-free subspace, we integrate a differentiable spectral Leray projection grounded in the Helmholtz-Hodge decomposition, which restricts the regression hypothesis space to physically admissible velocity fields. Second, to generate physically consistent distributions, we show that simply projecting model outputs is insufficient when the prior is incompatible. To address this, we construct a divergence-free Gaussian reference measure via a curl-based pushforward, ensuring the entire probability flow remains subspace-consistent by construction. Experiments on 2D Navier-Stokes equations demonstrate exact incompressibility up to discretization error and substantially improved stability and physical consistency.

评分理由: 该论文开发了一个多语言AI驱动的界面，用于为有特殊教育需求的儿童自动增强文本视觉支架，属于AI在教育领域的应用。论文摘要中未提及任何具体的大模型技术（如LLM、MoE、SFT等）、模型优化方法（如量化、推理加速）或高级AI能力（如推理、代理）。唯一的相关关键词是"AI for Science”，因为该研究涉及AI在特殊教育（可视为科学应用领域）中的应用，但并非核心生物信息学或化学信息学，因此给予5分（有一定关联）。其他所有关键词均与论文内容完全无关，得0分。

阅读理解对有特殊教育需求与残障（Special Educational Needs and Disabilities, SEND）的儿童构成显著挑战，通常需要密集的一对一阅读支持。为帮助治疗师扩大此类支持的规模，我们开发了一个多语言、人工智能驱动的交互界面，能自动为文本添加视觉支架。该系统动态识别关键概念，并将其映射到语境相关的象形图，从而支持跨语言学习者。我们通过多语言覆盖度分析、言语治疗师与特殊教育专家的临床评审，以及延迟评估，在五种类型学上差异显著的语言（英语、法语、意大利语、西班牙语和阿拉伯语）中对系统进行了评估。评估结果显示，在五种语言中系统均实现了较高的象形图覆盖率和视觉支架密度。专家评审表明，自动选择的象形图在语义上是恰当的，四种欧洲语言的正确与可接受评级合计超过95%，阿拉伯语虽因象形图库覆盖度较低，仍达到约90%。系统延迟保持在适合实时教育应用的交互阈值内。这些发现证明了自动化多模态支架在技术可行性、语义安全性和可接受性方面的潜力，有助于提升神经多样性学习者的学习可及性。

Reading comprehension presents a significant challenge for children with Special Educational Needs and Disabilities (SEND), often requiring intensive one-on-one reading support. To assist therapists in scaling this support, we developed a multilingual, AI-powered interface that automatically enhances text with visual scaffolding. This system dynamically identifies key concepts and maps them to contextually relevant pictograms, supporting learners across languages. We evaluated the system across five typologically diverse languages (English, French, Italian, Spanish, and Arabic), through multilingual coverage analysis, expert clinical review by speech therapists and special education professionals, and latency assessment. Evaluation results indicate high pictogram coverage and visual scaffolding density across the five languages. Expert audits suggested that automatically selected pictograms were semantically appropriate, with combined correct and acceptable ratings exceeding 95% for the four European languages and approximately 90% for Arabic despite reduced pictogram repository coverage. System latency remained within interactive thresholds suitable for real-time educational use. These findings support the technical viability, semantic safety, and acceptability of automated multimodal scaffolding to improve accessibility for neurodiverse learners.

评分理由: 该论文研究自适应脚手架在数学辅导对话中的测量方法，提出了一种基于嵌入的方法来分析对话动态。论文提到大型语言模型（LLMs）在远程辅导系统中的兴起，因此与"Large Language Models"关键词有一定关联（5分），但并未深入探讨LLMs的技术原理或创新应用。其他关键词主要涉及大模型的具体技术（如MoE、量化、推理加速等）、训练方法（如预训练、对齐、RLHF等）或特定应用领域（如科学AI），论文均未涉及，因此评分为0分。

适应性支架能有效促进学习，但该领域仍缺乏在真实辅导对话中测量支架强度的可靠方法。随着远程人工辅导和基于大语言模型的系统兴起，这一研究缺口日益凸显。我们提出一种基于嵌入向量的分析方法，通过对齐对话轮次、问题陈述与正确答案的语义来解析支架动态。具体而言，我们通过计算辅导者与学习者的对话贡献同任务相关内容的余弦相似度来实现语义对齐操作化。我们将此框架应用于Eedi问题锚定辅导对话数据集中的1,576个真实数学辅导对话。分析揭示了任务对齐的系统性差异，以及参与者将对话内容锚定于问题与解决方案的独特时序模式。混合效应模型进一步表明，角色特异的语义对齐对辅导进程的预测力超越了消息顺序、长度等基线特征。辅导者在互动早期的对话内容表现出更强的问题锚定性，而学习者与解决方案的对齐程度则与辅导进程呈适度正相关。这些发现印证了支架教学是基于任务语义、持续且角色敏感的互动过程。通过捕捉随时间演变的角色特异性对齐，本方法为分析教学对话和评估会话式辅导系统提供了理论依据的测量工具。

Adaptive scaffolding enhances learning, yet the field lacks robust methods for measuring it within authentic tutoring dialogue. This gap has become more pressing with the rise of remote human tutoring and large language model-based systems. We introduce an embedding-based approach that analyzes scaffolding dynamics by aligning the semantics of dialogue turns, problem statements, and correct solutions. Specifically, we operationalize alignment by computing cosine similarity between tutor and student contributions and task-relevant content. We apply this framework to 1,576 real-world mathematics tutoring dialogues from the Eedi Question Anchored Tutoring Dialogues dataset. The analysis reveals systematic differences in task alignment and distinct temporal patterns in how participants ground their contributions in problem and solution content. Further, mixed-effects models show that role-specific semantic alignment predicts tutorial progression beyond baseline features such as message order and length. Tutor contributions exhibited stronger grounding in problem content early in interactions. In contrast, student solution alignment was modestly positively associated with progression. These findings support scaffolding as a continuous, role-sensitive process grounded in task semantics. By capturing role-specific alignment over time, this approach provides a principled method for analyzing instructional dialogue and evaluating conversational tutoring systems.

评分理由: 论文《AMIF: Authorizable Medical Image Fusion Model with Built-in Authentication》专注于医学图像融合模型的版权保护技术，属于计算机视觉和医学图像处理领域。论文的核心贡献是提出了一种带有内置认证机制的医学图像融合模型，通过嵌入版权标识来保护知识产权。所有关键词均围绕大语言模型（LLM）及其相关技术（如训练方法、推理优化、对齐、代理等）或通用AI科学应用。论文内容与这些LLM核心技术完全无关，因此除最后一个关键词外，所有关键词评分为0。最后一个关键词"AI for Science" OR “Bioinformatics” OR “Cheminformatics"评分为5，因为论文涉及AI在医学成像（生物信息学相关领域）的应用，但并非核心创新点，只是应用场景。

多模态图像融合技术能够实现病灶的精准定位与特征描述，从而辅助精确诊断，强化临床决策支持，这使其在医学影像研究中日益受到重视。一个强大的多模态图像融合模型依赖于高质量、具有临床代表性的多模态训练数据以及经过严格设计的模型架构。因此，此类专业影像组学模型的开发是标准化数据采集、临床专业知识与算法设计能力共同协作的成果，其相关知识产权需要得到保护。然而，当前的多模态图像融合模型在生成融合结果时缺乏内置的知识产权保护机制，无意中通过推理泄露暴露了专有模型知识与敏感训练数据。例如，恶意用户可能利用融合输出，通过模型蒸馏或其他基于推理的反向工程技术来模仿专有模型的融合性能。为解决这一问题，我们提出了AMIF（Authorizable Medical Image Fusion），首个具备内置认证功能的可授权医学图像融合模型，它将授权访问控制集成到图像融合目标中。对于未经授权的使用，AMIF会在融合结果中嵌入显式且可见的版权标识符；反之，通过基于密钥的成功认证后，用户方可获得高质量的融合结果。

Multimodal image fusion enables precise lesion localization and characterization for accurate diagnosis, thereby strengthening clinical decision-making and driving its growing prominence in medical imaging research. A powerful multimodal image fusion model relies on high-quality, clinically representative multimodal training data and a rigorously engineered model architecture. Therefore, the development of such professional radiomics models represents a collaborative achievement grounded in standardized acquisition, clinical-specific expertise, and algorithmic design proficiency, which necessitates protection of associated intellectual property rights. However, current multimodal image fusion models generate fused outputs without built-in mechanisms to safeguard intellectual property rights, inadvertently exposing proprietary model knowledge and sensitive training data through inference leakage. For example, malicious users can exploit fusion outputs and model distillation or other inference-based reverse engineering techniques to approximate the fusion performance of proprietary models. To address this issue, we propose AMIF, the first Authorizable Medical Image Fusion model with built-in authentication, which integrates authorization access control into the image fusion objective. For unauthorized usage, AMIF embeds explicit and visible copyright identifiers into fusion results. In contrast, high-quality fusion results are accessible upon successful key-based authentication.

评分理由: 论文《PosterIQ》主要研究海报的理解与生成，属于视觉-语言多模态领域。它创建了一个包含图像标注和生成提示的基准数据集，并评估了最先进的多模态大模型（MLLMs）和基于扩散的生成器。论文的核心是设计驱动的视觉理解和生成，而非大模型技术原理的创新。因此，大多数关键词（如MoE、Scaling Laws、RLHF、PEFT等）与论文内容完全无关，评分为0。唯一相关的关键词是"Large Language Models” OR “LLMs” OR “Foundation Models”，因为论文评估了MLLMs（多模态大模型），这些模型通常基于LLMs或Foundation Models构建，但论文本身不深入探讨LLMs的技术细节，仅将其作为评估对象，因此给予5分（有一定关联）。其他关键词如AI for Science等，虽然论文涉及设计领域，但并非科学领域的AI应用，故评分为0。

我们提出PosterIQ，一个面向海报理解与生成的设计驱动型基准数据集，其标注涵盖构图结构、版式层级与语义意图三个维度。该数据集包含7,765个图像-标注实例及822个生成提示，覆盖真实场景、专业设计及合成案例。为连接视觉设计认知与生成建模，我们定义了布局解析、图文对应、版式/可读性与字体感知、设计质量评估，以及基于隐喻的可控构图感知生成等任务。通过对前沿多模态大语言模型与扩散生成模型的评估，我们发现现有模型在视觉层级理解、版式语义感知、显著性控制及意图传达方面仍存在明显不足：商业模型在高层推理任务上表现领先，但其评估机制对设计细节敏感度不足；生成模型虽能较好渲染文字，却在构图感知合成方面存在困难。深入分析表明，PosterIQ既可作为量化评估基准，也能作为设计推理的诊断工具，提供可复现的、面向具体任务的评估指标。我们期望以此推动生成模型的创造力发展，并将以人为本的设计原则融入视觉-语言生成系统。

We present PosterIQ, a design-driven benchmark for poster understanding and generation, annotated across composition structure, typographic hierarchy, and semantic intent. It includes 7,765 image-annotation instances and 822 generation prompts spanning real, professional, and synthetic cases. To bridge visual design cognition and generative modeling, we define tasks for layout parsing, text-image correspondence, typography/readability and font perception, design quality assessment, and controllable, composition-aware generation with metaphor. We evaluate state-of-the-art MLLMs and diffusion-based generators, finding persistent gaps in visual hierarchy, typographic semantics, saliency control, and intention communication; commercial models lead on high-level reasoning but act as insensitive automatic raters, while generators render text well yet struggle with composition-aware synthesis. Extensive analyses show PosterIQ is both a quantitative benchmark and a diagnostic tool for design reasoning, offering reproducible, task-specific metrics. We aim to catalyze models’ creativity and integrate human-centred design principles into generative vision-language systems.

评分理由: 论文专注于计算机视觉和图形学领域的手术3D重建，使用GNN和注意力机制解决软组织变形问题，与绝大多数大模型技术关键词（如LLM、MoE、RLHF、RAG等）完全无关；仅与’AI for Science’有一定关联，因为涉及医学图像分析，属于AI在科学领域的应用，但并非核心内容，故给5分。

可变形软组织的精确三维重建对于手术机器人感知至关重要。然而，低纹理表面、镜面高光和器械遮挡常常破坏几何连续性，这对现有的固定拓扑方法构成了挑战。为此，我们提出了EndoVGGT，这是一个以几何为中心的框架，配备了一个变形感知图注意力模块。DeGAT模块不依赖静态空间邻域，而是动态构建特征空间语义图，以捕捉连贯组织区域之间的长程关联。这使得结构线索能够在遮挡区域间进行鲁棒传播，从而保证全局一致性并改善非刚性变形恢复。在SCARED数据集上的大量实验表明，我们的方法显著提高了重建保真度，与先前的最先进技术相比，PSNR提升了24.6%，SSIM提升了9.1%。至关重要的是，EndoVGGT在未见过的SCARED和EndoNeRF数据集上展现出强大的零样本跨数据集泛化能力，证实了DeGAT学习到的是与领域无关的几何先验。这些结果凸显了动态特征空间建模在实现一致性手术三维重建方面的有效性。

Accurate 3D reconstruction of deformable soft tissues is essential for surgical robotic perception. However, low-texture surfaces, specular highlights, and instrument occlusions often fragment geometric continuity, posing a challenge for existing fixed-topology approaches. To address this, we propose EndoVGGT, a geometry-centric framework equipped with a Deformation-aware Graph Attention (DeGAT) module. Rather than using static spatial neighborhoods, DeGAT dynamically constructs feature-space semantic graphs to capture long-range correlations among coherent tissue regions. This enables robust propagation of structural cues across occlusions, enforcing global consistency and improving non-rigid deformation recovery. Extensive experiments on SCARED show that our method significantly improves fidelity, increasing PSNR by 24.6% and SSIM by 9.1% over prior state-of-the-art. Crucially, EndoVGGT exhibits strong zero-shot cross-dataset generalization to the unseen SCARED and EndoNeRF domains, confirming that DeGAT learns domain-agnostic geometric priors. These results highlight the efficacy of dynamic feature-space modeling for consistent surgical 3D reconstruction.