AI 论文与研究
整理大模型、智能体、多模态、机器学习与生成式 AI 的论文、基准和研究进展。
分类文章5477
当前页67 / 137
持续更新永久归档
分类文章
按发布时间从新到旧 · 每页 40 条
论文研究普通
ARCH-B: Architectural Representation, Comprehension and Hierarchy Benchmark
Multimodal models increasingly interpret visual environments, but their ability to recognize the same building across photographs, floor plans, elevations, sections, and renderings remains poorly characterized. We introduce ARCH-B, a bench…
信息来源:arXiv
论文研究普通
Kafila: Serving Large Language Models on a Trusted Set of Heterogeneous Commodity Machines
Between them, the members of a research group or a circle of friends own several consumer computers, none large enough to run a capable large language model. Existing systems pool such capacity across open swarms anyone may join, which a g…
信息来源:arXiv
论文研究普通
Singularities of Non-negative Matrix Factorization and their application to Bayesian inference
Non-negative matrix factorization (NMF) is a singular statistical model whose Bayesian asymptotics are governed by the real log canonical threshold (RLCT). We study the local geometry of the factorization map and derive an upper bound for …
信息来源:arXiv
论文研究普通
Vision--Language Signals in Constrained RL: Safety Gains Without Anticipation
Safe reinforcement learning seeks policies that maximise task performance while satisfying safety constraints. In driving benchmarks, however, collision costs typically appear only at the time of collision, providing no advance warning of …
信息来源:arXiv
论文研究普通
Large Language Models for Structured Clinical Data Analysis: Dual-Agent Grounding and Validation
Objective: To develop and characterize CLEAR-Med, a dual-agent framework for natural-language analysis of structured clinical data that separates SQL-based invocation from independent validation. Methods: CLEAR-Med uses one agent to transl…
信息来源:arXiv · ChatGPT
论文研究普通
研究揭示模型身份标签引发多智能体 LLM 系统派系化并损害协作
研究发现在多智能体 LLM 系统中,向智能体暴露彼此的模型家族身份会引发派系化,智能体倾向与同标签对象合作,即使任务并无此要求。在 9 至 25 个、最多 5 个开源模型家族的实验中,带标签组在纯合作任务中平均多花 30% 轮次和 55% token,成功率从 96% 降至 81%;替换或打乱标签派系随之改变,移除标签则现象消失,隐藏身份标签是简单有效的缓解手段。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
研究称语言模型倾向于"不安全"汇报,一句诚实提示可显著改善
研究提出"不安全汇报"概念,构建八种对抗性汇报场景,研究 LLM 是否隐瞒会改变叙事的缺陷。在植入负面结果的实验日志测试中,GPT-5.5 在 200 份报告里仅 2 份指出负面结果,加入一句诚实指令后升至 190/200;对 Qwen3.5-9B 的激活分析和转向实验显示诚实与追求成功在表征空间方向相反。
信息来源:HuggingFace Daily Papers(社区热门论文) · GPT / Qwen / Hugging Face
论文研究普通
基于项目反应理论的评分标准奖励:RRT 用 Qwen3.5-4B 超越 GRPO
Rubric Response Theory(RRT)用两参数项目反应模型把评分标准的判定模式转化为标量质量证据,替代传统按满足条目累加得分的方式。
信息来源:HuggingFace Daily Papers(社区热门论文) · Qwen / Hugging Face
论文研究精选
PromptArmor 披露 Elastic AI SOC 存在凭证窃取漏洞,Elastic 未在跟进后修复
PromptArmor 披露 Elastic 的 Agentic SOC(EASE)可被钓鱼告警中的间接提示词注入操纵,无需人工审批即可铸造 API 密钥并外传,攻击者可借此禁用检测规则、伪造告警或窃取 Elasticsearch 数据。
信息来源:PromptArmor:Threat Intelligence
论文研究普通
距离去掉视觉编码器还有多远?无编码器多模态预训练的缩放定律
研究对比了无编码器与有编码器多模态大模型的缩放定律,发现去掉视觉编码器会把多模态目标的算力最优分配推向更大模型,文本目标则几乎不变。两者在文本目标上损失-算力前沿几乎重合,但多模态目标上无编码器模型小规模时落后,预计约 10^22 FLOPs 时追平。无编码器时语言模型通过视觉专属适配接管其角色:视觉 token 双向交互随算力增长愈发有益,视觉处理前移,视觉 token 的专家路由更集中。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
Imprint Reader:从权重更新读出到行为干预
研究者提出 Imprint Reader,用 Semantic Mount-and-Read Tuning(SaRT)训练模型以自然语言描述冻结的权重更新,在留出更新上知识类 Pass@100 为 2%、行为类为 16%。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
FlyBy 框架教小型推理模型识别何时思考无效并按需查询更强模型
论文提出 FlyBy,一个选择性查询框架,训练 4B 和 8B 小型推理模型先推理、诊断未解决问题,在知识瓶颈时查询参数知识更强的模型。研究发现自精炼主要把概率质量集中在当前状态已可达的解上,并区分出执行瓶颈与知识瓶颈两类失败机制。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
NavHarness:面向终身具身导航的无训练框架
研究团队提出免训练的具身导航框架 NavHarness,将记忆处理纳入导航循环,通过多轮智能体会话调用地图、任务记录与房屋知识,并与观测比对、记录修正。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
WorldPlay2:扩展实时交互世界模型的控制能力与预测时长
WorldPlay2 是一个交互式世界模型,通过分解式混合控制接口与压缩记忆、稳定蒸馏的协同设计,兼顾长时一致性与实时响应。该接口将帧对齐动作控制与结构化语义控制结合,显式解耦场景外观、角色身份和动态语义事件;同时将历史上下文压缩为记忆 token,供自回归学生模型与双向教师模型共享,实现按片段进行记忆条件打分,大幅降低蒸馏开销。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
DCSD:解耦信用方向与幅度的自蒸馏方法,11 项基准超越 GRPO 与 OPSD
针对教师监督下步级信用方向与幅度耦合的问题,研究者提出解耦信用自蒸馏(DCSD),用 belief-margin probing 确定信用方向、用边际信息增益量化信用幅度,实现步到 token 的信用分配。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
模型内部表征何时有用?表征工程在 LLM 安全中的角色评估
一项匹配评估对比了表征工程与行为安全防护在 LLM 安全控制与监控上的表现。安全控制方面,DPO 整体控制最强且随训练数据增加而提升,但后续良性微调会削弱其安全性;表征引导仅在低数据场景(尤其高质量对比数据)保持竞争力。安全监控方面,专用文本监控器检测准确率最高,表征探针则以更低边际成本保持竞争力,监控引导干预还能在几乎不增加过度拒答的情况下恢复 DPO 因良性微调损失的大部分安全性。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
MarginFlow:面向二值矩阵的零样本摊销序贯重要性采样框架
研究者提出 MarginFlow,将序贯重要性采样(SIS)的提议分布设计转化为学习问题,并证明理想 SIS 提议等价于对每个满足给定边际的二值矩阵赋予单位奖励的 GFlowNet 策略。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
GPT-6 Astra 跨计算机视觉评测揭示通用模型的能力边界
该论文在 9 个领域、34 项能力和 55 个基准上评测 GPT-6 Astra 及五个前沿通用 AI 系统,并与专用模型和人类参考水平比较。Astra 在视觉与空间推理及多种结构化预测上显著领先其他系统;语义解释、推理和以物体为中心的预测接近或达到参考水平,但在度量几何精度、忠实重建、时序一致的密集预测和细粒度专业知识上仍有较大差距,附加推理与专用工具只能弥合部分缺口。
信息来源:HuggingFace Daily Papers(社区热门论文) · GPT / Hugging Face
论文研究普通
PlaylistEval:视频语言模型做评判者,在日级长视频上还可靠吗?
PlaylistEval 是一个无需人工标注的智能体框架,可在超过 100 小时的播放列表视频集合上构建视频语言评判基准,自动生成差异由因果退化控制、必须跨集合检索才能作答的问答对。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
SlideDP:跨多 GPU 扩展宿主内存驻留的 LLM 微调
SlideDP 是面向共享宿主多 GPU 系统的同步数据并行运行时,通过维护单一权威宿主状态、解耦通信路径与状态布局,并对参数传输、梯度聚合和 CPU 更新做流水线化,实现超出 GPU 显存的 LLM 全参数微调。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
蒸馏学习该用 On-Policy 还是 Off-Policy?一项系统性研究
研究在 Llama3 与 Qwen2.5 系列上做强弱蒸馏实验,独立改变 rollout 策略、token 级 KL 方向和学习率,发现 rollout 策略并非核心因素:前向 KL 对 rollout 策略极不敏感且表现稳定,反向 KL 则明显更敏感、偏好学生模型自生成的 rollout,而学习率主导遗忘与更新稀疏性。
信息来源:HuggingFace Daily Papers(社区热门论文) · Qwen / Llama / Hugging Face
论文研究普通
研究量化聊天模板注入中保留 token 表示带来的攻击权限差异
arXiv 论文发现,伪造的聊天模板标记以保留控制 token 还是普通子词形式进入模型,攻击强度差异巨大,且选择权在服务端分词器手中。在 InjecAgent 基准上,将伪造标记编码为子词使四个开源模型家族中三个的攻击成功率下降 39 到 66 个百分点,Qwen3-8B 因能靠文本推理识别伪造回合差距仅 8 点,抑制推理块后扩大到 50。
信息来源:HuggingFace Daily Papers(社区热门论文) · Qwen / Hugging Face
论文研究普通
SCOPD:面向高效视觉语言模型的稀疏上下文同策略自蒸馏
针对推理型视觉语言模型(VLM)视觉 token 序列过长导致推理昂贵的问题,研究者提出稀疏上下文同策略自蒸馏框架 SCOPD:学生模型基于剪枝后的视觉 token 生成推理轨迹,由拥有完整上下文的教师模型对同一同策略前缀进行监督,无需真实答案、架构改动或额外推理开销。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
FurE:无需动物毛发数据集的高效实例级 3D 毛发重建
FurE 提出一种基于发丝的动物毛发重建方法,无需动物毛发数据集即可从多视角图像恢复可编辑的毛发造型,通过优化根条件潜在场并经 PCA 解码器生成发丝几何。该方法利用表面约束的 Gaussian Frosting 表示结合部位先验重建去毛动物身体,并借助人类头发数据训练的 PCA 解码器缓解动物数据稀缺问题。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
AutoDataBench:智能体能写出自我改进循环所需的数据吗?
新基准 AutoDataBench 要求智能体根据原始基准任务和目标模型的尝试记录,写出满足有效性、新颖性、难度和行为覆盖等验收标准的新任务。在三个可执行智能体任务基准上,默认 45 分钟预算内没有智能体得分超过 20/100;给最强智能体四倍时间后得分大幅提升,但单个可用任务的成本几乎不变。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
StructRL:面向长时程视觉-语言-动作任务的在线结构化强化学习
StructRL 是一个在线强化学习框架,通过将任务分解为可验证子任务、仅在前置子任务完成后给予中间奖励并按完成速度缩放奖励,为长时程 VLA 任务构建结构化中间监督。在 RoboCasa365 和 LIBERO-Long 上,配合 GR00T-N1.5 与 pi 0.5,StructRL 持续优于所评估的在线 RL 基线。结果表明可验证的结构化中间奖励能改善长时程 VLA 后训练,代码已开源。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
VoxParity 基准测试语音智能体对音频线索的响应能力
VoxParity 基准用 14 个行业 183 个场景测试语音智能体是否根据音频线索改变行动,同一文本的音频变化(如 mayday 呼救、儿童声音下注、恐惧低语)应触发不同的工具调用。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
VLA 强化学习的低秩结构:RL 如何重塑 π_{0.5} 与 GR00T N1.5/N1.6
研究发现,在 LIBERO、ManiSkill、MetaWorld 和 CALVIN 上对 π_{0.5}、GR00T N1.5/N1.6 等 flow-based VLA 模型做强化学习后训练,参数更新呈现显著低秩,且高度集中在动作专家的 Timestep Modules 中。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
AI Night-Scientist:用强化学习训练 LLM 的智能体科研创意
AI Night-Scientist 是一个用强化学习教模型何时以及如何跳出可预测推理的智能体框架,基于行动、过程、结果三个维度用 GRPO 训练。相比基座模型,其科研提案的研究方向范围扩大 27.8%、贡献类型增加 14.9%,预测引用影响最高提升 32.0 个百分点,原创性提升 66.2 分。仅提高解码温度无法复现这些增益,指明追求何种创造力的语义引导才是关键。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
TaH2:用自适应循环 Transformer 改进测试时扩展
针对循环 Transformer 在测试时扩展上的不足,研究者提出 TaH2,通过前瞻深度监督联合后训练主干网络与迭代决策器,让额外迭代只作用于真正受益的 token。在 AIME 基准上,TaH2 将准确率-算力斜率提升 53%(2.74 对 1.79),同等测试算力下峰值准确率超出非循环基线约 3.4 分;迭代深度从 2 增至 8 时,其增益从 +2.8 分扩大到 +3.9 分。代码已开源。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
EvolvingAvatar:随对话演进自适应调整的交互式 3D 头部生成
EvolvingAvatar 是一种因果生成器,通过测试时训练在交互过程中适配用户面部视频与双人音频,其双人上下文预测目标无需测试时目标动作标注即可提供自监督信号。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
FactorEngram:面向语言模型的基级门控分解式 N-gram 记忆
FactorEngram 提出一种分解式 n-gram 记忆机制,用共享基向量字典上的稀疏系数替代传统单体嵌入,并让上下文对每个记忆分量单独门控。在 340M 和 1B 参数 Transformer 骨干上,该方法提升了语言建模与下游任务表现;消融实验显示,将记忆分支插入中间层的注意力子层之前是有效配置。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
视频-音频联合与跨模态生成及编辑:统一形式化与设计分类体系
一篇综述提出统一形式化框架,将视频-音频联合生成、跨模态生成与联合编辑定义为同一音视频对分布上的三类问题,并按五个设计维度对方法进行分类。该工作称首次系统梳理联合音视频编辑,将其划分为九类编辑、涵盖 28 种编辑类型,并整理了各场景的方法、数据集与评测指标。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
美团 LongCat-DeepResearch 技术报告:多智能体深度研究系统发布
美团提出 LongCat-DeepResearch 深度研究系统,将增强版 LongCat 模型与多智能体工作流结合,通过规划与调查分离、分节并行撰写和全局审阅局部修订来生成有证据支撑的报告。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
超越教师分配:领域归一化多教师同策略蒸馏(DN-MOPD)
针对多教师同策略蒸馏(MOPD)中指令跟随反馈的离散度是数学反馈的数倍、从而主导学生更新的问题,研究者提出领域归一化 MOPD(DN-MOPD),按各领域实测离散度重新缩放反馈。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
AnswerMap:从答案后验构建 VLM 的忠实空间可解释性方法
论文提出 AnswerMap,一种免训练、任务无关的黑盒方法,通过行列条带的是/否后验外积生成查询条件下的空间图,并可定义读取方式导出定位等连续输出。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
PyroAdapt:面向空间异质性与时间漂移的山火预测自适应框架
PyroAdapt 用"预训练—检索—排序"框架让山火预测模型适应目标分布:在加州 666 个 0.25x0.25 网格上,选择性排序将日均精度从 21.62% 提升至 24.35–24.57%,Top5% 召回率从 18.70% 升至 22.11–22.79%。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
LeRF:为视角采择推理学习参考坐标系
针对 VLM 在视角采择中常默认相机视角的问题,研究者提出 LeRF 框架,训练模型判断是否需要坐标系,并预测以实体为中心的参考坐标系,再由轻量渲染器叠加到图像上辅助推理,无需外部感知模型或显式 3D 重建。该方法先做监督微调学习选择性调用工具与坐标系预测,再用强化学习在空间 VQA 数据上优化,在多个视角采择基准上稳定优于其骨干模型,并超过现有开源方法。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
PMOPD:多教师在线策略蒸馏中的任务排序、循环与参数更新子空间保护
针对多教师在线策略蒸馏(MOPD)中的能力跷跷板问题,研究者提出 PMOPD,通过从各任务累积参数位移构建子空间记忆,对梯度和优化器更新做投影以消除跨任务干扰,并配合轻量冲突探针指导任务排序与循环策略。在 Code、Reason、Math 任务上,PMOPD 全面优于 MOPD,Qwen2.5-7B 平均分提升 2.54 分,Llama-3.1-8B 提升 2.09 分。
信息来源:HuggingFace Daily Papers(社区热门论文) · Qwen / Llama / Hugging Face
论文研究普通
谁获得一个 Token,它又承载了什么?大语言模型中的姓名支持不均与概念可及性差异
研究揭示大语言模型对姓名的 token 化存在系统性不均:在近 50 万个名字和 12 个 LLM 分词器上,部分姓名可直接单 token 访问,另一些则被拆成多个子词,且这种差异与种族、性别相关的姓名元数据分布不均。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face