跳到正文
AI NEWS JOURNAL
AI, IN PERSPECTIVE

搜索 AI 资讯

检索标题、摘要与正文,把分散的信息连起来。

按发布时间排序

令牌置信度只是链长吗?对推理轨迹的信号处理审计

arXiv:2610.36709v1 发布类型:新 摘要:推理型语言模型通过撰写长长的思维链条来解答数学问题,而针对每个问题采样多条链条并以多数投票的方式提高准确率,却会大幅增加生成文本的开销。一种常见的降本方法是根据模型对其所写每个标记的置信度为每条链条打分,这里的“标记”指一个词或词的一部分。该方法将这种置信度在滑动窗口内(2048个标记)进行平均,并依据最低平均值决定保留或终止链条。我们将逐标记记录的置信度视为一种类似于音频或无线电信号的信号,并借助频谱分析、统计检验等标准信号处理工具来检测其中是否出现突变。我们从……中为500道题目各采样了16条链条。

事件进展与其他报道

Conceptizer:仅靠下一个标记预测并不够

arXiv:2610.33027v1 发布类型:新 摘要:下一个标记预测(NTP)仅奖励紧随其后的那个标记,而对所有其他可能的候选标记均予以惩罚。然而,自然语言往往存在多种表达相同意义的方式。我们提出了一种名为 Conceptizer 的训练框架,它在下一个标记预测的基础上,额外引入了针对语义的奖励机制。Conceptizer 采用一个固定且与模型无关的约 9,000 个概念词汇表,该词汇表由上下文中的同义词构建而成,用以作为语义的基本单位,与作为文本基本单位的标记并列使用。它将每个下一个标记的分布映射为一个概念分布,并在目标语义的所有可能表述之间共享相应的奖励。这一方法能够在不增加模型参数的前提下,提供概念级别的训练信号。在应用于包含 10 亿至 80 亿参数的三类模型时,Conceptizer 实现了最低的保留集 NTP 对数困惑度。

事件进展与其他报道

潜在一致性:前沿语言模型的概率判断是否遵循全概率定律?

arXiv:2610.31833v1 发布类型:新 摘要:LawZero 的 Scientist AI 通过一种目标函数训练预测器,使其逼近贝叶斯后验分布,该目标函数会惩罚潜在解释之间概率不一致的情况。我们探究当前处于前沿水平的语言模型——尽管未经过此类训练——是否在零样本条件下已在此意义上保持一致性:当隐变量 z 必须从上下文中的记录中推断时,其概率判断是否满足全概率公式 $P(X)=\\sum_z P(z)P(X|z)$?在单独的单轮调用中,模型被要求给出 $P(X)$、关于隐变量各状态的 $P(z)$,以及 $P(X|z)$;因果家族还对 $P(y|do(x))$ 和后门调整施加了同样的检验。每个查询都配有精确的真值概率,且部分条目以三种不同的表述方式分别提出,以进行区分

事件进展与其他报道

谷歌AI搜索功能重创在线出版业:流量锐减、诉讼频发、补偿机制初探

2024年谷歌推出AI概览(AI Overviews),2025年5月上线AI模式(AI Mode),导致多家主流媒体来自谷歌的搜索流量显著下滑——《纽约时报》三年内搜索流量占比从44%降至35.5%,DCN成员中19家在2025年5–6月遭遇1%–25%流量损失,DMG Media称点击率最高下降89%。 publishers发起多起诉讼但均被美国法官驳回;谷歌随后推出退出选项、增强来源展示,并启动含400家媒体的新闻AI试点及内容付费测试计划。

Google’s AI search changes upended online publishing

推荐理由:该报道系统梳理了谷歌AI搜索功能对出版生态的结构性冲击,涵盖时间线(2024–2025)、实证数据(第三方机构统计)、多方反应(出版商、监管方、法院、非营利组织)及最新应对(退出机制、来源优化、许可与付费试点),信息密集且具时效性与政策相关性。

事件进展与其他报道