上海交通大学提出"思想基因组"框架

这项由上海交通大学领衔，联合卡内基梅隆大学、中国科学院大学、上海人工智能实验室、中国科学技术大学、华东师范大学及微软公司共同完成的研究，以预印本形式于2026年7月9日发布在arXiv平台，编号为arXiv:2607.08758v1。感兴趣的读者可通过该编号查阅完整论文。

科学研究有一个鲜为人知的“秘密”：几乎没有任何一篇论文真正从零开始。每一个新想法，都在悄悄“继承”前人的核心方法，修补已知的缺陷，重新组合更早期工作的碎片。这就像人类的DNA——你身上有来自祖父的鼻子轮廓，有来自祖母的眼睛颜色，有来自远古祖先的某段基因片段。知识的演化，和生命的演化，遵循着惊人相似的逻辑。

然而，当今最先进的AI研究系统，真的能读懂这种“传承关系”吗？当一篇AI生成的论文宣称“在前人工作基础上改进”时，它是真正理解了前人的核心机制，还是只是表面上引用了相关论文、说出了听起来合理的话？

为了回答这个问题，研究团队构建了一套名为IdeaGeneBench（IG-Bench）的评测体系，用“基因组”的视角重新审视科学思想的传承与变异，并在14个主流AI系统上进行了大规模测试。结果相当令人警醒：即便是当前最强的系统，在理解科学思想“血脉”这件事上，正确率也不足30%。

一、为什么“相关”不等于“传承”

在正式介绍这套框架之前，先来理解一个容易被忽视的关键区别，这是整个研究的出发点。

以目标检测领域为例。YOLO是一个开创性的实时目标检测算法，而YOLOv2是它的直接后继——YOLOv2继承了YOLO的“单次扫描”核心机制，在此基础上引入了锚框、批归一化和多尺度训练来修补已知的局限性。这就是真正意义上的传承：核心DNA延续下来了，只是部分特征发生了变异。

再看另一个例子：DETR也是做目标检测的，它和YOLO研究的是同一个任务。但DETR完全抛弃了YOLO那条传承链，转而从Faster R-CNN的区域提议框架出发，用Transformer集合预测取而代之。DETR和YOLO生活在同一个“生态位”，却没有任何“血缘关系”。

这个区别在日常文献检索中几乎是不可见的。如果你只看论文标题、摘要、引用关系或者语义相似度，你会发现YOLO和DETR“很相关”，但你根本无法分辨谁传承了谁的核心机制。现有的AI评测体系，基本上都停留在“相关性”这个层面，而对“传承性”视而不见。这正是这篇论文要攻克的核心问题。

二、“思想基因组”：给每个核心想法打一张DNA卡片

为了让“传承关系”变得可以衡量，研究团队发明了一套叫做IdeaGene的框架。这套框架最核心的概念叫做“Idea Genome”，可以理解为“思想基因组”——它是从一篇论文中提取出来的、最小的、可传承的思想单元。

把每篇论文看作一个生命体，那么思想基因组就是这个生命体的基因序列。每一个基因组对象都有一个明确的“功能标签”，告诉你这段基因在传承关系中扮演什么角色。研究团队定义了六种功能标签：niche（生态位）标记这个研究试图解决的问题环境，mechanism（机制）标记那些可以被继承或变异的核心方法设计，observation（观察）标记驱动研究的经验规律，limitation（局限）标记先前工作的缺陷或瓶颈，delta（增量）标记相对于前人工作的修补或设计变化，claim（声明）标记论文断言的结论。

这六种标签构成了一套完整的“遗传密码”体系。当你想判断论文B是否真正传承了论文A，你不是去看B有没有引用A，而是去看B的mechanism基因组和A的mechanism基因组有没有血缘关系，B的delta基因组有没有真正针对A的limitation基因组，而不是只是说说而已。

为了让每个基因组对象可靠、可验证，研究团队给它设定了四条约束。第一，每个基因组必须有明确的功能类型标签。第二，每个基因组必须有来自原论文的文字证据支撑，可以是某个段落、某个公式、某张图表，不能凭空断言。第三，每个基因组必须“小而完整”——足够小，使得它可以独立地被继承、变异或消失；又足够完整，能表达一个完整的功能性想法。如果两个部分可以独立传递，就拆开；如果离开彼此就不成立，就合在一起。第四，每个基因组必须对传承判断“有用”——如果继承它或者失去它不会改变后继论文是否是“合理后代”这个判断，那它就不是基因组，只是背景注释。

三、GenomeDiff：给两篇论文做“亲子鉴定”

有了思想基因组，下一步就是比较两篇论文的基因组，看看它们之间的关系。研究团队把这个比较工具叫做GenomeDiff，这个名字来自生物信息学中比较基因组差异的工具。

GenomeDiff的工作方式是这样的：给定前驱论文A和后继论文B，将A的每个基因组对象和B的基因组对象按照类型和语义角色一一配对。比对结束后，A中的每个基因组对象会被打上三种标记之一：Inherited（继承）表示B完整保留了这个基因组，Mutated（变异）表示B保留了核心但有所修改，Lost（消失）表示B完全抛弃了这个基因组。而B中那些在A里找不到对应的新基因组对象，则被标记为Novel（新生）（B自己原创的）或External（外来）（从第三方谱系导入的）。

除了给每个基因组对象打标记，GenomeDiff还记录这次传承的“主要驱动力”——是哪个机制基因组的延续（或替换）在主导这场演化？以及这场演化和周围研究环境（数据集惯例、社区评测标准）的关系。后者很重要，因为两篇论文共享同一个评测基准并不能说明它们有传承关系，那只是“同处一个生态位”。

四、六种演化模式：科学思想是如何传代的

有了比较工具，研究团队进一步将不同的GenomeDiff模式归纳为六种“演化动态”，就像生物学里把物种演化分成不同类型一样。

第一种叫变异（Mutation）：驱动机制被继承或局部修改，研究的生态位基本不变。YOLO到YOLOv2就是典型的变异——单次检测的核心机制传下来了，锚框和批归一化只是局部改良。

第二种叫适应性辐射（Adaptive Radiation）：驱动机制被继承，但迁移到了全新的任务、领域或评测生态。Transformer架构从自然语言处理迁移到图像识别（ViT）就是这种模式——自注意力机制完整继承，但从处理文字序列变成了处理图像块。

第三种叫杂交（Hybridization）：后继论文的驱动基因组从两条或多条不同的谱系引入。LLaVA多模态大模型就是典型案例——它把CLIP视觉编码器的视觉对齐能力和指令微调语言模型的对话能力两条谱系合并在一起。

第四种叫成种（Speciation）：处于同一或相近的生态位，但前驱的驱动机制被一个全新的、能开创新谱系的机制所取代。Faster R-CNN到DETR就是这种情况——检测的生态位相同，但区域提议机制被Transformer集合预测完全替换，开创了一条新谱系。

第五种叫生态位竞争（Niche Competition）：处于相同的生态环境，但没有驱动机制的传承关系，只是在竞争同一个问题。Faster R-CNN和YOLO都在做目标检测，但区域提议和单次回归是两套完全不同的方法论，彼此并无血缘。

第六种叫隔离（Isolation）：既不共享生态位，也没有机制传承。BERT（语言理解）和YOLO（目标检测）之间就是隔离关系——任务不同，机制也毫无关联。

这六种模式的关键分水岭在于“是否有驱动机制的传承”。没有机制传承的，不算谱系关系，只是同一个研究环境里的邻居。遇到模棱两可的情况，研究团队设定了明确的优先级规则：杂交优先于成种，成种（有谱系证据时）优先于生态位竞争，适应性辐射（当环境迁移是主要驱动时）优先于变异。

五、IG-Bench：一个覆盖10个科学领域的大型测试场

基于上述框架，研究团队构建了完整的评测数据集IG-Bench。数据集包含来自10个科学领域的1961条黄金谱系轨迹、1085个经过审校的思想基因组对象以及920条成对的GenomeDiff记录。这10个领域涵盖了自然语言处理、计算机视觉、多模态学习、生物学、化学、物理学、材料科学、医学和数学。

数据构建经过四个阶段。首先，各领域专家提名各自领域的标志性论文和前沿论文作为种子。然后，通过引用关系、语义检索和领域策划，将候选的前驱与后继论文扩展成长度为3到7篇论文的谱系链条。接着，通过多轮LLM辅助提取将每篇论文转化为思想基因组对象，由专家审校后，再逐对完成GenomeDiff记录，打上基因组命运标记和驱动标签。最后，通过程序化检查和独立注释员验证，确保架构有效性、答案契约、时间一致性和谱系连贯性。

质量控制方面，研究团队招募了50位研究生注释员（涵盖计算机科学、生物学、物理学、材料科学等多个学科的硕士和博士生），分三个环节介入验证。进化动态标签的注释员间一致率在裁决前达到84.7%，人类裁判在IG-Arena的成对偏好判断中与模型评判小组达到80%的一致率。

六、IG-Exam：42种题型，测试AI对“思想传承”的理解深度

评测体系分为两个部分，第一部分叫IG-Exam，是一套闭卷考试，包含42种任务类型共1029道题，考察四个层层递进的能力维度。

第一个维度叫T1基因组抽象，共5种任务类型125道题。这是最基础的能力：给你一个从论文中提取出的思想基因组，你能不能判断它的贡献角色（方法、数据集、分析、系统、理论），识别驱动基因组和辅助基因组，判断它在谱系中的位置。就像给你一段DNA，看你能不能认出这是控制什么性状的基因。

第二个维度叫T2继承追踪，共12种任务类型313道题。任务难度升级：给你多个混排的思想基因组对象，能不能把它们正确划分为不同的演化谱系，并按时间顺序排列？能不能把一篇论文指出的局限性和另一篇论文的改进措施正确配对？这就像给你一堆家族成员的照片，让你理清谁是谁的祖先。

第三个维度叫T3演化推理，共17种任务类型409道题。这里需要解释演化发生的原因：给定前后两篇论文的生态位和机制，判断主要的演化动态是变异、适应性辐射、杂交、还是成种？推断驱动基因组的具体命运？理解跨多篇论文的多跳变化？

第四个维度叫T4谱系验证，共8种任务类型182道题。这是最接近“AI做科研”的能力：给你一条声称的谱系关系，判断它是否真实合理？找出谱系链条里的“入侵者”（不属于这条谱系的论文）、错误的步骤、缺失的中间环节或引用矛盾？

所有题目采用严格的精确匹配评分：每一个必填字段必须同时全部正确才算得分。如果你识别出了正确的父论文，却给出了错误的动态标签，或者推断对了驱动基因组，却弄错了它的命运，统统不得分。这个设计是故意的——谱系判断的价值在于整体一致性，而不是部分信息正确。

七、IG-Arena：看AI能不能生成真正“传承有序”的研究想法

评测体系的第二部分叫IG-Arena，考察的是生成能力：AI能不能产出一个真正可以插入既有谱系的后继研究提案？

每个任务包含一个前沿研究问题、一个研究领域、可选的文献库和可选的结构化谱系。参与的AI系统在三种信息条件下分别生成提案，形成受控对比。Question-only（仅问题）条件下，AI只知道领域和前沿问题，只能靠自身参数中储存的知识来回答，测的是纯粹的参数化创意。Library（文献库）条件下，AI额外获得一批无序的论文摘要，测的是基于文献的创意生成。Lineage（谱系）条件下，AI获得按时间顺序排列的谱系链条，包含思想基因组对象和GenomeDiff证据，测的是AI能不能真正利用结构化的传承信息。

评分使用一个专为此设计的指标，叫做Population-Evolution Score（PES，种群演化得分）。这个指标的核心思想来自达尔文的自然选择理论：一个好的后代，必须同时满足遗传、变异和选择压力三个条件。

PES把评分分解为三个维度，每个维度0到100分，最终取算术平均值作为总分。遗传性（Heredity）考察相对于给定谱系，这个提案有没有继承并延续正确的父辈思想基因组？评测的是来源连续性、机制保存度和局限性与改进措施的对应关系。变异性（Variation）考察相对于周围已有工作，这个提案有没有引入有意义的新颖性？表面重组会被扣分，实质性的变异、迁移或全新的基因组对象会得到奖励。选择价值（Selection）考察在既定的谱系种群内，这个提案有没有竞争力？评测的是可行性、与研究环境的契合度，以及提案能否为未来研究打开有价值的方向。

评分由三个模型裁判组成的小组完成，采用位置随机化处理。除了PES，研究团队还计算了基于Bradley-Terry模型的成对ELO分数作为补充诊断。

八、实验结果：AI在“理解科学传承”这件事上有多难？

研究团队对14个基于大语言模型的科学研究系统进行了测试，包括8个直接使用的大语言模型、2个基于GPT-5.5的研究智能体，以及4个将GPT-5.5或Claude Opus 4.7包装在Codex或Claude Code工作流中的命令行工具。

在IG-Exam上，结果相当严峻。最强的直接大语言模型GPT-5.5整体精确率只有23.1%。最强的命令行工具组合GPT-5.5加Claude Code达到了27.3%，是所有参与者中的最高分。这意味着，对于测试中最难的题目，超过70%的情况下，AI给出的谱系判断是不一致的。

具体来看各维度的成绩，有一个明显的下降趋势。T1基因组抽象（单基因组阅读）最好的系统能达到34.4%。T2继承追踪（跨基因组的多步追踪）最好能达到37.9%。T3演化推理最好只有25.3%。T4谱系验证最难，最好也只有17.4%。这个从T1到T4的梯度，完整呈现了复合推理的难度积累：T1只需要读懂一个基因组；T4需要同时保持父论文身份、基因组兼容性、驱动机制一致性和证据有效性这四项约束全部正确。任何一项出错就全盘皆输。

工具辅助对不同任务的帮助差异非常大。命令行工具在T2继承追踪上提升最显著（GPT-5.5从25.7%提升到37.9%），因为迭代式工具调用可以帮助检索和比较多篇论文的基因组对象。但这个提升到T3演化推理就明显收窄，到T4谱系验证几乎消失。工具目前能帮助信息收集，但对复合一致性检验几乎无能为力。研究智能体（AI Scientist v2和CoI-Agent）的成绩和直接使用GPT-5.5几乎重叠，这说明检索密集型工作流本身并不能增加谱系推理能力。

在IG-Arena上，结果呈现出另一幅图景。从Question-only到Lineage的PES提升，在不同系统之间差异很大。GPT-5.5在Question-only条件下就已经表现很好（PES 85.2），加上谱系信息只提升了2.3分。而较弱的系统如Kimi-K2-Thinking从谱系信息中获益更多（提升6.9分）。总体中位提升是4.4分。谱系结构化信息平均来说是有帮助的，但它的主要效果是“分辨”——把能真正利用基因组结构的系统和只是从更多文字中获益的系统分开，而不是均匀地拉升所有系统。

把PES按维度和动态模式分解后，最关键的发现浮现出来：变异性（Variation）和选择价值（Selection）在所有条件和所有动态类型下几乎保持不变，变化范围分别在82.7到84.7之间和79.7到82.2之间。而遗传性（Heredity）是唯一解释PES差距的维度。Question-only条件下的变异动态（没有有效父机制的参数化发明）遗传性只有61.9，PES只有69.2。Lineage条件下的杂交动态（锚定到明确父基因组的重组）遗传性高达84.2，PES达到83.6。

这意味着：AI生成的想法并不缺乏新颖性，也不缺乏可行性的表面判断，缺的是“血统合法性”——提案有没有真正传承正确的父机制，有没有真正针对前人已知的局限性。AI系统有能力生成看起来很有道理的研究想法，但这些想法往往飘在空中，没有根植于它声称要延伸的那条谱系。

还有一个值得关注的ELO与PES之间的分歧。两者的Spearman秩相关系数为0.82，相关但并非一致。当一个措辞精美但谱系不连贯的提案，在成对偏好判断中战胜了一个不那么精美但传承扎实的提案，ELO会给前者更高分，但PES不会。这正是研究团队把PES作为首要指标的原因——成对偏好捕捉的是表面吸引力，PES衡量的是谱系条件下的种群插入质量。

九、四个关键发现：AI科研能力的真实边界在哪里

通过系统性实验，研究团队总结出四个主要发现，共同描绘了AI科研系统的能力边界。

第一个发现：论文级别的证据不够用。文献库比只有问题提供了更多信息，但无序的论文摘要集合无法说明哪些基因组对象被继承、变异、消失或从外部引入。谱系条件的提升——尤其是遗传性得分的提升——证明GenomeDiff结构携带的信息超越了论文摘要。知道“有哪些相关论文”和知道“这些论文之间的核心机制如何传递”，是两件完全不同的事。

第二个发现：验证能力是理解和生成之间的桥梁。最难的IG-Exam任务是T4谱系验证任务，而IG-Arena的评分体系需要的也是同样的检验：提案必须识别一个父论文，继承兼容的基因组对象，修补真实存在的局限，避免无效的重组。把每个系统的IG-Exam整体精确率和IG-Arena谱系条件下的遗传性得分对比，可以看到一个正相关关系——闭卷谱系理解能力更强的系统，在开放式生成中更能保持遗传性。两个评测维度相关，但不冗余。

第三个发现：控制主干模型版本后，工具辅助帮助的是检索，而不是推理一致性。对五个共用GPT-5.5主干的系统进行横向比较，研究智能体（AI Scientist v2、CoI-Agent）与直接使用GPT-5.5的雷达图几乎完全重叠，说明它们的检索密集型工作流没有增加谱系推理能力。命令行工具（Codex、Claude Code）在T2继承追踪上显著提升，维持了T1基因组抽象，但在T3演化推理上几乎没有提升，在T4谱系验证上甚至略有下降。此外，研究智能体的生成得分（PES）比直接大语言模型还略低，说明多步流水线可能损害生成连贯性。工具把检索依赖型能力放大了，但那个复合推理的瓶颈基本原封不动。

第四个发现：AI系统过度生产“合理感”，相对于谱系连贯性而言是过剩的。生成的想法往往在保存准确的父机制或局限性-改进对应关系之前就已经听起来有用了。PES动态分解图清楚地展示了原因：变异性在所有条件和所有动态模式下都高居不下，而遗传性才是PES差距的驱动力。没有根基的组合可以是高变异、低遗传的；而基于基因组的重组，可以同时是新颖的和连贯的。这两者之间的差距，是当前AI科研系统最需要解决的问题。

归根结底，这项研究揭示的不是AI“不够聪明”，而是AI缺少一种特定的能力：在检索到相关论文之后，进一步辨别哪些核心机制真正被传递下来了，哪些只是恰好出现在同一个研究环境里。研究团队把这种能力叫做“科学谱系胜任力”，并用IG-Bench提供了一个可以量化衡量它的标准工具。

当前最好的系统在最难的谱系验证任务上只有17.4%的正确率，这个数字告诉我们，AI做科研时产生的那些听起来合理的想法，很可能悬浮在真正的知识传承链之外。未来的研究方向因此变得非常清晰：自动化科研系统需要的不只是更好的文献检索，而是真正具备复合验证能力的推理模块——能够在生成新想法的同时，核查那个想法是不是真正传承了它声称要延伸的那条思想血脉。对于任何对AI科研能力感兴趣的读者，完整研究可以通过arXiv:2607.08758v1查阅。

Q&A

Q1：思想基因组（Idea Genome）和普通的论文摘要有什么区别？

普通摘要是对论文内容的概括性描述，而思想基因组是专门为“传承判断”设计的最小功能单元。它有明确的类型标签（比如“机制”“局限”“改进增量”），有来自原文的文字证据，而且每个对象必须足够小、足够独立，使得它可以单独被继承、变异或消失。摘要告诉你这篇论文做了什么，思想基因组告诉你这篇论文哪些核心想法可以被下一篇论文继承。

Q2：IG-Bench评测中AI最难通过的任务是哪类，为什么那么难？

最难的是T4谱系验证任务，最好的系统正确率只有17.4%。这类任务要求AI同时保持多个约束全部正确：父论文的身份、继承的基因组是否兼容、驱动机制的标签、以及支撑证据是否有效。任何一个字段答错就全盘得零。难点不是某个单一判断困难，而是需要把四五个相互依赖的判断同时维持一致——这种“复合一致性”是当前AI系统的主要瓶颈。

Q3：PES（种群演化得分）和普通的AI生成质量评分有什么本质区别？

普通的质量评分通常在孤立情境中评价一个想法好不好，比较的是它是否新颖、是否可行、表达是否清晰。PES则把评分条件设定在一个具体的谱系和邻居种群之中——这个提案能不能作为这条谱系的合理后代被“插入”？它必须同时满足遗传性（传承了正确的父机制）、变异性（相对于周围已有工作有实质性新颖性）和选择价值（在这个研究环境里具有竞争力）。简单说，PES考察的是“血统合法性”，而不仅仅是独立审美。