AI自己写代码让智能体进化！OpenAI的大模型有“人类思想”那味了
Air Explorer Pro是一款跨平台多网盘管理工具，可实现一站式完成不同网盘间文件的互传、搜索和同步等操作。任务管理和过程控制会更完整，持续下载、批量同步或需要稳定传输流程的场景会更适合它。
搞事情！AI“看”了一眼GitHub上人类都是怎么提交更新（commit）的，然后就模仿人类程序员修改代码……最终，这个AI还成功“调教”出了个智能体机器人：没开玩笑，这种细思极恐的事情，在OpenAI最新发布的一项研究中，就真真的发生了……原本呢，研究人员要解决的是一个遗传程序设计（GP）问题——让一个智能体机器人学会移动。（GP是演化计算中的一个特殊领域，它主要针对自动构建程序去独立解决问题。）但OpenAI剑走偏锋，把自家的大规模语言模型（LLM）放了进来，结果就是一个大大的“万万没想到”。以前在智
搞事情！
AI“看”了一眼GitHub上人类都是怎么提交更新（commit）的，然后就模仿人类程序员修改代码……
最终，这个AI还成功“调教”出了个智能体机器人：
没开玩笑，这种细思极恐的事情，在OpenAI最新发布的一项研究中，就真真的发生了……
原本呢，研究人员要解决的是一个遗传程序设计（GP）问题——让一个智能体机器人学会移动。
（GP是演化计算中的一个特殊领域，它主要针对自动构建程序去独立解决问题。）
但OpenAI剑走偏锋，把自家的大规模语言模型（LLM）放了进来，结果就是一个大大的“万万没想到”。
以前在智能体演进的过程中，人类研究员是需要参与进来做一些细节调整、确定演进方向等工作，让智能体往好的方向发展。
现在好了，这些活儿都让大模型给包揽了，自己学、自己写代码、自己去“调教”：
这事一经论文一作Joel Lehman在网络曝光，瞬间引发了网友们的大量关注：
一位程序员网友在看完后直呼“跟不上（技术）发展的步伐”了：
甚至OpenAI自己都在研究中说：
弥合了进化算法在人类思想水平运行的鸿沟。
那么这件“魔幻”的事情，AI到底是怎么办到的？
看一眼GitHub，AI自己动手敲代码
在虚拟环境中设计可移动的机器人，是遗传算法研究中很火的一个项目。
特别是Sodarace竞赛因为需要的计算量少，过程方便可视化很受欢迎。
规则很简单，由“关节”和“肌肉”组成的机器人在各种地形上赛跑。
OpenAI还特意把整个竞赛程序从专用的遗传编码改写成了Python版本，为了展示新方法对现代编程语言的通用性。
比如这样一段Python代码，就可以作为初始种子机器人。
定义好一个正方形的四个顶点关节、终点关节，相互之间都用“肌肉”连接好后，结果如下。
不过这样方方正正的结构一动都不能动，接下来就需要靠遗传算法对代码做修改。
研究团队认为，用传统遗传算法修改代码VS人类程序员自己动手，在效率上还有两点差距：
一个是软件越来越复杂，人类可以搞模块化的代码复用来应对，而目前最先进的遗传算法也无法在人类使用的编程语言上做到这一点。
另一个是几乎所有遗传算法靠的都是随机突变（mutation），而人类程序员每一次修改代码都带有目的，或者是增加功能、或者是改进效率、又或者是修复bug。
那么有没有办法让AI学习到人类是如何修改代码的呢？
还真有，所需的训练数据都存在GitHub上。
优秀的程序员每次提交代码都会写好commit描述，说清楚这一次提交修改了什么内容。
commit描述配合上提交前后代码对比的diff数据，就是AI绝佳的学习材料。
研究人员筛选出一些描述意图明确、修改的代码量不大的提交数据来训练一个GPT-3架构的AI模型。
相当于让AI向人类程序员学习了如何有目的的修改一段代码。
这篇论文所用的模型也不需要完全版GPT-3的1750亿参数那么大，最高7.5亿参数就足以。
由此得到了基础的AI模型，将在遗传算法中扮演变异算子的角色。
接下来让AI自己设计新机器人的流程总共分三步。
第一步，先用经典的MAP-Elites算法生成一组初始机器人。
这是一种QD（质量多样性）算法，可以保证机器人行为不同且质量都很高。
第二步，用第一步产生的初始数据做预训练，让AI先学会设计出训练数据分布内的机器人。
也就是开头处那张在网上惊艳了众人的动图，展示了AI如何一步步把无法移动的“方块”改造成双腿交替弹跳移动机器人。
第三步，再结合上强化学习算法做微调，让AI能根据不同地形条件生成能适应环境的机器人。
最终，研究人员选取了从最初的三个种子进化而来的机器人做效果展示。
可以看出它们的结构和移动方式都完全不同。
网友惊呼“思路清奇”
这项研究一经公布，可谓是一石激起千层浪。
许多网友都惊叹于这种“大模型+演进算法”结合的新奇方式：
做过与之相关工作的研究人员也表示，从未想过能用大模型以diffs的形式来学习突变：
而除了对研究形式和本身的讨论之外，也有网友配上了这样图：
Emmm……是有点那种味了。
团队介绍
这项研究的团队成员均来自OpenAI。
论文一作是Joel Lehman，是一位机器学习科学家。其聚焦的领域包括人工智能安全、强化学习和开放式搜索算法。
与此同时，Joel Lehman此前基于对人工智能发展的思考合写过一本科学读物《为什么伟大不能被计划出来：客观的秘密》：
而对于这项研究的下一步，Joel Lehman本人表示：
还有一个重要问题，就是模型能够多大程度上应用到其它环境中。
GP中的突变功效现在可以通过ELM大幅提高，这将激发出一系列广泛的新应用和研究方向。
那么这项研究是否也对你产生了新的启发呢？
参考链接：
[1]https://arxiv.org/abs/2206.08896
[2]https://twitter.com/joelbot3000/status/1538770905119150080?s=21&t=l8AASYjgC6RAEEimcQaFog
Shapr3D是一款面向工业设计、机械工程、建筑概念和三维打印工作流的CAD软件。Mac版采用Parasolid建模内核，支持草图约束、实体建模、工程图、可视化渲染及常见CAD格式交换，并可通过账户在多台设备之间同步项目。
REAPER是Cockos开发的数字音频工作站，提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片，支持AU、VST、VST3、CLAP等插件格式，并提供高度可定制的工作流程。
Ableton Live 是面向音乐制作人与现场表演者的数字音频工作站，提供编曲视图、独具特色的现场视图、音频录制、MIDI创作、实时变速、乐器及效果器。Mac版原生支持Apple芯片，并可连接音频接口、MIDI控制器和第三方插件。
Adobe After Effects 是面向动态图形、影视特效与视频合成的专业创作软件。它提供关键帧动画、遮罩抠像、运动跟踪、三维空间、文字动画和表达式等工具，并可与 Premiere Pro、Photoshop、Illustrator
Adobe Audition 是面向播客、影视后期、音乐制作及内容创作者的专业音频工作站，提供波形精修、多轨录制与混音、频谱编辑、降噪修复、响度匹配和效果处理工具，并可与 Adobe Premiere 协同完成视频声音制作。
Adobe Bridge 是面向摄影师、设计师及内容团队的免费数字资产管理工具，可集中预览照片、视频和 Adobe 项目文件，并利用评级、标签、关键词、元数据、筛选与收藏集完成分类检索。它还支持批量重命名、格式导出、相机导入及 Camera
Adobe Illustrator 是 Adobe 推出的专业矢量图形设计软件，适合在 Mac 上制作标志、图标、插画、包装、信息图及印刷版面。它以路径和锚点构建可无损缩放的图形，并提供钢笔、形状、文字、图像描摹、渐变、画板及生成式功能。
Adobe InDesign 是面向印刷品与数字出版物的专业版面设计软件，可在 Mac 上制作书籍、杂志、宣传册、海报、报告及交互式文档。它提供精细的文字样式、网格、母版、长文档管理和印前输出能力。
Adobe Lightroom Classic 是面向桌面摄影工作流的照片管理与后期处理软件，可将原始照片保存在本地硬盘，通过目录、关键词、评分和收藏夹高效整理图库，并提供 RAW 冲印、蒙版、镜头校正、批量同步及多格式导出等功能。
Adobe Media Encoder 是 Adobe 推出的专业音视频编码与转码工具，可通过队列、预设和监视文件夹批量完成格式转换、代理文件创建及多平台成片输出，并与 Premiere Pro、After Effects 等软件紧密协作。
Adobe Photoshop 是面向摄影师、设计师和内容创作者的专业图像处理软件，提供图层、蒙版、选区、修复、调色、文字排版、智能对象及生成式编辑等能力。Mac 版支持 Intel 与 Apple Silicon 处理器。
Adobe Premiere Pro 是面向专业视频制作的非线性剪辑软件，提供多轨时间线、调色、音频处理、字幕、代理工作流和多格式输出能力，并可与 After Effects、Audition、Photoshop 及 Frame.io 协同
Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件，支持 Windows、macOS 和 iPad 等平台，广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。
Blender 是一款免费开源、跨平台的专业 3D 创作软件，集建模、动画、渲染、视频编辑与视觉合成等功能于一体，广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎，并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统，安装包轻巧、运行流畅，依托活跃的全球开发者社区持续更新，是从初学者到专业创作者都值得选择的正版 3D 创作工具。
极度公式是一款跨平台专业LaTeX公式识别编辑软件，支持OCR公式识别和多平台编辑。和使用说明，避免使用，享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时，它能把识别后的处理步骤接得更顺，资料录入这类场景会省下不少时间。
一款文字处理软件，一种订阅式的跨平台办公软件，基于云平台提供多种服务，通过将 Excel 和 Outlook 等应用与 OneDrive 和 Microsoft Teams 等强大的云服务相结合，Office 365 可让任何人使用任何设备随时随地创建和共享内容。
Wise Folder Hider Pro 是一款专业级文件和文件夹隐藏加密软件，为私密数据添加多重保护。高频操作更强调就近处理，浏览、整理和跨目录移动文件时，来回切换和重复点击都会少很多。
CodeExpander 是一款快捷短语输入增强工具，通过键入缩写自动展开为自定义文段，提升工作效率。任务管理和过程控制会更完整，持续下载、批量同步或需要稳定传输流程的场景会更适合它。