AI自主智能体的全面概览：构建、应用、评估全方位覆盖，人大高瓴文继荣等32页综述
在当前的AI时代，自主智能体被认为是通向通用人工智能（AGI）的一条有前途的途径。自主智能体指的是能够通过自主规划和指令来完成任务的实体。在早期的开发模式中，智能体的行动策略主要基于启发式，并在与环境的交互中逐步改进然而，在无限制的开放环境中，自主智能体的行动往往难以达到人类的熟练水平近年来，大语言模型（LLM）取得了巨大的成功，并展现出实现类人智能的潜力。由于其强大的能力，LLM被越来越多地用作创建自主智能体的核心协调者，并出现了各种各样的AI智能体。这些智能体通过模仿类人的决策过程，为更复杂和适应性更
在当前的AI时代，自主智能体被认为是通向通用人工智能（AGI）的一条有前途的途径。自主智能体指的是能够通过自主规划和指令来完成任务的实体。在早期的开发模式中，智能体的行动策略主要基于启发式，并在与环境的交互中逐步改进
然而，在无限制的开放环境中，自主智能体的行动往往难以达到人类的熟练水平
近年来，大语言模型（LLM）取得了巨大的成功，并展现出实现类人智能的潜力。由于其强大的能力，LLM 被越来越多地用作创建自主智能体的核心协调者，并出现了各种各样的AI智能体。这些智能体通过模仿类人的决策过程，为更复杂和适应性更强的AI系统提供了一条可行的路径
基于LLM的自主智能体一览，包括工具智能体、模拟智能体、通用智能体和领域智能体
对于已经出现的基于LLM的自主智能体进行整体分析，在当前阶段非常重要。这样做可以全面了解该领域的发展现状，并且对未来的研究提供启发，具有重要意义
在这篇文章中，中国人民大学高瓴人工智能学院的研究人员对基于LLM的自主智能体进行了全面调查，并关注了它们的构建、应用和评估三个方面
请点击以下链接查看论文：https://arxiv.org/pdf/2308.11432.pdf
为了构建智能体，研究者提出了一个由四部分组成的统一框架。这四部分分别是配置模块，用于表示智能体的属性；需要进行改写的内容是：记忆模块，用于存储历史信息；重新编写的内容是：设计模块，用于制定未来行动策略；以及行动模块，用于执行规划决定。在介绍了典型的智能体模块之后，研究者还总结了常用的微调策略，通过这些策略来增强智能体在不同应用场景中的适应性
研究者在接下来的内容中概述了自主智能体的潜在应用，并探讨了它们对社会科学、自然科学和工程学领域的增益。最后，讨论了自主智能体的评估方法，包括主观和客观评估策略。下图展示了文章的整体架构
图源：https://github.com/Paitesanshi/LLM-Agent-Survey
基于 LLM 的自主智能体构建
为了提高基于LLM的自主智能体的效率，需要考虑两个方面：首先，设计一个能够更好利用LLM的架构；其次，有效地学习参数的方法
智能体架构设计：本文提出了一个统一的框架来总结之前研究中提出的架构，整体结构如图2所示，它由分析（profiling）模块、需要进行改写的内容是：记忆模块、重新编写的内容是：设计模块以及需要重新写作的是：动作模块组成
总结而言，重写内容为：分析模块的目的是识别智能体的角色；记忆和重新编写的内容是：设计模块可以将智能体置于动态环境中，使其能够回忆过去的行为并计划未来的行动；需要重新写作的是：动作模块负责将智能体的决策转化为具体的输出。这些模块中，重写内容为：分析模块对记忆和重新编写的内容是：设计模块产生影响，而这三个模块共同影响需要重新写作的是：动作模块
重写内容为：分析模块
自主智能体通过特定角色来执行任务，例如程序员、教师和领域专家。重写内容为：分析模块旨在表明智能体的角色是什么，这些信息通常被写入输入提示中以影响 LLM 行为。在现有的工作中，有三种常用的策略来生成智能体配置文件：手工制作方法；LLM-generation 方法；数据集对齐方法。
需要进行改写的内容是：记忆模块
需要进行改写的内容是：记忆模块在 AI 智能体的构建中起着非常重要的作用。它记忆从环境中感知到的信息，并利用记录的记忆来促进智能体未来的动作。需要进行改写的内容是：记忆模块可以帮助智能体积累经验、实现自我进化，并以更加一致、合理、有效的方式完成任务。
重新编写的内容是：设计模块
当人类面临复杂任务时，他们首先将其分解为简单的子任务，然后逐一解决每个子任务。重新编写的内容是：设计模块赋予基于 LLM 的智能体解决复杂任务时需要的思考和规划能力，使智能体更加全面、强大、可靠。本文介绍了两种重新编写的内容是：设计模块：没有反馈的规划以及有反馈的规划。
需要重新写作的是：动作模块
需要重新写作的是：动作模块的目的是将智能体的决策转化为具体的结果输出。它直接与环境进行交互，决定智能体完成任务的有效性。本节将介绍动作目标、策略、动作空间和动作影响
本章除了上述的四个部分之外，还会介绍智能体的学习策略。这些策略包括从示例中学习、从环境反馈中学习以及从与人类的互动反馈中学习
请参考表1，其中列出了之前的工作和本文的分类法之间的对应关系
基于 LLM 的自主智能体应用
本章将讨论基于LLM的自主智能体对社会科学、自然科学和工程领域的革命性影响
例如，可以利用基于LLM的智能体来设计和优化复杂的结构，如建筑物、桥梁、水坝和道路等。之前，研究人员提出了一个交互式框架，让人类建筑师和AI智能体在3D模拟中共同构建结构环境。交互式智能体能够理解自然语言指令、放置模块、寻求建议，并结合人类的反馈，展示了在工程设计中人机协作的潜力
在计算机科学和软件工程领域，基于LLM的智能体具有自动化编码、测试、调试和文档生成的潜力。研究者提出了ChatDev，这是一个端到端的框架，多个智能体通过自然语言对话进行沟通和协作，以完成软件开发生命周期。ToolBench可以用于代码自动补全和代码推荐等任务。MetaGPT可以扮演产品经理、架构师、项目经理和工程师等角色，内部监督代码生成并提高最终输出代码的质量等等
以下是基于LLM的自主智能体的代表性应用的列表：
基于 LLM 的自主智能体评估
本文将讨论两种常用的评估策略：主观评估和客观评估
需要重写的内容是：主观评估是通过人类使用互动、评分等多种方法对基于LLM的智能体的能力进行测试。通常情况下，参与评估的人员是通过众包平台招募的。然而，一些研究者认为众包人员的能力存在差异和不稳定性，因此也会使用专家注释来进行评估
在当前的一些研究中，我们可以使用LLM智能体作为主观评估者。例如，在ChemCrow研究中，EvaluatorGPT通过指定等级来评估实验结果，该等级既考虑任务的成功完成，又考虑基本思维过程的准确性。又比如，ChatEval组建了一个基于LLM的多智能体裁判小组，通过辩论来评估模型的生成结果
与主观评估相比，客观评估具有多种优势。客观评估是指使用定量指标来评估基于LLM自主智能体的能力。本节将从指标、策略和基准的角度回顾和综合客观评估方法
在评估过程中，我们可以将这两种方法结合起来使用
以下是以前的工作与这些评估策略之间的对应关系的总结：
请参考原论文以了解更多内容
Postman是一套面向API全生命周期的开发与测试平台，可在Mac上发送和调试多种协议请求，管理集合、环境及认证信息，并完成脚本测试、模拟服务、监控、文档发布和团队协作。它适合开发、测试及运维人员使用，提供个人免费方案。
Docker Desktop 是 Docker 官方为 Mac 提供的容器开发环境，集成 Docker Engine、命令行工具、Compose、Build、Kubernetes 与图形化管理界面。
Android Studio 是 Google 面向安卓应用开发提供的官方集成开发环境，基于 IntelliJ IDEA 构建。它整合智能代码编辑、Gradle 构建、界面预览、设备模拟、性能分析、调试测试及 APK 分析等工具。
Xcode 是苹果面向 Mac 提供的官方集成开发环境，将代码编辑、项目构建、SwiftUI 实时预览、设备模拟、自动化测试、断点调试、性能分析和应用分发整合在同一套工作流中，适合开发与维护 iPhone、iPad、Mac、Apple Wa
JetBrains WebStorm 是面向 JavaScript、TypeScript 和现代 Web 技术的专业集成开发环境，可智能理解项目结构，提供代码补全、重构、错误检查、运行调试、测试及 Git 工具。
PhpStorm 是 JetBrains 推出的专业 PHP 集成开发环境，可在 Mac 上完成代码编写、智能检查、重构、调试、测试和数据库管理。它支持主流 PHP 框架、Composer、Git、Docker 与远程解释器。
JetBrains PyCharm 是面向 Python 开发者的集成开发环境，提供智能补全、代码检查、重构、调试、测试、版本控制及虚拟环境管理功能。Mac 版兼容 Intel 与 Apple 芯片，核心功能可免费使用。
IntelliJ IDEA 是 JetBrains 推出的专业集成开发环境，重点服务于 Java、Kotlin 与 JVM 项目开发。软件集成代码补全、静态检查、重构、调试、测试、版本控制及构建工具，并可借助插件扩展语言和框架支持。
Visual Studio Code 是微软提供的免费代码编辑器，支持 macOS，并为 Intel 与 Apple 芯片 Mac 提供适配版本。软件集代码编辑、调试、Git 源代码管理、集成终端和扩展市场于一体。
REAPER是Cockos开发的数字音频工作站，提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片，支持AU、VST、VST3、CLAP等插件格式，并提供高度可定制的工作流程。
Adobe Audition 是面向播客、影视后期、音乐制作及内容创作者的专业音频工作站，提供波形精修、多轨录制与混音、频谱编辑、降噪修复、响度匹配和效果处理工具，并可与 Adobe Premiere 协同完成视频声音制作。
Pro Tools 是 Avid 推出的专业数字音频工作站，覆盖多轨录音、无损剪辑、MIDI 编曲、插件处理、自动化混音及声音与画面同步等工作。它拥有 Intro、Artist、Studio 和 Ultimate 等方案。
PixPix 是面向品牌、卖家和内容团队的在线 AI 图片视频创作平台，提供图视频 Agent、无限画布、图片生成、视频生成、自然语言编辑及商品套图、产品精修和带货视频等电商工具。
Postman 是面向 API 全生命周期的开发与协作平台。Windows 桌面版可用于构建和发送 HTTP、GraphQL、gRPC、WebSocket、MQTT 等请求，并提供环境变量、集合、脚本测试、模拟服务、监控、文档及团队工作区等
Docker Desktop 为 Windows 开发者提供集成式容器环境，内置 Docker Engine、命令行工具、Compose、Build 与 Kubernetes 等组件，可在本机完成镜像构建、容器运行、日志查看和资源管理。
Android Studio 是 Google 面向 Android 应用开发提供的官方集成开发环境，以 IntelliJ IDEA 为基础，集成智能代码编辑、Gradle 构建、设备模拟、界面预览、调试测试及性能分析工具，
WebStorm 是 JetBrains 面向 JavaScript、TypeScript 和现代 Web 技术打造的集成开发环境。它提供项目级代码分析、智能补全、安全重构、导航搜索，并集成调试、测试、终端、Git 与常用前端工具，
PhpStorm 是 JetBrains 面向 PHP 与现代 Web 开发打造的专业集成开发环境，提供代码补全、静态检查、重构、调试、测试、数据库、版本控制及前端语言支持。Windows 用户可直接下载安装程序，
PyCharm 是 JetBrains 推出的 Python 集成开发环境，提供智能代码补全、错误检查、重构、调试、测试、Git、终端及 Jupyter Notebook 支持。统一版安装后可体验 30 天 Pro 功能，
JetBrains IntelliJ IDEA 是以 Java、Kotlin 和 JVM 项目为核心的专业集成开发环境，提供智能补全、代码检查、安全重构、调试、测试、版本控制及构建工具集成。统一发行版的核心功能可免费用于商业和非商业项目，
Visual Studio Code 是微软推出的免费代码编辑器，Windows 版集成智能补全、代码导航、调试、终端和版本控制，并可通过扩展添加语言、格式化及远程开发能力。它启动较快、配置灵活，
REAPER 是 Cockos 推出的数字音频工作站，适用于录音、MIDI 编曲、音频编辑、混音、母带制作及声音设计。软件安装包小巧，支持多轨录制、灵活路由、自动化、第三方插件和脚本扩展，并提供完整功能的 60 天免费评估期。
Adobe Audition 是面向播客、影视后期、广播与音乐制作的专业音频工作站，提供波形编辑、多轨混音、频谱分析、录音、降噪修复和效果处理等功能。Windows 版通过 Adobe Creative Cloud 安装和管理，
Pro Tools 是 Avid 推出的专业数字音频工作站，提供多轨录音、音频剪辑、MIDI编曲、插件处理、自动化混音及影视声音制作能力。它适合音乐人、录音师、制作人和音频后期团队使用，并提供免费入门版、订阅方案及永久授权选择。