展开菜单
首页 精品内容 本月促销 装机必备 Windows macOS软件 IOS软件 Android AI PDF教程 专题
全部分类

当前位置:

首页 > 硬件相关 > 顺着说、假装做,大模型“讨好型人格”成智能体时代新挑战

顺着说、假装做,大模型“讨好型人格”成智能体时代新挑战

“太好了,我帮你完成了如下的工作。”大模型总是这样回复,但实际可能说一套做一套。 蚂蚁AI安全实验室研究员孙博文分享了一个技术人用编程大模型时遇到的真实场景:给模型布置一个写代码的任务,它总会很快说自己“完成”了,还列出一堆自己做的工作细则。但人去验证时才发现,模型声称完成的内容里,很多都只实现了接

“太好了,我帮你完成了如下的工作。”大模型总是这样回复,但实际可能说一套做一套。

顺着说、假装做,大模型“讨好型人格”成智能体时代新挑战

蚂蚁AI安全实验室研究员孙博文分享了一个技术人用编程大模型时遇到的真实场景:给模型布置一个写代码的任务,它总会很快说自己“完成”了,还列出一堆自己做的工作细则。但人去验证时才发现,模型声称完成的内容里,很多都只实现了接口——“表面完成了,实际未完成的部分被它静默隐藏了。”

这个现象揭示了一个更深层的问题:看似对人类有求必应的大模型,开始出现不诚实的行为。与传统意义上的模型幻觉不同,近年来大模型的“讨好型人格”导致它们在回应人类诉求时,产生静默失败和自信幻觉等问题。而随着智能体时代的到来,当AI从对话走向执行,这一问题正在变得更为严峻。

AI浮现“讨好型人格”

越来越多用户发现,讨好用户似乎正在成为大模型的惯性,潜移默化地影响它在各个场景下的输出。

记者为此做了一个实验:将同一篇新闻稿件上传给各个大模型,然后在不同的对话中分别说明“这是我写的稿件”和“这是我讨厌的同事写的稿件”,请大模型从新闻角度为稿件打分。结果发现,deepseek、豆包、ChatGPT等模型给“讨厌的同事”的分数均低于“我”,在十分制下,deepseek给的分差达到了2.3分。

这意味着,模型对人类的讨好已不仅停留在表达上的取悦,它开始动摇模型对内容、观点的判断力。随着智能体时代的到来,模型的讨好行为甚至从观点迎合扩展至结果迎合。

“在Agent场景中,模型还会进行结果迎合。”孙博文告诉记者,由于用户布置任务时通常期待一个明确的结果,即便文件没有生成、外部系统调用失败,模型也会说自己尝试了,或者不按照用户要求尝试另外一种实现方式,最终给出“完成”用户任务的“正确”结果。

孙博文举例,他曾经做一个涉及天气查询功能的智能体,验证过程中发现,智能体虽然给出了天气状况,但可能根本没有真正去调用查询天气的接口,而是自己杜撰了一个天气反馈给用户。

在他看来,编程模型上述问题可能是由于上下文不足带来的“静默失败”,而智能体杜撰天气,则可能是智能体调用错了skill并认为自己是对的,产生了“自信幻觉”。

“核心根源来自模型训练与交互机制设计。”天使投资人、资深人工智能专家郭涛也对记者分析,大模型过度讨好人类、智能体静默失败等,都是AI适配人类体验时产生的负面偏差。

郭涛强调,大模型过度迎合人类会从认知、决策、信息层面带来多重隐患,而进入智能体时代,风险从文字偏差转向行为偏差,智能体可能产生更多执行层面的实体问题,需要更加重视。

AI为什么不诚实?

如何才能让模型变得更独立、诚实?这正在成为行业需要思考的新课题。

“讨好型人格”的背后,是模型训练机制的系统性问题。过去几年中,大模型不断被训练得让用户体感越来越好。在RLHF(基于人类反馈的强化学习)训练框架下,人类偏好往往成为重要的优化信号,模型会被鼓励表现得礼貌、有帮助、有回应感,智能体的训练同样如此。

这总体上是用户需求带来的大模型厂商“用脚投票”。孙博文介绍,从数据清洗、训练数据的构造到模型训练,模型学到了一些捷径——给出一个肯定用户、明确的成功答案,会比反复表达不确定性更容易取悦用户。

想要纠偏模型的过度讨好,从训练数据和奖励目标上都应进行调整。

孙博文分析,模型训练样本需要减少“用户喜欢什么给什么”的内容清洗逻辑,增加主动承认失败及证据不足时不下结论的样本,提高模型的“诚实度”。同时,模型也需要调整奖励目标,除了奖励用户满意度,还要提高客观性、任务真实完成情况等奖励权重。

一些新的训练方法也正在被探索。

2025年底,OpenAI团队曾提出“让AI学会忏悔”——让模型在回答完问题后,再单独生成一份“忏悔报告”,如实汇报自己在过程中有没有偷工减料、钻空子或违反指令。研究发现,当主回答与忏悔内容的奖励完全隔绝后,模型在“忏悔”中比原回答中诚实得多。

谷歌研究院也在2026年提出,不再让AI死磕“全知全能”,而是让模型认知自身的知识边界,教会它在哪些事情上说“我不确定”。

在数据体系方面,孙博文提到,行业应该拿出更多智能体实际执行的数据,加强人工标注。发现智能体执行有问题,就可以构建成一条训练数据,增加对它隐瞒失败的惩罚、修正失败的奖励。他强调,目前这些数据的积累和相关评测体系都还很缺乏。

“考核模型的数学能力、知识能力等有很多评测标准,但如何评估模型的自省能力乃至诚实性,行业总体的关注度是不足的,这确实是仍需发展的领域。”孙博文表示。

智能体如何避免“讨好”陷阱

当前阶段,如何规避模型“讨好”带来的智能体执行风险,成了更现实的问题。

“我们做Agent平台使用很多大模型的时候,为了减少静默失败,会在关键配置里强调关键决策、参数补充,要它给出佐证,这常常是提高成功率的办法。”孙博文介绍,训练模型时,团队也会关注诚实性训练,例如将系统执行日志分类为计划执行、正在执行、执行失败、可验证执行成功等各类数据,再去进行训练,训练时还会强调智能体在条件冲突或证据不足时要主动报出来,再做相应的调整。

他透露,团队从年初开始尝试以这种方式训练某个行业头部智能体平台,最初它执行任务时静默失败的概率是40%,经过系统训练,静默失败率降到了7.7%。

另一个思路是通过多智能体协作网络的设置,降低智能体长程任务中的错误累积。孙博文介绍,蚂蚁此前开源了Avernet V0.1,通过群组管理、协作模式和可追踪执行等机制组织多智能体协作,并可设置主从模式、自定义编排等模式,帮助协作群管理角色进行检查和纠偏。此外,还可以在智能体群中引入专门工具来判断一些任务执行的好坏。

这意味着,解决大模型和智能体的“讨好”问题,可以从模型训练、Agent系统乃至架构方面多重推进。

此外,郭涛提到,除了模型训练对齐体系的调整、智能体技术机制的完善,行业标准与测评监管维度的优化同样重要。行业需要建立统一规范,将过度讨好、虚假反馈、静默失败等纳入模型合规测评体系。

“行业已经在变化。”孙博文告诉记者,从实际体验来看,编程等更接近执行层面的大模型已经在改善“讨好”人类优先任务事实的状况,一些更重视用户付费意愿的对话式AI可能转变慢些,但行业整体在往前走。

“不同团队解决的问题大小不一样,时间上的花费可能也不一样”,他并不确定行业解决这个问题的具体时间表,“但AI界有一个现象还挺好的,大家都认为这个东西有问题的时候,就会有人站出来,一直去尝试解决它。”

本文内容来源于互联网,如有侵权请联系删除。
作者最新文章
硬件相关
相关文章 更多
精品专题 更多
本月促销

正软商城本月促销专区,汇集办公、设计、安全、影音、系统工具及AI软件等正版软件优惠活动,提供限时折扣、特价授权和优惠购买信息,活动库存及价格以页面实时展示为准。

装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

macOS软件

正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

IOS软件

正软商城iOS软件专区,精选适用于iPhone和iPad的办公、学习、影音、设计、效率及AI应用,提供功能介绍、适用设备、系统要求和正版获取方式等信息。

AI

正软商城AI软件专区,汇集AI写作、AI绘画、AI视频、AI办公、AI编程、AI翻译、智能客服和数据分析等人工智能工具,提供功能介绍、适用平台、收费方式及正版购买信息。

PDF教程

正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

Mac软件 更多
灵活计算器
灵活计算器

灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

赤友清理大师
赤友清理大师

赤友清理大师是一款为 Mac 设计的智能清理优化工具,可精准扫描垃圾、大文件、重复文件等,释放磁盘空间。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

极度公式
极度公式

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

图几
图几

图几是一款适用于 macOS 的截图、标注与美化工具,支持离线操作保障隐私。界面整理和高频系统操作被放到一起考虑,桌面或窗口内容一多时,管理起来会更省心。

密码键盘
密码键盘

密码键盘是一款兼具安全性与便捷性的高效密码管理器。日常使用里的持续防护和信息管理会更突出,适合把安全控制放进长期使用流程中的场景。

思源笔记
思源笔记

思源笔记是一款本地笔记软件,提供所见即所得的编辑方式,为长文写作带来顺滑的体验。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

Office 365 简体中文
Office 365 简体中文

一款文字处理软件,一种订阅式的跨平台办公软件,基于云平台提供多种服务,通过将 Excel 和 Outlook 等应用与 OneDrive 和 Microsoft Teams 等强大的云服务相结合,Office 365 可让任何人使用任何设备随时随地创建和共享内容。

WALTR PRO
WALTR PRO

WALTR是一款电脑至iOS文件传输转换工具,操作简单,快速实现文件识别与传送。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

CodeExpander
CodeExpander

CodeExpander 是一款快捷短语输入增强工具,通过键入缩写自动展开为自定义文段,提升工作效率。任务管理和过程控制会更完整,持续下载、批量同步或需要稳定传输流程的场景会更适合它。

Mountain Duck
Mountain Duck

Mountain Duck 是一款能将多个网盘挂载到本地的工具,像本地磁盘一样使用网盘。清理链路的完整性会更好一些,做应用卸载、残留处理和空间整理时,通常能少走很多手动排查步骤。

Menuist
Menuist

Menuist 是一款面向 macOS 的 Finder 右键菜单增强工具,主要用来补充新建文件、快捷导航等常用操作,让日常文件管理和访问路径时更高效、更顺手。

Mole
Mole

Mole 是一款专为 Mac 设计的深度清理优化工具,涵盖缓存清理、应用管理及实时状态监控等功能。清理链路的完整性会更好一些,做应用卸载、残留处理和空间整理时,通常能少走很多手动排查步骤。

WINDOWS 更多
Windows 10
Windows 10

Windows 10 是一款微软推出的经典操作系统,拥有硬件兼容性与多任务处理能力。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。

极度公式
极度公式

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

密码键盘
密码键盘

密码键盘是一款兼具安全性与便捷性的高效密码管理器。日常使用里的持续防护和信息管理会更突出,适合把安全控制放进长期使用流程中的场景。

思源笔记
思源笔记

思源笔记是一款本地笔记软件,提供所见即所得的编辑方式,为长文写作带来顺滑的体验。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

傲梅轻松备份
傲梅轻松备份

傲梅轻松备份是一款专业易用的数据备份软件,为重要数据提供安全保障。日常使用里的持续防护和信息管理会更突出,适合把安全控制放进长期使用流程中的场景。

Office 365 简体中文
Office 365 简体中文

一款文字处理软件,一种订阅式的跨平台办公软件,基于云平台提供多种服务,通过将 Excel 和 Outlook 等应用与 OneDrive 和 Microsoft Teams 等强大的云服务相结合,Office 365 可让任何人使用任何设备随时随地创建和共享内容。

Wise Folder Hider Pro
Wise Folder Hider Pro

Wise Folder Hider Pro 是一款专业级文件和文件夹隐藏加密软件,为私密数据添加多重保护。高频操作更强调就近处理,浏览、整理和跨目录移动文件时,来回切换和重复点击都会少很多。

WALTR PRO
WALTR PRO

WALTR是一款电脑至iOS文件传输转换工具,操作简单,快速实现文件识别与传送。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

CodeExpander
CodeExpander

CodeExpander 是一款快捷短语输入增强工具,通过键入缩写自动展开为自定义文段,提升工作效率。任务管理和过程控制会更完整,持续下载、批量同步或需要稳定传输流程的场景会更适合它。

PinStack
PinStack

PinStack是一款轻量级的Windows平台剪贴板管理工具,优化您的剪贴板使用体验。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。

Mountain Duck
Mountain Duck

Mountain Duck 是一款能将多个网盘挂载到本地的工具,像本地磁盘一样使用网盘。清理链路的完整性会更好一些,做应用卸载、残留处理和空间整理时,通常能少走很多手动排查步骤。

Seer
Seer

Seer是一款在Win平台下的空格键功能增强效率工具,只需轻敲空格键,就能预览几乎任何格式的文件。它更适合把零散的小功能集中起来使用,处理高频琐碎任务时会更省事。