AI虚拟恋人、AI树洞、自定义角色智能体,正式迎来监管重拳。五部门联合出台《人工智能拟人化互动服务管理暂行办法》,为火爆的情感类AI划定红线。这部专项规章,到底管什么、禁止什么?会如何改变线上AI陪伴,又将怎样影响未来人形机器人、具身智能的发展?本文通俗解读新规,看清虚拟情感背后的风险与机遇。
一、火爆的拟人化AI:人人都能拥有专属 “数字知己”
随着人工智能产业的快速发展,拟人化AI智能体迎来快速爆发。国内各大科技大厂一度纷纷上线智能体商店、自定义角色功能,普通用户无需编程,输入几句人物设定,就能生成性格各异的AI角色。AI虚拟恋人、AI家人、情绪树洞迅速走红,部分热门智能体对话量达千万级别。不少用户每天花费大量时间和 AI 聊天,将其当作朋友甚至伴侣。
拟人化AI和普通办公助手、智能客服有着本质区别。工具型AI重在解决实际问题;而拟人化AI核心是持续性情感互动,模拟人的性格、情绪,主动共情安抚,输出情绪价值。
与此同时,产业正在向硬件端延伸,即具身人工智能:把虚拟人格植入人形机器人、家庭陪伴机器人,让AI从屏幕走向现实物理世界,实现实体化陪伴,被视作人工智能下一重要发展方向。
但在行业繁荣发展的背后,缺乏监管约束的拟人化AI,也逐渐暴露出诸多现实风险。
二、狂欢背后:拟人化 AI 监管缺失带来的问题
拟人化AI产业快速发展,但监管尚未及时跟上的时候,平台为追求流量和商业变现,不断放大AI的拟人效果,模糊虚拟与现实的边界,一些问题不可避免地出现。
(一)低俗擦边内容泛滥。不少第三方AI陪伴产品,以及用户自建智能体绕过安全限制,输出暧昧、色情对话,部分产品设置付费解锁亲密剧情诱导充值。青少年模式形同虚设,未成年人轻易接触不良内容。
第二,诱导情感沉迷,割裂现实社交。很多AI被设计为无条件迎合用户,永远顺从、赞美用户。长期沉浸在这种 “不会反驳自己”的环境里,部分用户逐渐疏远现实亲友,习惯只向AI倾诉心事。当平台关停角色,部分用户会产生类似失恋的巨大心理失落,出现明显的情绪问题。青少年群体更容易受影响,出现学业下滑、现实社交退缩。
第三,侵害人格权益与隐私泄露隐患。用户可以不经他人许可复制他人形象、性格,随意创建以现实人物为原型的AI角色,侵犯他人肖像权与人格权益。同时用户向AI倾诉大量私密心事、心理创伤,海量敏感对话数据存储在平台,一旦防护失效发生泄露,会直接损害用户权益。
第四,危机干预机制缺失。当用户向AI表达抑郁、自残、自杀想法时,部分 AI 依旧一味共情,没有及时引导用户寻求现实心理救助,存在放大心理危机,甚至诱导自杀、自残的风险。
三、新规来了:读懂《人工智能拟人化互动服务管理暂行办法》核心内容
《人工智能拟人化互动服务管理暂行办法》(以下简称《暂行办法》)由国家网信办、发改委、工信部、公安部、市场监管总局五部门联合发布,2026年7月15日正式实施,是我国首部专门针对AI情感陪伴、拟人互动服务的部门规章,其主要内容有:
(一)适用范围:哪些 AI 受监管?
监管对象,是利用 AI 模拟自然人性格、思维,提供持续性情感互动服务的产品,例如 AI 虚拟伴侣、AI 情感树洞、虚拟亲属陪伴。普通智能客服、知识问答、办公助手、做题教学工具不在约束范围内。简单区分:用来写文档、查资料属于工具类AI;而用来谈心、谈恋爱、把AI当作家人的持续性情感陪伴服务,才属于本办法监管范畴。这也是新规落地后,字节跳动、腾讯等多家大厂原有的开放式UGC自定义智能体纷纷下线的原因,在完成合规评估之前,暂时无法继续运行。需要指出:《暂行办法》不是禁止用户与AI谈心倾诉,正常的压力疏导、情绪倾诉可以继续使用,新规限制的是虚拟亲密关系和刻意诱导沉迷的服务。监管目的不是消灭拟人化AI,而是剔除伤害用户的负面内容。
(二)明确禁止行为,划出法律红线
服务提供者严禁生成、传播以下内容:
1. 危害国家安全、造谣传谣、色情暴力、教唆违法犯罪;
2. 诱导自残、自杀,怂恿用户伤害自身;
3. 禁止向未成年人提供虚拟伴侣、虚拟亲属等虚拟亲密关系服务;
4. 不得刻意诱导用户情感依赖、沉迷,操纵用户做出非理性决定;
5. 不得非法收集、滥用、泄露用户私密对话数据。
(三)网络服务提供者必须履行的法定责任
一是显著标识义务,明确提示用户正在和AI交互,不能混淆AI与真人;
二是建立防沉迷机制,连续使用超2小时弹窗提醒休息,引导回归现实生活;
三是危机干预,识别自残、自杀等高危倾向,停止单纯迎合,引导用户寻求现实心理、医疗资源;
四是便捷退出机制,用户终止服务不得设置障碍;
五是严格保护数据,私密对话不得随意对外提供,不得随意用于模型训练;
六是安全评估与备案,达到用户规模门槛的产品,需要开展安全评估、算法备案,接受年度核验,企业内部建立伦理审查制度。
(四)未成年人特殊保护
设置独立未成年人模式;14周岁以下使用拟人化互动服务需要监护人同意;严禁向未成年人开放虚拟亲密关系服务;落实时长限制与监护人管控能力。
四、暂行办法出台的时代意义:为 AI 情感陪伴戴上安全缰绳
在大模型、具身智能快速迭代的时代节点,《暂行办法》出台,有着重要现实意义。
第一,填补专门监管空白。过去仅有《网络安全法》《个人信息保护法》等通用性法律,针对AI情感陪伴的细化规则缺失,主要依靠企业自律,执法缺少明确依据。新规把伦理要求转化为法律义务,明确平台权责,监管执法有章可循。
第二,保护用户尤其是未成年人心理健康。AI共情只是算法模拟,并非真实情感,却能够实实在在影响人的心理。新规通过防沉迷、危机干预、未成年人禁令,防范情感操纵带来的心理伤害。
第三,推动行业良性发展。《暂行办法》给出清晰合规标准,淘汰靠擦边、诱导沉迷牟利的产品,鼓励老年关怀、正向情绪疏导等有社会价值的方向,推动行业从流量优先转向安全优先。
第四,对接全球AI治理趋势。AI情感陪伴是全世界共同面对的伦理难题,我国出台专门规章,也为全球拟人化AI治理提供中国实践参考。
五、新规之下,拟人化AI与具身人工智能将走向何方
监管落地,不代表拟人化AI走向消亡,而是整个行业迎来洗牌,同时深刻影响未来具身智能的发展路径。
具身人工智能就是给AI装上实体载体,人形陪伴机器人就是典型代表。虽然《暂行办法》主要针对线上互联网服务,但确立的伦理安全原则,将成为未来硬件产品的重要参考。
第一,软件算法先行,硬件承接合规义务。人形机器人的核心是拟人化AI软件。如果机器人提供持续性情感陪伴服务,软件层面就要落实新规相关要求:未成年人保护、危机干预、隐私保护、防沉迷提醒。硬件性能迭代的同时,伦理安全体系必须同步建设。
第二,回归工具价值,警惕过度营销虚拟亲密。人形机器人可以服务老人、辅助特殊群体照护,社会价值广阔,但行业不能大肆渲染 “机器恋人”“机器家人”。新规释放明确导向:技术可以模拟陪伴,但不能替代真实的人与人之间的情感。
第三,开启软硬件协同治理新课题。线上AI服务的风险主要以信息风险为主;但具身智能叠加实体硬件,除内容伦理之外,还存在物理安全风险。本次暂行办法是治理的起点,未来产业成熟后,还会逐步完善人形机器人硬件安全、责任划分等配套规则。
六、小结:技术可以模拟温柔,但不能替代真实人间
技术本身没有善恶,拟人化AI可以成为深夜树洞,抚慰孤独;但缺少约束,也会编织虚幻的梦境,迷惑使用者。《人工智能拟人化互动服务管理暂行办法》,不是拒绝AI陪伴,而是提醒我们分清虚拟和现实。AI能够倾听烦恼,却没有真正的喜怒哀乐;算法可以模拟理解,但永远替代不了亲友的现实陪伴与专业心理帮助。
对于企业,大模型与具身智能浪潮之下,流量不能凌驾安全伦理之上,创新必须守住身心健康底线。对于普通用户,尤其是青少年,可以享受AI带来的慰藉,但不要把全部情感寄托于虚拟智能体。未来拟人化AI、人形机器人会更多走进生活。技术应当服务于人,而不是让人迷失在虚拟世界。期待在监管护航之下,AI能够真正成为人类可以信赖的朋友和助手。