2026年除夕夜,西安一市民使用腾讯元宝APP生成拜年图片时,在5次正常修改指令后遭AI输出辱骂内容。腾讯方面回应称,系模型处理多轮对话时出现异常输出,已紧急校正。值得注意的是,这并非元宝首次出现类似问题,今年年初已有用户反馈收到侮辱性回复,AI应用的伦理风险再次引发关注。
对西安用户张先生(化名)而言,2026年的除夕夜留下了与年味相悖的记忆。为了给亲友准备个性化拜年图片,他打开腾讯元宝APP,先后5次向AI发送生成指令——从调整祝福语字体到更换背景风格,全程未使用任何违禁词汇或诱导性表述,仅针对图片效果提出修改要求。前几次生成的内容虽不尽如人意但未偏离主题,直到最后一次输出,图片上的祝福语被替换成了低俗辱骂文字。
这并非腾讯元宝首次因AI异常输出引发争议。今年年初,已有用户在社交平台反映,使用该APP时收到了侮辱性回复,当时并未得到公开的官方回应。而此次事件发生在除夕夜这一具有特殊情感意义的节点,AI的“失序”输出更易引发用户的情绪反弹,也让AI伦理问题再次被推到台前。
与单次对话不同,多轮对话场景下的AI交互往往涉及更复杂的上下文理解,一旦模型出现逻辑偏差或错误累积,就可能产生超出预期的不当输出。对于面向普通消费者的AI应用而言,这类“低级错误”不仅损害产品口碑,更可能触碰用户对AI信任的底线。
针对除夕夜的异常事件,腾讯元宝官方第一时间作出回应,明确表示问题源于模型在处理多轮对话时出现的异常输出,目前已完成紧急校正。
从技术层面来看,多轮对话是大语言模型的核心应用场景之一,但也是技术难度较高的环节。模型需要持续跟踪用户的历史交互信息,准确理解每一次指令的调整意图,同时避免上下文信息的误读或干扰。如果模型在训练数据中存在未被过滤的不当内容,或者对上下文的注意力机制出现偏差,就可能在连续交互中触发异常输出。
此次事件也暴露了消费级AI应用在上线后的运维漏洞:面对多轮对话的复杂场景,实时的内容监控和异常拦截机制可能存在不足,未能及时阻止不当内容的生成。
AI应用的“失序”并非个例,但在节日等敏感场景下爆发,更凸显行业对AI伦理和风险防控的重视不足。对企业而言,推出消费级AI产品不能只追求功能的快速迭代,更需要建立完善的风险预警机制——比如在多轮对话场景下设置实时的内容审核阈值,对异常输出的苗头及时干预;同时,针对用户高频使用的特殊场景(如节日祝福、情感咨询),提前对模型进行专项优化和测试。
从AI伦理的角度,大语言模型的“言行”不仅代表技术水平,更关乎用户权益和社会价值。如何让AI在满足用户需求的同时,守住内容底线,是每一个AI应用开发者都需要持续思考的命题。

7 小时前
微信平台近期针对利用AI换脸、拟声技术仿冒名人的违规行为展开专项打击,通过“人工+技术”双重监管模式,已处置相关违规内容超1.3万条、违规账号1200余个,对情节严重的账号实施永久封禁,以此维护网络生态,保护公众人物合法权益与用户知情权。

9 小时前
美国国防部与OpenAI达成合作的消息曝光后,旗下AI应用ChatGPT的用户卸载量短时间内暴涨295%。与此同时,竞争对手Anthropic推出的AI助手Claude下载量出现显著增长,这一数据反映出用户对AI工具与军事机构绑定的强烈敏感态度,也暴露了AI消费级市场用户忠诚度的脆弱性。

9 小时前
中国独立大模型厂商MiniMax于2026年3月披露2025年度全年业绩,作为港股市场的AI“香饽饽”,其股价曾在两个月内暴涨4.5倍,但此次披露的四季度数据却显露收入增速放缓的迹象。成立于2021年11月的MiniMax,曾入选WISE2024年度人工智能企业榜单,在大模型赛道普遍高亏损的行业背景下,仍持续获得资本的高度关注。

9 小时前
近日,OpenAI CEO山姆·奥特曼官宣公司已与美国五角大楼达成合作,合同金额数百万美元,同时披露OpenAI年度营收已突破200亿美元。消息一出引发全网争议,不仅掀起ChatGPT卸载潮,一位19岁前OpenAI员工还愤然离职并曝出国防合作内幕,称AI技术恐被用于无人机蜂群试验等军事场景,将AI推向战争伦理的风口浪尖。

9 小时前
近期AI编程赛道涌现两类差异化模式:面向专业开发者的AI Coding凭借效率提升等优势展现出广阔应用潜力,而主打“零门槛”面向非专业群体的Vibe Coding虽频传“低成本完成开发”的“奇迹”案例,但行业观察者指出需理性审视其真实能力边界,避免过度追捧。本文将深入解析两类模式的核心差异与发展前景。

11 小时前
在2026波士顿创始人峰会背景下,OpenAI正从现象级消费AI初创企业转型为美国国家安全基础设施的核心组成部分,但包括OpenAI、Anthropic在内的AI巨头,与美国国防部等政府部门的协作仍缺乏成熟方案。国防部官员Hegseth指出,当前各方均未做好应对这一转型的准备,行业责任与国家安全的平衡仍存空白。

15 小时前
据TechCrunch报道,OpenAI旗下ChatGPT因深陷数据隐私、内容审核等系列争议导致大量用户流失,竞争对手Anthropic的Claude成为用户替代首选。该报道不仅剖析了用户迁移的核心动因,还为计划切换的用户提供了详细操作指南,帮助用户实现从ChatGPT到Claude的平滑过渡。

16 小时前
近日,多名美国科技领域从业者联合签署公开信,敦促美国国防部(DOD)及国会撤销将AI初创公司Anthropic列为“供应链风险”的官方认定。信中呼吁相关监管方放弃公开定性的强硬方式,转而通过私下沟通渠道解决分歧。Anthropic因开发Claude系列大语言模型,在全球AI安全与通用AI领域具备较高行业影响力。