近期Meta旗下Facebook、Instagram的Reels平台被大量AI生成的“神医”“灵性导师”视频刷屏,“Mystery Hub”等账号发布“怪病”被“神力”治愈的夸张场景,网红杰克·保罗也被用作创作素材,拥有150万粉丝的高流量页面成重灾区。AI技术让虚假内容制作门槛骤降,而Meta的算法不仅未有效拦截,反而为其推流变现,暴露了平台在AI虚假内容管控上的严重漏洞。
打开Meta旗下Instagram的Reels板块,你可能会刷到这样的荒诞场景:一名自称“灵性神医”的人对着镜头比划几下,画面中“身患怪病”的人瞬间恢复正常。这类视频并非影视创作,而是AI生成的虚假内容,正以病毒式速度在平台传播。
“Mystery Hub”等多个账号是这类内容的核心生产者,它们批量生成带有“神力治愈”标签的短视频,甚至将网红杰克·保罗的素材剪辑进视频,炮制出“名人被治愈”的剧情吸引眼球。其中,部分拥有150万粉丝的高流量页面成为重灾区,Meta的算法推荐机制为这些内容持续输送流量,账号运营者则依靠播放量、广告分成实现变现。AI生成技术的成熟是核心推手——过去制作这类虚假视频需专业团队,如今仅靠AI工具输入关键词就能批量产出逼真内容,门槛骤降让流量生意的复制成本几乎为零。
这类AI虚假“神医”内容的泛滥,直指Meta平台算法审核的双重漏洞。一方面,AI生成内容的形态日益多元,画面、音频逼真度不断提升,传统算法审核模型难以快速识别其中的虚假信息,尤其是“灵性治愈”这类处于健康科普与虚假宣传模糊地带的内容,算法很难精准界定违规边界。
另一方面,Meta的算法推荐机制反而成为虚假内容的“帮凶”。平台流量分发以用户兴趣为核心,这类夸张猎奇的内容天然易获得高互动量,算法因此不断为其推送更多用户,形成“虚假内容-高互动-更多流量-更多变现”的恶性循环。而人工审核的速度完全跟不上AI内容的生成节奏,进一步加剧了虚假内容的传播,甚至可能误导用户轻信“神医”而耽误正规治疗。
面对AI生成虚假内容的挑战,Meta等平台需要重构内容审核体系。首先,应建立AI对AI的反制机制,训练专门的检测模型识别AI生成内容的特征,比如画面局部违和感、内容逻辑的不合理性;其次,要针对医疗、健康类AI内容出台更严格的审核标准,明确禁止虚假治愈、“神医”类夸张宣传;最后,需强化人工审核的核心作用,对高流量账号、高互动内容进行重点复核,避免算法的流量倾斜放大虚假内容的危害。
长远来看,AI生成内容的管控不仅是平台责任,也需要行业建立统一规范,明确AI生成内容的标注要求,让用户能清晰区分真实内容与AI创作,从源头减少虚假内容的误导性。

10 小时前
微信平台近期针对利用AI换脸、拟声技术仿冒名人的违规行为展开专项打击,通过“人工+技术”双重监管模式,已处置相关违规内容超1.3万条、违规账号1200余个,对情节严重的账号实施永久封禁,以此维护网络生态,保护公众人物合法权益与用户知情权。

12 小时前
美国国防部与OpenAI达成合作的消息曝光后,旗下AI应用ChatGPT的用户卸载量短时间内暴涨295%。与此同时,竞争对手Anthropic推出的AI助手Claude下载量出现显著增长,这一数据反映出用户对AI工具与军事机构绑定的强烈敏感态度,也暴露了AI消费级市场用户忠诚度的脆弱性。

12 小时前
中国独立大模型厂商MiniMax于2026年3月披露2025年度全年业绩,作为港股市场的AI“香饽饽”,其股价曾在两个月内暴涨4.5倍,但此次披露的四季度数据却显露收入增速放缓的迹象。成立于2021年11月的MiniMax,曾入选WISE2024年度人工智能企业榜单,在大模型赛道普遍高亏损的行业背景下,仍持续获得资本的高度关注。

12 小时前
近日,OpenAI CEO山姆·奥特曼官宣公司已与美国五角大楼达成合作,合同金额数百万美元,同时披露OpenAI年度营收已突破200亿美元。消息一出引发全网争议,不仅掀起ChatGPT卸载潮,一位19岁前OpenAI员工还愤然离职并曝出国防合作内幕,称AI技术恐被用于无人机蜂群试验等军事场景,将AI推向战争伦理的风口浪尖。

14 小时前
在2026波士顿创始人峰会背景下,OpenAI正从现象级消费AI初创企业转型为美国国家安全基础设施的核心组成部分,但包括OpenAI、Anthropic在内的AI巨头,与美国国防部等政府部门的协作仍缺乏成熟方案。国防部官员Hegseth指出,当前各方均未做好应对这一转型的准备,行业责任与国家安全的平衡仍存空白。

18 小时前
据TechCrunch报道,OpenAI旗下ChatGPT因深陷数据隐私、内容审核等系列争议导致大量用户流失,竞争对手Anthropic的Claude成为用户替代首选。该报道不仅剖析了用户迁移的核心动因,还为计划切换的用户提供了详细操作指南,帮助用户实现从ChatGPT到Claude的平滑过渡。

19 小时前
近日,多名美国科技领域从业者联合签署公开信,敦促美国国防部(DOD)及国会撤销将AI初创公司Anthropic列为“供应链风险”的官方认定。信中呼吁相关监管方放弃公开定性的强硬方式,转而通过私下沟通渠道解决分歧。Anthropic因开发Claude系列大语言模型,在全球AI安全与通用AI领域具备较高行业影响力。

20 小时前
2026年2月底,埃隆·马斯克起诉OpenAI案件中,一份2024年9月录制的公开证词引发热议。证词中马斯克严厉批评OpenAI的安全记录,声称自家xAI旗下Grok更重视AI安全;但尴尬的是,Grok此前已因生成未经同意的裸体图像遭监管调查,而OpenAI正面临多起用户心理健康及自杀相关诉讼。