人工智能(AI)、深度合成等新技术快速发展,对加快形成新质生产力、实现经济社会高质量发展起到关键作用,也为人们的生活带来便利。然而,部分不法分子利用AI技术传播虚假信息,破坏网络生态,造成不良影响。
多管齐下防范对AI技术的滥用,促进人工智能健康发展,有利于维护社会共同利益。《人工智能生成合成内容标识办法》通过标识提醒用户辨别虚假信息,明确相关服务主体的标识责任义务,规范制作、传播各环节标识行为。
持续打击灰色产业链
一天,林某躺在床上刷着短视频,一个名为“AI理财小助手”的账号出现在屏幕上。林某在其主页里浏览了一番,发现账号粉丝数显示“8.7万”,但最新视频的点赞数还不到三位数。
“公式化命名、同质化内容、异常互动数据,这些是AI起号的特征。”某短视频平台内容安全部门负责人刘珊介绍。AI起号成为一些自媒体的牟利手段,利用AI生成发布吸引眼球的内容,在短时间内吸引大量粉丝,之后通过带货或者直接转让账号变现。
“利用AI选择涨粉领域,打造能够吸粉的人设,账号内容也可以通过AI生成。”售卖“AI起号课程”的“培训师”杨某说。一方面不受做自媒体需要的专业知识、制作能力限制;另一方面,可以帮助精准吸粉,并保持“人设一致”。此外,还能同时操作多个账号,形成矩阵,互相引流,合作推广。
“情绪急救:人生低谷期如何防止情绪崩盘”“深度疗愈:看见潜意识中的自己”……杨某向记者展示了一个刚开号不久的“心理学博主”的账号页面。每个标题看上去专业感十足,又直击特定群体心理需求。“其实文案全靠AI生成。”杨某说。
虚假的人设、不严谨的内容、夸张的画面,如此起号,对网络空间环境危害不小。
如何打击利用AI起号的行为?
“AI起号的主要危害在于伪造,治理关键也在于此。”北京邮电大学互联网治理与法律研究中心执行主任谢永江认为,除了强化执法打击外,平台也应提高对深度伪造内容的检测精度,明确对AI造假起号等违规行为的界定和处罚标准等。
“起号—转型—转卖”的灰色产业链,是AI起号相较其他AI伪造现象的独有特点。
“根据反电信网络诈骗法规定,任何单位和个人不得非法买卖、出租、出借互联网账号。”某电商平台安全运营负责人表示,各个电商平台均已禁止账号转卖。但有一些账号交易还是通过社交媒体发布,借助“隐晦暗语”等私下进行。
“卖号不仅是AI起号的变现途径,通常还伴随诈骗等违法犯罪行为。”北京师范大学法学院教授梁迎修建议,监管部门督促平台履行治理责任,建立违规账号“黑名单”,对高频、反复触犯平台规则的账号主体加大处罚力度,禁止违规账号进行带货、卖课等商业活动,持续开展AI造假起号整治,切断不法分子获利渠道。
有效拦截仿冒营销内容
“今天有事请大家帮忙……先拿出300单老家的土鸡蛋给大家发福利!”不久前,在某短视频平台上,一名广受喜爱的运动员“推销老家农产品”,弹幕和评论里全是“支持”“为偶像冲销量”的文字。其实,这些带货视频全都是利用AI仿冒的,其中一个商品链接显示已售出4.7万件。
据某短视频平台负责人介绍,冒充社会知名人士的情况主要有几种:利用AI技术生成社会知名人士图片,用作账号头像,仿冒假冒他人;利用AI技术生成社会知名人士视频且不做标注;仿冒假冒社会名人账号和生成内容后,博取关注,通过开设橱窗售货等方式不当获利。
如何治理这一乱象?
“AI仿冒名人,归根到底还是利用AI造假。民法典对肖像权和声音权利的规定以及其他相关法规,都已作出相关保护。《人工智能生成合成内容标识办法》对人工智能生成合成内容标识提出要求。”梁迎修认为,关键还是要严格执法,公正司法。
“从平台角度来说,除了压实自身责任,还要与用户联动,强化共治。”腾讯相关负责人表示,用户发现未标注AI生成标识的短视频时,可提交相关材料进行投诉。经平台审核通过的补充说明将以浮动标注形式展现在原视频页面。
抖音相关负责人表示,平台已为社会知名人士建立肖像保护库,同时努力对仿冒营销内容进行有效拦截。
多方协作建立辟谣机制
“突发爆炸!火光冲天!伤亡不明!”一则“视频新闻”在网上流传,画面中火光冲天,引发当地群众恐慌。后来公安机关调查发现,这是账号所属机构使用AI批量生成的虚假新闻。该机构一天最多能生成4000至7000篇假新闻,每天收入在1万元以上。
为何AI制作的虚假新闻在网络上屡禁不止?
某新闻聚合平台内容安全负责人认为,一些平台的反虚假信息机制效率有待提升,某些账户在平台发布AI生成图片视频后,“疑似AI技术生成”的提示语数小时后才出现,未能及时提醒风险。
中南大学法学院副院长杨清望认为,平台应根据权威信息立即对相关谣言采取清理、标签标记等措施,并处置违规账号。
近年来,相关法律法规不断健全完善,向AI使用者和平台管理者亮明了法律底线。北京师范大学新闻传播学院教授许小可建议,针对生成和传播虚假信息的高风险领域,可以通过司法解释等形式明确各方义务边界,进一步制定科学合理的AI侵权责任认定指导标准。
在以技术对抗虚假新闻方面,各地监管部门也在不断探索。“我们与科研机构、企业密切合作,进一步提高对恶意‘深度伪造’信息的监测预警和快速识别能力。通过与相关部门合作建立网络谣言巡查监测、核查反馈、会商研判、线索移送、打击处置的闭环机制,对AI合成的虚假信息第一时间依法依规处理。”辽宁沈阳市公安网络安全保卫部门负责人说。
若因虚假消息遭受损失,责任谁来承担?浙江师范大学特聘教授乔巴生认为,内容制作方若涉嫌欺诈,应承担侵权责任;若平台未尽审核义务,需依法承担连带赔偿责任。此外,用户也应提升对虚假信息的鉴别能力。
某短视频平台负责人建议,首先,警惕内容特征,如AI生成文本常出现逻辑断层、情感表达单一或事实细节模糊;视频可能存在面部表情不自然、光影异常或声音失真。其次,核查信息来源,优先选择权威媒体或官方渠道。腾讯相关负责人建议,在一些AI生成内容明显缺乏可信度、具有信息误导等特征时,用户可通过评论区互动等形式相互提醒,并通过投诉等形式及时反馈到平台。
监管、平台与用户联动共治,通过技术检测、投诉机制和法律追责,共同筑牢诚信防线。