财经

上海市委网信办指导小红书等15家平台清理违规AI产品信息

2025年06月12日 | 查看: 79794

上海市委网信办指导小红书等15家平台清理违规AI产品信息

2025-06-12 10:08:48 中新经纬

  中新经纬6月12日电 据“网信上海”微信号12日消息,为贯彻落实中央网信办“清朗・整治AI技术滥用”工作部署,4月下旬以来,上海市委网信办聚焦6类突出问题深入开展第一阶段专项行动。现向社会公布阶段性工作成果:

上海市委网信办指导小红书等15家平台清理违规AI产品信息
图片来源于网络,如有侵权,请联系删除

  全面清理整治违规AI产品和信息

  上海市委网信办指导小红书、哔哩哔哩、拼多多等15家重点网站平台,集中清理“一键脱衣”、未经授权的人脸或人声克隆编辑、未备案等违规AI产品、商品及相关营销、炒作、推广、教程信息。小红书、哔哩哔哩主动发布专项行动治理公告,开通了有害AI内容的举报受理处置渠道;星野开展智能体全面排查清理。各重点网站和AI平台共拦截清理相关违法违规信息82万余条,处置违规账号1400余个,下线违规智能体2700余个。经整治,网络违规AI信息显著减少。

  上海市委网信办深化大模型合规指导服务中心作用,指导各类提供生成式人工智能服务的主体落实合规义务,强化安全评估,迄今已完成82款大模型备案,87款应用登记。对3款未履行备案或登记程序提供服务且存在风险的应用,依法约谈并给予行政处罚。

  提升AI平台安全风控能力

  上海市委网信办指导重点AI平台加强技术源头治理,深化自查自纠,加强训练语料管理机制,加强新版本新应用上线、API接入应用的安全管理,用好大模型能力持续提升安全水平,建立健全与业务规模相适应的风控机制。组织专业机构对8家企业14款AI类应用开展了巡查测试,对部分重点平台开展现场检查和上门指导,发现并督导整改优化内容审核、意图识别等安全措施的薄弱环节。通过系统性排查和闭环整改,上海重点AI平台和重点平台AI应用的合规性、安全可控性持续增强。

  强化重点领域AI安全管理

  针对关乎人民群众“生命线”“钱袋子”和“未成年人保护”等社会高度关注的AI应用,上海市委网信办会同市卫健委、金融监管等主管部门,对申请备案、登记的垂域模型和应用加强审核和业务指导,对33款已完成备案、登记提供医疗健康、金融、教育、情感陪伴服务的AI应用开展督导检查,要求完善行业领域安全审核和控制机制,加强专业知识库和检索增强能力建设,提升输出准确性,防范虚假、误导、诱导沉迷对患者、投资者、未成年人带来的不良影响。

  联合市卫健委,指导上海人工智能实验室举办了医疗大模型开源评测社区上线发布会和上海网络安全博览会“医学人工智能安全”论坛,面向全市各医疗机构、医疗服务企业开展AI安全宣贯和合规指导,依托上海市医疗大模型应用检测验证中心对16家机构20个AI医疗场景开展评估,结合模型安全性评价和业务验证,强化行业规范和伦理审查,指导安全加固,引导规范应用。

  强化AIGC标识示范和全链条治理

  上海市委网信办将高标准落实《人工智能生成合成内容标识办法》及配套强制性国家标准作为专项治理的关键抓手,切实保障公众知情权。先后组织开展了4场面向大模型企业、重点网站平台、应用企业的法规宣贯和专题交流,覆盖企业400余家,深入解读标识要求和技术路径,推动企业从“要我落实”转向“我要落实”。指导成立AIGC标识生态联盟,上海人工智能安全治理实验室联合重点大模型企业、网站平台,合力推进标识互认、能力共享与标准协同。

  围绕“制作-传播”环节,指导重点网站平台加快配备显式与隐式标识功能,不断提升AIGC内容、AI高风险行为的检测识别和治理能力。通过政策指导、生态协同与技术落地,稀宇科技、阶跃星辰、通义、小红书、哔哩哔哩、Soul等已基本完成显式标识规范上线,加快开发上线隐式标识和传播链互认验证,小红书牵头编制图片模态元数据标识实践指南,上海标识工作取得阶段性成效。

  上海市委网信办表示,将持续深化专项行动,统筹技术治理、制度建设和生态优化,强化对重点问题、平台、环节的常态化监管,推动智能向善。第二阶段将聚焦AI造谣、低俗内容等7类突出问题加大整治力度,维护良好网络生态。(中新经纬APP)

来源:中新经纬

编辑:董文博

广告等商务合作,请点击这里

未经过正式授权严禁转载本文,侵权必究

中新经纬版权所有,未经书面授权,任何单位及个人不得转载、摘编或以其它方式使用。
关注中新经纬微信公众号(微信搜索“中新经纬”或“jwview”),看更多精彩财经资讯。

推荐阅读:

经观头条 | 儿童抑郁症门诊零点之后

胶原蛋白行业市场如何?重组胶原蛋白市场前景广阔 诸多资本加码布局_保险有温度,人保车险

拥有“如意行”驾乘险,出行更顺畅!,人保服务_2024年微波炉行业市场发展现状及重点企业

2024年中国家用冰淇淋机行业产业链上下游结构及重点企业_人保服务 ,人保护你周全

人保服务,人保车险_2024环境监测行业市场发展现状调研及竞争格局分析

2024年中国U盘行业产业链上下游结构及重点企业_人保护你周全,人保车险

最高检发布未成年人网络保护案例:涉租售网络游戏账号案

2023年我国电工钢产品结构性矛盾明显加大 电工钢行业2024年展望_人保财险 ,人保服务

保险有温度,人保服务 _2024小微金融行业市场分析:有序化解中小金融机构风险是当前金融工作的重中之重

中国自研 正式交付 最新环保排放标准11.5万吨原油船 LNG产业链供需布局与招商发展分析报告_人保车险 品牌优势——快速了解燃油汽车车险,人保服务

关键词: