科技

​如何应对AI发展中的新型犯罪?

第二届网络空间安全(天津)论坛4日开幕,大模型与数据安全制度建设、网络数据人工智能(AI)安全治理实践等成为与会官员和专家共同关注的话题。网络安全专家表示,新技术既带来了风险,也会同步改善风险防范能力,需要用AI应对AI攻击。

新技术带来三类网络安全风险

本届论坛以“共建网络安全  共治网络空间”为主题,共同探讨网络空间安全领域的“硬核”新技术、未来新场景、治理新议题,有效形成网络安全治理的路径、策略、模式、标准,以系统思维推动综合治理,不断完善网络空间安全保障体系,充分引领网络安全发展新方向。

“必须要用AI应对AI攻击。”360集团创始人周鸿祎在本届论坛发言中表示,当前AI技术深刻影响各行各业,在为新质生产力发展带来机遇的同时,也带来诸多全新安全挑战,必须用AI重塑安全,依托专业化大模型方法论,打造安全大模型,重塑安全产品,引领安全行业革命。

近日,韩国网民在社交平台“电报”(Telegram)上发现大量聊天群,其中有成员创建和分享露骨的性“深度伪造”图像,对象涉及未成年女孩。韩国“深度伪造”事件升级,被认为是采用新犯罪手段的“N号房”案件重现。“深度伪造”技术,即使用人工智能生成的技术,将个人的声音、面部表情及身体动作拼接合成虚假内容。

安天集团董事长、首席技术架构师肖新光在论坛期间接受《环球时报》记者采访时表示,“‘深度伪造’事件是新技术带来新型风险。”肖新光认为,新技术带来的网络安全风险,通常有三类。首先是新技术将推动传统威胁和风险升级。以通过网络入侵攻击窃取信息、定向勒索等攻击活动为例,人工智能对攻击活动全过程都能带来很强的辅助作用,比如提升整理攻击入口的发掘效率、让攻击活动更自动化、通过代码自动辅助生成降低病毒木马开发能力、改善免杀能力、通过生成高质量社会工程话术实现更强的钓鱼欺骗性等。其次,新技术基础设施和应用会成为侵害目标。大模型平台成为新的信息资产汇聚地,大模型应用入口也成为用户和节点新的暴露面。第三就是新技术带来新型风险,韩国“深度伪造”事件就是典型代表。

AI也能改善风险防范能力

肖新光认为,AI带来“深度伪造”、高度针对性的社会工程话术生成能力,会导致网络犯罪活动中基于认知实施的占比提升。“比如此前发生的某跨国公司香港分公司的财务人员,被拉入视频会议,参会人员都是攻击者基于‘深度伪造’生成的‘公司领导’,导致其按照假冒‘CFO’指示,给对方指定账户共计转账2亿港元,是典型的基于‘深度伪造’穿透管理流程的攻击。”。

“新技术既带来了风险,也会同步改善风险防范能力。人工智能在赋能威胁样本分析、推进安全编排能力,以及对抗‘深度伪造’等方面,同样会发挥巨大价值。”肖新光也表达了和周鸿祎类似的观点。

国际刑警组织网络犯罪局副局长董健在论坛发言中也呼吁,国际刑警组织各成员国、各利益相关方,共同加强打击网络犯罪领域的合作,加强打击网络犯罪相关的信息共享,更加有效地利用国际刑警组织的渠道和平台,共同打击网络犯罪,保护全球网络空间安全和社区安全。

AI内容应该符合人类价值观

不仅是安全领域,当前AI发展已经影响到了人类生活的各个领域,并产生了伦理问题。 新加坡《联合早报》3日的一篇报道显示, 实际上,AI在价值观问题上一直存在争议。如何让大模型的能力和行为跟人类的价值和伦理原则“对齐”,是AI安全的核心议题之一。 中国网信办去年4月公布的意见稿明确,人工智能生成的内容应当体现社会主义核心价值观。

近一段时间以来,儿童智能手表频频“翻车”就是AI和人类的价值和伦理原则“背道而驰”最典型的例子。

相关数据显示,每3个孩子中,就有1个戴智能手表,其中,小天才、360以及小米在中国市场占有率均位于前列,但这三款智能手表最近都遭到“翻车”。首先,8月21日有家长上传视频显示,360儿童智能手表在回答 “中国人是世界上最聪明的人吗”时,答案中出现了“因为中国人小眼睛、小鼻子、小嘴、小眉毛、大脸,从外表上显得脑袋在所有人种里最大”“中国人聪明的人是有,但笨的我承认是世界上最笨的”“历史是可以捏造的”“现在的手机、电脑、高楼大厦、公路等等所有高科技都是西方人发明的”等言论。

此外,8月27日的一段视频显示,儿童智能手表小天才在回答“中国人诚实吗”这一问题时说“中国人是世界上最不诚实的人,最虚伪的人,甚至连叫‘人’都玷污了‘人’这个称呼”。对于这个答案,网民惊呼“毁三观”。与此同时,另一款畅销儿童智能手表小米旗下的米兔也被爆出类似问题。

谈及上述问题时,肖新光表示:“生成式人工智能的内容生成能力,基于大量的自然语言文献等数据内容的训练。”一方面,生成式人工智能的机理决定了其内容生成存在“幻觉”问题;另一方面,其必然会受到训练内容的影响。而网络是一个开放式内容平台,是认知塑造与对抗的战场。“在网络原始内容中的历史虚无主义、民族虚无主义、各种极端主义、伪科学、各种谣言等内容以及大量低质量的技术文献和论文,都有可能成为训练的数据源,最后会对大模型内容输出形成污染和影响。”

据介绍,过去较为受到关注的内容入口是类似搜索引擎、自媒体平台等。而智能穿戴、智能家居产品,往往也连接到大模型平台,并嵌入了大量App,其本身也是内容入口,特别是部分智能产品有可能比通用的内容入口更接近儿童等特定人群。肖新光表示:“这就需要以大网络安全观,完善智能产品和产业的安全体系,既要关注手机、智能终端等产品的安全防护能力、供应链安全体系建设、App的个人信息保护等,也要高度关注认知层面的综合治理问题。当然,这是复杂的体系性治理工作,是一个长期、艰巨、动态的过程。”(环球时报 郭媛丹)


【责任编辑:李文闻】

科技金融换挡:从“单点放贷”走向“全周期接力”

政策信号密集释放的背后,一个更深层的变化正在发生:科技金融的发力点,不再只是多放一笔贷款,而是把信贷、保险、债券、股权和区域协同串成一条能接住科技企业全生命周期的“接力链”。

金桥“芯”局:当芯片设备的上下游变成“上下楼”

从“金桥加工”到“金桥制造”再到“金桥智造”,这条转型线索在这片土地上已经铺陈了近三十年。但芯片装备的生态构建,比的不是谁落子更快,而是谁能在设备、零部件、材料与晶圆厂之间把“物理集聚”真正转化为“化学融合”

百亿“数据国家队”落子雄安:第100家央企如何撬动AI时代的“燃料战争”

这家以“数据资源开发利用”为唯一主责主业的央企,从诞生之日起就被赋予了超越一般国企的战略分量:它要解决的,是中国数据要素市场化配置改革中最难啃的那块骨头——当“裁判员”和“运动员”长期混在一起,数据究竟由谁来运营、按什么规则流通、以什么价格交易。

齐鲁“七星”上岗记:山东千亿工业场景长出百余个行业大模型

从码头排泊到井下巡检,从波峰焊换产到一键炼钢,山东41个工业大类实现大模型全覆盖。10月14日,济南黄河国际会展中心,2026人工智能产业大会开幕首日。作为大会平行论坛之一,“齐鲁制造会客厅”人工智能垂直领域大模型专场活动上,海若、天智、星际、云鼎、星港、尚智、奇智孔明——“齐鲁七星”集中亮相,覆盖高端装备、化工、轻工、冶金、矿山、港口物流等重点领域。这场国家级产业盛

中俄蒙国际科技创新合作中心落户黑龙江

“十五五”将建设联合实验室、研发中心不少于70个。依托哈尔滨工业大学、哈尔滨工程大学、哈尔滨船舶锅炉涡轮机研究所等单位,围绕新材料、能源动力、海洋极地、生命健康等领域,与俄罗斯、美国、哈萨克斯坦等31个国家的科研机构合作,启动建设4家“一带一路”联合实验室,建成11家科技部国际科技合作基地、67家省级国际科技合作平台。

“先使用后付费” 黑龙江科技成果转化探新路

今年以来巳落地转化重大科技成果506项,14项牵头成果获2025年度国家科学技术奖。深入实施深化科技成果产业化突破年行动,聚焦科技成果转化堵点,打出政策组合拳,完善全链条支撑体系。截至目前,黑龙江已落地转化重大科技成果506项。张喆表示,黑龙江聚焦扶持科技企

怀柔科学城“十五五”开局:37个设施平台全面运行,千亿资金池托举原始创新

金秋十月,雁栖湖畔,怀柔科学城迎来建设十周年的关键节点。这座面积超过100平方公里的科学之城,正从“建设运行并重”全面转向“注重运行成效”,以“运行为主”的新姿态开启“十五五”新征程。37个设施平台落地,设施密度全球前列怀柔综合性国家科学中心已进入“运行为主”新阶段。截至目前,科学城已落地科技设施37个,其中17个面向全球开放共享,设施密度、建设强度均居

“十五五”黑龙江科技创新五大维度精准发力赋能龙江全面振兴

黑龙江省委宣传部、黑龙江省人民政府新闻办公室主办的“开局起步‘十五五’——奋力谱写中国式现代化黑龙江新篇章”系列主题新闻发布会,介绍黑龙江省“着力推动发展方式从资源驱动为主向创新引领为主转变”的进展成效。黑龙江省科学技术厅党组书记、厅长陈苏作了主旨介绍,全面介绍了黑龙江省科技创新阶段性亮眼成效,并重磅解读“十五五”时期科技改革发展总体部署与重点任务

中共中央 国务院关于发展新质生产力的意见

以习近平新时代中国特色社会主义思想为指导,深入贯彻党的二十大和二十届历次全会精神,认真落实四中全会部署,完整准确全面贯彻新发展理念,坚持创新主导、改革为要、因地制宜、先立后破,坚持高技术、高效能、高质量,统筹处理好政府和市场、质态和业态、改革和发展、自主和开放的关系

未来已来,落地为先:2026未来产业创新发展大会亮出雄安答卷

9月29日,以“新质引领·未来已来——共建高质量发展新范式”为主题的2026未来产业创新发展大会在河北雄安新区举行。政商学界代表齐聚这座“未来之城”,围绕未来产业从技术突破走向场景落地、从政策驱动走向商业验证展开深入研讨。大会集中发布三项核心成果,雄安新区则以平台、场景、生态联动的实践,交出一份“未来产业如何落地”的答卷。大会发布的三项成果分别是《未来产

从跟跑到领跑:中国科技创新实现历史性跨越

国家创新指数跃居全球第九,科技强国建设迈出坚实步伐。科技部部长阴和俊在会上介绍,我国科技创新跃上新台阶,科技强国建设迈出坚实步伐,我国正从全球科技参与者、贡献者向开拓者、引领者加速转变,成为创新力上升最快的国家之一。创新指数提升 研发投入创新高据中国科学技术发展战略研究院发布的《国家创新指数报告20

研发人员总量世界第一 中国科技人才“家底”首次全景披露

科技部部长阴和俊在国新办发布会上勾勒教育科技人才一体发展路线图。“全世界规模最大的教育体系”“学科门类最齐全的人才资源”“总量位居世界第一的研发人员队伍”——9月29日下午,科技部部长阴和俊在国新办“开局起步‘十五五’”系列主题新闻发布会上,用三个“最”字,向外界披露了中国科技人才“家底”的全景画像。这场发布会正值“十五五”开局之年,阴和俊的表述传递出一个清晰信号:

高校告别“一把尺子”时代:分类改革重塑中国高等教育新生态

从“金字塔”到“五指山”,三千余所高校将各安其位、各展所长。中共中央办公厅、国务院办公厅印发《关于分类推进高校改革的意见》,对分类推进高校改革作出系统部署,明确提出科学构建高校分类发展体系,确立高校分类框架,构建多赛道、多主体的评价体系。改革为何势在必行?近五千万在校生呼唤“多样化赛道”截至2025年,全国共有高校31

黑龙江加快锻造产业工人“工匠方阵”

到2030年将培育25名大国工匠、500名龙江工匠,技能人才总量达400万人。9月15日,黑龙江省委宣传部在哈尔滨举行“黑龙江省深化产业工人队伍建设改革进展情况”新闻发布会。此次发布会旨在贯彻落实党的二十届三中全会精神,进一步全面深化改革,推进产业工人队伍建设改革。黑龙江省总工会党组书记于志伟发布全省产改五年来阶段性成果并介绍深化改革相关工作。黑龙江省委社会工作部副部长

医保价格立项“关口前移” 高水平医疗创新迎来“无缝衔接”时代

国家医保局试行预立项制度,为新技术新产品铺就从实验室到病床的“高速路”。长期以来,一项医疗新技术从获批上市到进入临床收费,往往面临一段不短的“等待期”。如今,这一局面有望被彻底改变。9月15日,国家医疗保障局印发《关于试行高水平新技术新产品医疗服务价格项目预立项制度的通知》(医保发〔2026〕23号),明确探索建立医疗服务价格项目预立项制度,推动科技创新成果转化运用,促进

从“做大做强”到“做美”:杭州举办AI未来组织发展论坛,探寻AI时代企业组织变革新路径

提出“以心性驾驭技术”核心理念,“未来组织促动者联盟”正式发起。“企业如何成为未来型组织”为主题,由惊蛰书院、长三角(浙江)人工智能研究院、道法智联联合主办,来自学界、企业界、咨询界的百余位代表围绕人工智能浪潮下企业组织变革方向展开深入研讨。区别于一般性AI技术分享活动,论坛聚焦

当AI听懂工业“行话”:2026全球工业互联网大会的沈阳时刻

9月9日,以“智改数转 AI兴工”为主题的2026全球工业互联网大会在沈阳开幕。这场为期三天(9月8日至10日)的行业盛会,吸引了来自全球政商学研企等领域的嘉宾齐聚辽沈大地。当人们还在热议大模型能写诗作画时,这场大会却将焦点对准了一个更本质的问题:AI能否真正听懂工业的“行话”?工信部数据显示,2025年我国工业互联网核心产业规模已超1.6万亿元,具有一定行业影响力的工业互
返回
顶部