当前位置:首页 > 新闻资讯 > 正文内容

破解数据瓶颈,王江平:建设人工智能国家数据集具有迫切性

七夏8小时前新闻资讯10


随着DeepSeek的火爆出圈,“人工智能+”加速渗透到产业竞技场。AI正如同水电一般,成为生产生活中不可或缺的基础设施。然而,数据作为人工智能发展的“燃料”,还存在高质量中文数据集供给严重不足的问题。

如何破解AI发展的“数据瓶颈”难题?今年两会,全国政协委员、工信部原副部长王江平关注的正是这一问题。他建议,比照国家教材委员会的模式,设立人工智能国家数据集建设委员会,同时引导多主体开展高质量行业数据集建设。

避免AI大模型产生幻觉,关键在数据集质量

数据、算法和算力是人工智能发展的三大核心要素。其中,大规模、高质量、多样化的数据集是大模型性能突破、落地应用的关键。

王江平表示,当前全球积极布局人工智能产业,数据资源已成为重要战略资产,加强人工智能国家数据集建设具有高度的必要性和紧迫性。

在他看来,这是提升人工智能技术水平,抢占国际竞争制高点的必然要求。“建设国家数据集有助于提高模型的准确性和泛化能力,同时降低算力消耗一定程度上弥补算力不足,将我国潜在的数据优势转化为技术优势,提升我国在人工智能领域的国际话语权。”

一直以来,AI大模型一本正经地“胡说八道”,备受争议。要避免AI大模型产生“幻觉”,确保训练数据的高质量和多样性至关重要。

王江平在接受南都等媒体采访时表示,人工智能有一个“补白机制”,通过调整权重、输出结果。“如果某些特定领域数据集不完整,没有丰富的数据集,就会降低它的权重,最后补白出来,因而产生幻觉。”归根究底,AI大模型幻觉是数据集质量的问题。

王江平认为,建设国家数据集可以对数据进行严格筛选、标注和管理,保证训练数据的质量和正确价值取向,从源头上降低伦理和安全风险。

当前,AI技术正在加速融入到多个行业。加强数据集建设,也是AI深入赋能行业的必要举措。王江平表示,建设国家数据集能够为垂直行业提供丰富且专业的数据支撑,充分释放AI在各垂直行业的应用潜力,形成“数据—模型—数据”的良性循环,推动产业升级和创新发展。

王江平告诉南都记者,人工智能的行业应用,离不开强大且优质的数据支撑,且数据的颗粒度越细越好。AI落地应用速度,取决于特定领域专业数据集的质量和丰富程度。

“开放的数据不好用,好用的数据不开放”

那么,当前国内数据集建设情况如何?

王江平观察发现,有关机构相继发布了“书生·万卷”、WuDaoCorpora、MNBVC等中文语料库,数据集规模和质量逐步提升。“但总的来看,高质量中文数据集供给仍严重不足,在国际竞争中处于弱势地位。”

据王江平介绍,美国在2009年启动了Data.gov平台建设,已汇集超过30万种数据集,数据体量和质量领先全球。在Hugging Face发布的数据集中,英语以37.7%的比重居首位,而中文仅占3.2%。

与此同时,国内高质量数据集建设还面临一些困境和挑战——比如规范性不足、专业性不强、数据流通不畅、公共数据开放共享不够等。

具体而言,由于数据集完整性、准确性、一致性、时效性等方面标准缺失,语料来源广泛但质量参差不齐。行业专家对数据治理的参与程度不高,当前仍缺乏既懂行业又懂数据治理的复合型人才,这使得数据集的专业性不强。

王江平还提到,出于商业秘密、数据安全等因素考虑,企业开放数据意愿不足,专业场景数据集缺乏。数据确权、定价、交易、流通等模式的不清晰,也制约了数据的开发与利用。在公共数据层面,政府部门的开放共享程度也有待提高。实践中往往是“开放的数据不好用,好用的数据不开放”。

大模型的开发与优化,离不开海量优质的数据“投喂”。长久来看,高质量数据将成为稀缺品。据人工智能研究机构epoch的研究预测,语言数据可能在2030~2040年耗尽,高质量训练数据或在2026年耗尽。

引导多主体开展高质量行业数据集建设

如何破解“数据瓶颈”,促进数据自由流通与高效配置,成为AI发展的一道必答题。

王江平建议,比照国家教材委员会的模式,设立人工智能国家数据集建设委员会,统筹规划国家数据集建设的战略方向、政策制定和资源调配。该委员会的成员包括政府部门代表、学术界专家、企业界代表等,确保决策的科学性和全面性。

在强化顶层设计的同时,王江平认为,还应分类别建设国家数据集标准。对于涉及国家安全、意识形态、实体制造、医疗健康等关键领域,分轻重缓急制定并实行强制性国家标准,明确数据采集、存储、标注、使用等各个环节的规范和要求,确保数据的安全性、准确性和一致性。其他领域可制定推荐性标准。同时加快制定通用/行业数据集质量标准,在壮大规模的同时更加关注数据专业性,开展数据集质量评估和提升行动。

为支持国家数据集的建设、维护和更新,吸引优秀科研团队和企业参与其中,王江平还建议设立国家人工智能数据集专项基金,其资金来源可包括政府财政拨款、企业捐赠、社会资本投资等。

聚焦行业数据集建设,王江平表示,可联合国家实验室、国家科研机构、高校、科技领军企业的力量,引导优势行业链主企业、地方龙头国有企业、人工智能园区基地、龙头数据服务商等多主体,围绕特定领域和场景,协同建设和储备一批高质量数据集。

他还提到,应探索数据共享机制,让更多专业化数据集“供”出来。对此,可鼓励龙头企业和行业协会牵头,建设行业和企业级可信数据空间,构建多方互信的数据流通利用环境,协同上下游主体开放共享数据资源。

据南都记者了解,可信数据空间是基于共识规则,联接多方主体,实现数据资源共享共用的一种数据流通利用基础设施。去年11月,国家层面首次针对可信数据空间进行前瞻性的系统布局,明确提出到2028年,我国将建成100个以上可信数据空间,形成一批数据空间解决方案和最佳实践。

数据的流通与使用过程中,安全问题也不可忽视。王江平认为,应根据数据性质和用途,统筹好开源和闭源的关系,确保数据的充分利用和安全保护。

他建议,以开源方式建设可公开数据集,降低研究和开发门槛。以闭源方式建设敏感性、资产性数据集,加强数据全生命周期安全保护,配套必要的安全保障措施,防范安全风险。

王江平表示,应加快图书/期刊、视频、文献资料等高质量多模态公共数据开放,建立人大代表、政协委员监督保障机制。加强数据动态更新、安全开发利用等管理制度建设,充分释放数据要素价值。

采写:南都记者李玲 发自北京

南都全国两会报道组

扫描二维码推送至手机访问。

版权声明:本文由0538资讯网整理发布,内容均来自互联网,如有侵权联系8641340@qq.com删除。

本文链接:https://www.0538ta.cn/post/96562.html

分享给朋友:

“破解数据瓶颈,王江平:建设人工智能国家数据集具有迫切性” 的相关文章

学生不订牛奶需交过敏证明?襄阳市教育局:订奶系自愿

学生不订牛奶需交过敏证明?襄阳市教育局:订奶系自愿

近日,有网友发视频称,湖北襄阳老河口市第四中学初一年级某班班主任要求学生订牛奶,不订就需提供牛奶过敏医学证明。 视频发布者、初一年级家长闫先生告诉记者, 学校领导告知他,学校从未发布过上述通知,发布该通知的老师已被免去班主任职务,并为该班级更换新的班主任。...

中央气象台继续发布暴雨、台风、大风预警

中央气象台继续发布暴雨、台风、大风预警

中央气象台9月19日06时继续发布暴雨黄色预警:预计,9月19日08时至20日08时,内蒙古中部、河北北部、安徽东南部、江苏南部、上海、浙江大部、海南岛以及青海东北部、甘肃西南部、辽宁中部、福建西北部、江西中部等地部分地区有大到暴雨,其中,江苏南部、浙江北部...

吃不起的“地摊”……我们还能有低成本快乐吗?

吃不起的“地摊”……我们还能有低成本快乐吗?

“一起吃路边摊的日子”曾是许多人闯荡城市的宝贵记忆。这几年,地摊经济虽然带动了地摊数量快速回升,但坐地涨价的“地摊”,多了一些网红气质,少了一些实惠品质;多了一些颜值,少了几分价值。不知不觉中,“吃路边摊”竟快成了高攀不起的消费。吃不起的“地摊”曾经的路边摊...

肥西县积极开展国家网络安全宣传周活动

肥西县积极开展国家网络安全宣传周活动

今年国家网络安全宣传周定于9月9日至15日统一开展,主题为“网络安全为人民,网络安全靠人民”,其中9月10日为校园日。为增强广大师生网络安全意识,提高网络安全自护能力,肥西县各中小学校开展了丰富多彩的活动,向广大师生普及网络安全知识,共同营造安全、健康、文明...

克里姆林宫对面爆发枪战:俄罗斯女首富卷入激烈离婚诉讼,枪击致2死7伤

克里姆林宫对面爆发枪战:俄罗斯女首富卷入激烈离婚诉讼,枪击致2死7伤

当地时间9月18日,莫斯科市中心发生了一起枪击事件,导致2人死亡、至少7人受伤,至少28人在克里姆林宫对面被拘留。据称,悲剧根源是源于一起家庭纠纷,涉及俄罗斯女首富、俄罗斯在线零售商Wildberries Marketplace创始人塔蒂亚娜·巴卡尔丘克与丈...

2024年国庆放假安排来了,假期7天高速免费

2024年国庆放假安排来了,假期7天高速免费

根据《国务院办公厅关于2024年部分节假日安排的通知》,10月1日至10月7日国庆节放假调休,共7天,9月29日(星期日)和10月12日(星期六)上班。根据《国务院关于批转交通运输部等部门重大节假日免收小型客车通行费实施方案的通知》,针对春节、清明节、劳动节...

佛山南海“人文艺术季”启动,超130项精彩活动等你来玩!

佛山南海“人文艺术季”启动,超130项精彩活动等你来玩!

音乐节、戏剧节、五菜联动汇南海……八大主题超130项精彩活动等你来玩!今年中秋国庆期间,佛山南海区全面统筹区、镇(街道)、村、商圈、协会、文旅体企业,策划2024年“月满中秋·国庆共庆”南海区人文艺术季系列活动。系列活动围绕“舌尖上的盛宴、音乐盛宴之夜、激情...

22岁少年捧回世界西餐大会厨王金牌!父亲是上市公司老总,他从小喜欢做菜,从每天切八九十斤萝卜开始学厨

22岁少年捧回世界西餐大会厨王金牌!父亲是上市公司老总,他从小喜欢做菜,从每天切八九十斤萝卜开始学厨

“听说有位小区业主家的儿子,拿了个世界西餐烹饪冠军,了不起!”今天上午8点,一到宁波鄞州区下应街道东方湾邸小区,就听门口的物业工作人员在议论。9月16日凌晨,法国里昂第47届世界职业技能大赛落幕,22岁的宁波小伙康邦成和全世界1400多名顶尖选手同台竞技,捧...

俄称控制一村庄 乌称打击俄重要目标

俄称控制一村庄 乌称打击俄重要目标

俄罗斯国防部19日通报称,过去一天,俄军控制了顿涅茨克的格奥尔基耶夫卡村,在多个方向改善战术态势,占据有利前沿阵地,打击了乌军情报总局一处主要的无线电通信中心等目标。在库尔斯克方向,俄军继续进攻。乌军多次在不同方向试图突破俄军进攻被击溃。同一天,乌克兰武装部...

多方谴责黎巴嫩通信设备爆炸事件!中方呼吁维护地区和平稳定

多方谴责黎巴嫩通信设备爆炸事件!中方呼吁维护地区和平稳定

黎巴嫩多地日前相继发生传呼机和对讲机爆炸事件,持续引发关注。9月20日,南都记者注意到,目前黎巴嫩真主党指认以色列应对此事件负责,称以色列将受到“公正的惩罚”,而以色列未作回应。此外,以色列的盟友美国称,“不知道谁应对此事件负责”。当地时间9月17日,黎巴嫩...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。