“本源悟空”全球首次运行十亿参数级AI大模型微调任务
中新社合肥4月7日电 (记者 张俊)记者7日从安徽省量子计算工程研究中心获悉,中国第三代自主超导量子计算机“本源悟空”近日完成全球首次运行十亿参数级AI大模型微调任务。
本次任务由本源量子计算科技(合肥)股份有限公司(简称“本源量子”)、合肥综合性国家科学中心人工智能研究院等联合攻关完成的。实验结果显示,在参数量减少76%的前提下,AI大模型训练效果反而提升8.4%。这一成果不仅验证了量子计算助力实现大模型轻量化的可行性,更为破解大模型“算力焦虑”开辟了新路径。
大模型微调是指在通用大模型的基础上,通过进一步训练特定领域数据,使其适应医疗诊断、金融风控等专业场景。传统低秩微调面临性能瓶颈、泛化能力有限等问题,量子计算凭借其叠加态和纠缠态特性可同时探索海量参数组合,提升大模型微调的效率。
本源量子副总裁窦猛汉介绍,团队创新设计了一种量子加权张量混合参数微调的方法,将模型权重转化为量子神经网络与张量网络混合架构,前者通过量子门操作提取高维非线性特征,张量网络则压缩参数规模。
在“本源悟空”的量子芯片上,AI大模型单批次数据可生成数百个量子任务并行处理。实验数据显示,优化后的模型在心理咨询对话数据集上训练损失降低15%,数学推理任务的严格准确率从68%提升至82%。合肥综合性国家科学中心人工智能研究院副研究员陈昭昀表示,这是量子计算首次“真机实战”AI大模型任务,证明现有硬件已能初步支撑大模型微调。
截至目前,“本源悟空”超导量子计算机全球访问已覆盖139个国家和地区,完成35万个量子运算任务,涵盖流体动力学、金融、生物医药等多个行业领域。(完)
-
2025高考志愿填报在即 一文读懂大类招生与“云咨询”攻略
央视网消息:2025年高考志愿填报将于6月下旬陆续展开。现在,很多高校普遍采用的招生方式是“大类招生”,什么是大类招生?与普通专业招生有何不同?志愿填报时有哪些注意事项?一起来了解一下。大类招生为考生提供更灵活的选择空间大类招生是指高校将相...
-
2025强基计划再升级!@高考生 报考千万别错过这个环节
这几天,强基计划试点高校陆续进入校考阶段。强基计划,是教育部从2020年起实行的一项基础学科招生改革试点,目前在我国39所“双一流”高校试点,主要面向数学、物理、化学、生物、历史、哲学、古文字学、生物育种等基础学科和国家重大战略领域相关专业招...
-
“低空技术与工程”专业前景如何?一文了解新专业
今年,教育部发布新增29种本科专业,其中,低空技术与工程专业备受关注。根据规划,到2030年我国要推动低空经济形成万亿级市场规模,这也意味着大量的人才需求。这个专业具体学什么?培养目标是什么?今年将开设这一专业的北京航空航天大学,搭建了一个应...
-
分数之外,如何守护青少年身心健康?
焦点访谈|分数之外,如何守护青少年身心健康?央视网消息(焦点访谈):这两天,各地的高考分数陆续公布,中考也刚刚结束,等着出分。分数,自然是牵动着千万学子和家长的神经,可是比分数更重要的是中小学生的身心健康。在分数之外,如何守护中小学生健...
-
抱冬瓜睡觉能降温?但千万别选错品种
家人们,最近超火的“抱冬瓜睡觉”你试过吗?据说能防暑降温,还便宜耐用,男女老少甚至宠物都能用!这方法可不是瞎编的,古代就有《夏夜抱瓜眠》的诗为证。为啥冬瓜这么神奇?首先,它含水量高达95%以上,就像个“天然水枕”,一接触就能吸走体表热量。...
-
【讲习所中国与世界】习近平以“三点建议”推动上合发展新征程
【本期导读】7月15日,中国国家主席习近平在北京集体会见上海合作组织成员国外长理事会会议外方代表团团长,对上海合作组织发展提出“三点建议”:一是牢记成立初心,做“上海精神”的火炬手;二是回应人民期待,做深化合作的行动派;三是担当时代使命,...