院士谈大模型:训练花钱少,性能会打折扣

来源: 中国文明网
2024-06-07 16:53:18

  中新网6月6日电(中新财经记者 吴涛)针对目前市场上沸沸扬扬的大模型价格战,在6月5日举行的2024北京网络安全大会期间,有专家指出,训练大模型很费钱,任何说花很少一点钱就能做的,性能上肯定打了折扣。在大会上,很多院士还讨论了AI安全以及算力网络该如何更好地建设问题。

  谈训练:少花钱的性能会打折扣

  “任何说花很少一点钱就能训练大模型的,肯定是 里面做了很多简化,性能会打折扣。”中国工程院院士、鹏城实验室主任、北京大学博雅讲席教授高文在大会上谈到大模型训练成本问题。

  高文称,训练模型很花钱,我们自己算了一下,2000亿参数的模型大约要花5亿元,如果是万亿模型,肯定要接近10亿元,或者更多才能训练好一个模型。

  近一段时间,不少大模型平台纷纷宣布对面向企业市场的API(应用程序编程接口)价格下调,动辄下调90%以上,甚至直接宣布免费。不少企业解释原因称,使用了更好的手段把成本降下来。

  高文称,现在国外有一个流派,叫做规模法则,要想做一个好的模型,机器的规模要够大,数据的规模也要大,只有规模到了才能做出好模型,所以现在要想训练一个好的模型,这是非常费钱的。

  不过在大模型的大小上,中国新一代人工智能发展战略研究院执行院长龚克称,“脑的规模、神经元的规模确实不能小,但是不是一直大就可以比人更聪明呢?也不是,如非洲大象,他们的脑子比人脑还发达,但并不比人聪明,说明光靠大也不能解决所有问题。”

  谈安全:协调推进发展和治理,不要妖化AI

  随着AI的发展,其安全越发引起重视。中国工程院院士、同济大学讲席教授蒋昌俊在大会上表示,安全性是不可忽视的,目前的现状是被动式攻击、孤立式安防。如何改变?必须通过一体化算网体系,以及专业化、多模态化和大规模形式,形成安全有效的算力方式。

  龚克认为,从现在的实践来看,如果大家真正使用AI,风险并不是来自于技术太强,而是技术并不够强,存在自己各方面的技术瓶颈,从而引发很多社会焦虑。

  “人工智能必须大力发展,不发展是最大的不安全;对于人工智能风险要实事求是具体分析,协调推进发展和治理,不要妖化和神化人工智能;人工智能和网络安全本身是密切相关的,应该全力推动人工智能和网络安全的融合创新。”龚克称。

  在具体实际操作层面,高文表示,在安全方面,有些用户希望他们的数据是别人看不见的,我们专门做了一个技术,使得数据可用不可见,只有数据应用者能看得见自己的数据,其他人都看不见,但可以用,在训练的时候就可以做到相对比较安全。

  谈算力:数据价值还没完全显现出来

  大模型的发展离不开算力。蒋昌俊表示,目前算力专用定价体系尚未建立,算力服务企业各自为战,算力数据相对比较孤立。要解决这些问题,要通过算力网络的一些新型需求来拓展它的业务。

  据了解,目前国内数据交易中心有十几家。蒋昌俊认为,目前来看,数据交易效果还不是很好,因为没有经过算力的加工,数据的价值没有完全显现出来。

  蒋昌俊支招,算网运营可以采取一些市场行为,为各行各业提供服务,这才形成了我们算力优配的价值所在,“未来算网重点将从建设逐步转向调度应用。”

  中国信息通信研究院院长余晓晖此前发文指出,算力开始赋能千行百业离不开多方合力。需要各级政府以及基础电信运营商、第三方数据中心服务商、互联网企业等各类经营主体在算力基础设施建设运营中发挥各自优势,互促互补、形成合力。(完)

  詹德斌认为,尽管政治制度不同,但中韩在历史和文化方面的共性仍非常多。目前民间出现的“共性越多、矛盾越大”的奇怪现象只是历史长河中短暂的瞬间。随着后疫情时代的来临,中韩民间交流也将出现新的面貌。权起植也表示,随着韩中交流逐渐增加,韩国青年对中国的负面认知将会减少。

  站在当下的十字路口,我们更需要回答:基础研究需要怎样的资助方式,什么是真正的基础研究?“无用”和“有用”间如何平衡、转化?为何中国的基础研究一直缺乏对全人类有影响力的原创性、前瞻性成果?

  奥尔森强调,代表团此行重中之重是将听取中方关于高质量发展和绿色经济的意见,以了解澳大利亚企业未来的机遇。“我们预计会有商业成果,这些成果将在适当的时候公布,”奥尔森告诉记者。《澳大利亚人报》报道称,澳大利亚汇丰银行首席执行官安东尼·肖表示,在澳大利亚贸易委员会和外交部的协助下,代表团将热衷于探索原有贸易关系“基石”(铁矿石、煤炭)之外的新市场,尤其是绿色能源产业。

  按照王印的说法,水火箭的原理其实跟真正的火箭一致。舱体主要由饮料瓶衔接而成,把水注入“动力舱”,加入高压,在反冲力的作用下,“水火箭”就能快速升空。

  “美国欲拉菲律宾与中国对抗”,俄罗斯卫星通讯社称,美菲近来一系列扩大军事合作的行动表明,菲律宾正成为美国在南海和台海针对中国的重要跳板,这将导致地区局势不可避免陷入紧张。报道称,美国国务卿布林肯在G7外长会前访问越南,也想把越南拉入与中国对抗的前线。然而,越南人非常清楚这是美国人设下的陷阱。越南学者接受卫星通讯社采访时称,2019年越南国防白皮书明确提出“四不”政策,即不参加军事联盟、不联合一国反对另一国、不允许外国在越南建立军事基地或利用越南领土来反对其他国家、在国际关系中不使用武力或威胁使用武力。“越南‘四不’明确表明了河内在外交事务中的立场。”报道称,现在除了菲律宾,东盟没有其他国家上美国的当,而美国正在打开菲律宾的“战争手提箱”。

  无独有偶,除深圳楼市外,上周也有市场消息传出上海二手房核验价和“三价就低”疑似有所放松。上海某股份行个贷人员对第一财经记者称,并未收到政策变动相关通知,目前仍按照原有政策执行。但是从去年开始,部分地区二手房涉税评估价较之前有一定提升。

李宗仁

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有