智源研究院:国内头部模型已达国际一流水平,但能力发展不均衡

来源: 羊城派
2024-05-18 16:07:53

  新浪科技讯 5月18日下午消息,在北京智源研究院(智源研究院)大模型评测发布会上,智源评测体系发布并公布了140余个国内外开/闭源语言及多模态大模型能力评测结果。评测结果显示,在中文语境下,国内头部语言模型的综合表现已接近国际一流水平,但存在能力发展不均衡情况;在多模态理解图文问答任务上,开闭源模型平分秋色,国产模型表现突出;在中文语境下的文生图能力上,国产多模态模型与国际一流水平差距较小。

  据评测结果,在中文语境下,字节跳动豆包Skylark2、OpenAI GPT-4位居第一、第二,国产大模型更懂中国用户。在语言模型客观评测中,OpenAI GPT-4、百川智能Baichuan3位列第一、第二。百度文心一言4.0、智谱华章GLM-4和月之暗面Kimi均进入语言模型主客观评测前五。

  多模态理解模型客观评测结果显示,图文问答方面,阿里巴巴通义Qwen-vl-max与上海人工智能实验室InternVL-Chat-V1.5先后领先于OpenAI GPT-4,LLaVA-Next-Yi-34B和上海人工智能实验室Intern-XComposer2-VL-7B紧随其后。

  在海淀区教委支持下,智源研究院联合与海淀区教师进修学校对齐学生测验方式,考察大模型与人类学生的学科水平差异。评测发现,模型在综合学科能力上与海淀学生平均水平仍有差距,普遍存在文强理弱的情况,并且对图表的理解能力不足,大模型未来有很大的提升空间。

  据介绍,2023年6月,智源研究院与多个高 校团队共建FlagEval大模型评测平台上线,迄今为止已完成1000多次覆盖全球多个开源大模型的评测和报告发布。本次评测使用了20余个数据集、超8万道考题,包括与合作单位共建和智源自建的多个评测数据集。(文猛)

责任编辑:张倩

  桑德表示,美国联邦调查局、美国国土安全部甚至是美国国会警察局的情报部门,在国会大厦暴乱事件发生数周前,都已经收到了有关一些极右翼分子准备对国会发动攻击的风声。但是,这些情报被淡化处理。在他所收到的多份情报公告中,都没有对此发出预警。

  汲斌昌1963年11月出生,山东昌邑人。公开信息显示,汲斌昌在经济领域工作多年,他1986年从四川大学国民经济管理系毕业后,进入山东省经济体制改革办公室,2000年任副主任。

  南宁海关商检处处长方敏说:“在境内开展铜精矿‘保税混矿’试点的成功实施,代替了原只能在境外完成混矿再进口的模式,从备案矿源开始执行准入核查,有利于海关和环保部门开展全链条监管,既降低检验不合格风险,纾解进口环保隐患,又为铜冶炼企业降本提质,有效提升我国特别是西南地区企业铜矿砂产品供应链体系综合服务能力和市场竞争力。”

  值得注意的是,2021年8月7日,国家林业和草原局、农业农村部公告(2021年第15号)《国家重点保护野生植物名录》中,中华夏块菌(夏松露)、冬虫夏草、松茸等被列入国家二级保护野生植物行列。据了解,夏松露分布区狭小,且产量不多。近年来,四川、云南松露产地还在采挖方式、人工培育方面进行了探索。

  随着疫情防控进入新阶段,医务人员面临着新冠感染和服务量激增的双重压力。通知对公立医疗机构和疾控机构在岗人员核增一次性工作补助、发放临时性工作补助、强化保障和统筹调配、建立健全医务人员帮扶慰问机制、落实职称倾斜政策、保障医务人员执业安全、强化正向激励宣传等七方面做了具体要求。

  据了解,为了适应陆地辐射环境,陆生植物演化出了一些调控机制,以减少紫外线对植物体的伤害。在植物体的生殖细胞中这种机制表现为植物的孢子和花粉的外壁中含有大量功能与“防晒霜”十分相似的化合物,也就是香豆酸和阿魏酸,这些化合物可抵抗紫外线引起的氧化作用。为了抵御紫外线,植物体会相应减少叶绿素的合成,从而导致植物体光合作用的减弱,进而使得植物体对于温室气体吸收能力减弱,进一步加重了二叠纪末期火山喷发引起的全球温室气体增加的负面效果。同时,植物叶片中的香豆酸和阿魏酸是动物很难消化吸收的物质,这些物质的增加间接影响了陆地食物链,可能是导致二叠纪末陆地食草动物以及昆虫大灭绝的主要原因。

黄柏亚

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有