7月17通博出金日,中國挪動研討院、中國挪動專業本事評測中央主辦2023年大模子評測及利用研究會,旨在共同探討大模子評測體系、利用實踐、行業尺度及配合生態等議題,推進大模子專業的廣泛利用和成長。中國中文信息學會副理事長馬少平、中國挪動研討院副院長段曉東出席會議并致辭。
會上,中國挪動研討院聯盟北京郵電大學、中國科學院算計專業研討所、北京市科學專通博優惠業研討院、科大訊飛、百度、武漢大學和重慶理工大學等著名高校、科研機構和頭部企業聯盟發行了《弈衡通用大模子評測體系白皮書》。該白皮書是產業中首個大模通博直播子評測領域白皮書,基于客觀普遍、公正公平和用戶視角的三大原理,首創性地提出了2-4-6的弈衡通用大模子評測體系。該體系將考核配景分割為根基工作和利用工作,領會四項重要評測要素,并訂定包含六大維度的50余個評測指標。弈衡評測體系可對內地外大模子開展有效評測解析,充裕揭示大模子在利用中的固有疑問,通博被抓客觀反應各模子在正確性、可信性以及安全性等方面的不同,為大模子的評測實踐和行業利用提供開導。
來自中國挪動、北京郵電大學、中國科學院算計專業研討所、信通院、科大訊飛、百度等多家單元的領導和專家,環繞運營商大模子成長思路、CV大模子前沿專業、內地優秀大模子成長局勢、大模子根基設施和生態、產業評測尺度等主題,在會上刊登了精彩演講,為推進大模子專業成長供獻了一場常識盛宴,引起了線上線下與會觀眾的熱鬧反響。
此外,會上正式成立CCIR大模子評測任務組,并發行2023 CCIR全國信息通 博 優惠檢索挑釁杯中國挪動賽道賽題。