近日,在2024中國移動全球合作伙伴大會期間,中國移動攜手工信部中國電子技術(shù)標(biāo)準(zhǔn)化研究院、中國電信、國家電網(wǎng)、中國石油、科大訊飛等產(chǎn)業(yè)各方共同發(fā)布了大模型評測體系建設(shè)的新成果——《通用大模型評測標(biāo)準(zhǔn)》,為產(chǎn)業(yè)界遴選優(yōu)質(zhì)AI大模型提供重要參考依據(jù)。
中國移動董事長楊杰在大會上表示,當(dāng)今,以數(shù)智化為主要特征的新一輪科技革命和產(chǎn)業(yè)變革深入發(fā)展,數(shù)據(jù)、算力、人工智能成為新質(zhì)生產(chǎn)力的重要驅(qū)動因素。AI加速發(fā)展,為千行百業(yè)、千家萬戶注智賦能,將有力推動融合創(chuàng)新、信息消費不斷躍升,引領(lǐng)經(jīng)濟社會從“互聯(lián)網(wǎng)+”“5G+”邁向“AI+”。
據(jù)了解,大模型評測是助力人工智能賦能行業(yè)應(yīng)用的重要一環(huán)。當(dāng)前眾多企業(yè)已啟動大模型建設(shè),亟需建立配套的通用大模型和行業(yè)大模型評測體系。中國移動聯(lián)合電子標(biāo)準(zhǔn)院、央企及產(chǎn)業(yè)各方初步完成通用大模型評測標(biāo)準(zhǔn)制定。
據(jù)介紹,此次發(fā)布的評測標(biāo)準(zhǔn)基于“2-4-6”框架:“2”代表兩類評測視角,以重點行業(yè)實際使用需求為導(dǎo)向,將評測任務(wù)劃分為理解和生成兩類視角;“4”代表四類評測要素,從評測全生命周期中提取出評測工具、評測數(shù)據(jù)、評測方式和評測指標(biāo)四類關(guān)鍵要素;“6”代表六大評測維度,綜合考慮大模型應(yīng)用過程中的核心能力。該標(biāo)準(zhǔn)廣泛吸納產(chǎn)學(xué)研用各方意見,并結(jié)合行業(yè)特色場景需求,可為通用大模型全面評估提供客觀依據(jù)和重要參考。
下一步,中國移動將聯(lián)合產(chǎn)學(xué)研用各方,深入挖掘石油、電力、交通和物流等重點行業(yè)應(yīng)用需求,持續(xù)打造并完善通用及行業(yè)大模型評測體系,助力國產(chǎn)大模型高質(zhì)量發(fā)展。
分享到微信 ×
打開微信,點擊底部的“發(fā)現(xiàn)”,
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。