全球速讀：中國信通院“可信 AI”大模型評(píng)測(cè)完成，近期啟動(dòng)編制工作

(資料圖片)

4 月 11 日消息，中國信通院此前成立大模型工作組，吸納成員單位 60 余家，覆蓋大模型頭部企業(yè)、互聯(lián)網(wǎng)企業(yè)、科研院所、電信運(yùn)營商、金融機(jī)構(gòu)等，圍繞技術(shù)研討、產(chǎn)業(yè)交流、標(biāo)準(zhǔn)研制、評(píng)估測(cè)試、案例征集等方面開展多項(xiàng)工作。

中國信通院聯(lián)合工作組 60 余家單位，共同研制了《大規(guī)模預(yù)訓(xùn)練模型技術(shù)和應(yīng)用評(píng)估方法》系列標(biāo)準(zhǔn)，包含模型開發(fā)、模型能力、模型應(yīng)用和可信要求四個(gè)重要部分。目前模型開發(fā)、模型能力兩部分標(biāo)準(zhǔn)已發(fā)布，模型開發(fā)標(biāo)準(zhǔn)包括數(shù)據(jù)構(gòu)建、模型訓(xùn)練、模型管理、模型部署 4 個(gè)能力域、16 個(gè)能力子域、60 余個(gè)能力項(xiàng)，全面評(píng)估研究主體開發(fā)大模型的能力。

模型能力標(biāo)準(zhǔn)包含功能豐富度、性能優(yōu)越度、服務(wù)成熟度 3 個(gè)評(píng)測(cè)維度、8 個(gè)能力域、30 余個(gè)能力項(xiàng)，全面評(píng)估大模型的各項(xiàng)技術(shù)能力。模型應(yīng)用標(biāo)準(zhǔn)初步定稿，包含應(yīng)用豐富度、服務(wù)成熟度、運(yùn)營管理能力 3 個(gè)能力域、14 個(gè)能力子域、30 余個(gè)能力項(xiàng)，綜合評(píng)估大模型應(yīng)用成熟度。可信要求標(biāo)準(zhǔn)正在前期研究中，近期將啟動(dòng)編制工作。

據(jù)悉，中國科學(xué)院自動(dòng)化研究所、武漢人工智能研究院研發(fā)的“紫東太初”大模型，在 2 月 12 日-3 月 3 日參與可信 AI 評(píng)測(cè)工作，模型開發(fā)和模型能力兩部分獲得 4 + 級(jí)評(píng)分，成為國內(nèi)首家通過該項(xiàng)評(píng)測(cè)的學(xué)術(shù)機(jī)構(gòu)。

關(guān)鍵詞：