近日,中國電信聯(lián)合清華大學(xué)等相關(guān)單位制定的《人工智能-大模型預(yù)訓(xùn)練模型-服務(wù)能力成熟度評估》標(biāo)準(zhǔn),順利通過工業(yè)和信息化部認(rèn)證,成為國家級標(biāo)準(zhǔn),并在工信部人工智能檢驗(yàn)檢測基礎(chǔ)服務(wù)平臺發(fā)布。標(biāo)準(zhǔn)為評估大模型能力水平提供了全面的檢測手段,對行業(yè)大模型的發(fā)展具有重要意義。
標(biāo)準(zhǔn)提出了大模型預(yù)訓(xùn)練服務(wù)能力成熟度評估框架,規(guī)定了大模型預(yù)訓(xùn)練模型服務(wù)的能力要求、成熟度等級及評估方法。
在服務(wù)能力方面,預(yù)訓(xùn)練成熟度能力域包括平臺、開發(fā)定制、推理及應(yīng)用等服務(wù),預(yù)訓(xùn)練大模型平臺服務(wù)關(guān)注大模型開發(fā)定制的IT環(huán)境,模型開發(fā)定制服務(wù)關(guān)注大模型開發(fā)狀態(tài),模型推理及應(yīng)用域關(guān)注大模型的運(yùn)行狀態(tài)。
在成熟度等級方面,模型服務(wù)成熟度等級劃分為基礎(chǔ)應(yīng)用級、協(xié)同優(yōu)化級、自定義生產(chǎn)級三類,對預(yù)訓(xùn)練模型基礎(chǔ)技術(shù)、服務(wù)復(fù)雜度和定制化能力等要求逐步提高。
在評估方法方面,標(biāo)準(zhǔn)對預(yù)訓(xùn)練服務(wù)能力進(jìn)行全面評估,提出各成熟等級應(yīng)具備的預(yù)訓(xùn)練能力和關(guān)鍵性能指標(biāo),為大模型預(yù)訓(xùn)練服務(wù)能力建設(shè)提供指導(dǎo)。
以大模型為代表的新一輪人工智能技術(shù)是科技革命和產(chǎn)業(yè)變革的重要驅(qū)動力。中國電信持續(xù)加強(qiáng)核心技術(shù)攻關(guān),重點(diǎn)推動基礎(chǔ)通用大模型向垂直行業(yè)大模型的縱深演進(jìn),圍繞教育、政務(wù)、農(nóng)業(yè)、應(yīng)急等行業(yè)領(lǐng)域,預(yù)計將發(fā)布精準(zhǔn)教學(xué)大模型、政務(wù)服務(wù)大模型、神農(nóng)一號大模型、應(yīng)急大模型等共計40個行業(yè)大模型。