在2022年8月的“2022年可信AI峰會”上，中國信息通信研究院對外公布并解讀《人工智能研發(fā)運(yùn)營一體化（Model/MLOps）能力成熟度模型 第二部分：模型交付》征求意見稿。

云大所人工智能部副主任（主持工作）曹峰從背景、價值及結(jié)構(gòu)等維度對標(biāo)準(zhǔn)（征求意見稿）進(jìn)行正式公布。云大所人工智能部工程師胡慧從框架結(jié)構(gòu)、內(nèi)容體系、編寫維度等方面對標(biāo)準(zhǔn)進(jìn)行了詳細(xì)解讀。

本套標(biāo)準(zhǔn)體系包括了以開發(fā)管理、模型交付和模型運(yùn)營為核心的MLOps過程管理的3個標(biāo)準(zhǔn)，ModelOps模型治理的3個標(biāo)準(zhǔn)以及工具標(biāo)準(zhǔn)，共計7個標(biāo)準(zhǔn)。此標(biāo)準(zhǔn)體系的價值在于為企業(yè)提供標(biāo)準(zhǔn)化、可落地的MLOps體系建設(shè)指南、定位標(biāo)尺、改進(jìn)方向，幫助企業(yè)建立和不斷完善AI生產(chǎn)管理體系，助力智能化轉(zhuǎn)型。其中，開發(fā)管理標(biāo)準(zhǔn)已于2022年4月對外發(fā)布，并于7月完成開發(fā)管理的首輪測評。本次峰會發(fā)布了模型交付標(biāo)準(zhǔn)的征求意見稿。

模型交付標(biāo)準(zhǔn)圍繞高效構(gòu)建和持續(xù)部署，致力于實(shí)現(xiàn)規(guī)模化、一體化、標(biāo)準(zhǔn)化的過程管理，可通用、可復(fù)用的模型生產(chǎn)流水線，提升數(shù)據(jù)、模型、特征等AI資產(chǎn)的版本管理和價值共享能力，打造全能力的CI(持續(xù)集成)、CD（持續(xù)部署）、CT(持續(xù)訓(xùn)練)流水線。

模型交付標(biāo)準(zhǔn)分為構(gòu)建集成、部署發(fā)布、模型測試、配置管理、度量反饋等5個能力子域，從基礎(chǔ)級、專業(yè)級、領(lǐng)先級、卓越級和領(lǐng)航級5個級別分別提出了不同的能力成熟度要求。

本標(biāo)準(zhǔn)囊括5個能力子域、12個能力項(xiàng)、32個能力子項(xiàng)及300余條分級要求。在內(nèi)容體系上，按能力子域-能力項(xiàng)-能力子項(xiàng)的層級，梳理各項(xiàng)定義內(nèi)涵和能力成熟度分級具體要求。

在編寫維度上參照能力成熟度分級，從初始化、散亂無序的小作坊模式向系統(tǒng)化、自動化、智能化的工廠流水線模式進(jìn)化躍遷。

此次大會還公布了模型交付標(biāo)準(zhǔn)的參編單位，共有30余家單位的專家參與標(biāo)準(zhǔn)編制、討論和評審，為本標(biāo)準(zhǔn)的高質(zhì)量產(chǎn)出做出了巨大貢獻(xiàn)。

目前云大所已根據(jù)本系列標(biāo)準(zhǔn)啟動測評工作，旨在衡量企業(yè)AI落地生產(chǎn)全生命周期的技術(shù)、管理和應(yīng)用水平，樹立行業(yè)標(biāo)桿。本套評測體系幫助各類企業(yè)客觀定位AI生產(chǎn)過程的能力，以評促建、以評促改，輔助快速查漏補(bǔ)缺，提升能力和水平，實(shí)現(xiàn)降本增效，引領(lǐng)產(chǎn)業(yè)前進(jìn)發(fā)展。具體的評測流程如下圖所示：

目前，開發(fā)管理首輪評測結(jié)果已公布，第二輪評測即將啟動，模型交付首輪評測將于今年10月啟動報名。下半年的工作計劃安排如下，對評測有興趣的單位或有其他合作意向的單位（如標(biāo)準(zhǔn)編寫、實(shí)踐指南編寫等），請與我們聯(lián)系。