近日，美格智能高算力AI模組產(chǎn)品團(tuán)隊(duì)，發(fā)揮軟硬件一體協(xié)同開(kāi)發(fā)能力，在基于高通驍龍800平臺(tái)的自研算力模組上，成功運(yùn)行文生圖大模型Stable Diffusion。

Stable Diffusion是基于文本到圖像的生成式AI大模型，能夠基于任何文本輸入，在數(shù)十秒內(nèi)創(chuàng)作出逼真圖像。其參數(shù)超過(guò)10億，迄今為止主要限于在云端運(yùn)行。

運(yùn)行Stable Diffusion大模型的高算力模組，在硬件上選用了高通驍龍800系列的高算力SoC處理器，在軟件上使用了高通AI模型增效工具包(AIMET)實(shí)現(xiàn)模型轉(zhuǎn)換，在無(wú)需重新訓(xùn)練的情況下，克服了模型參數(shù)從FP32壓縮到INT8所產(chǎn)生的精度損失，從而讓大模型在算力模組上始終保持高效運(yùn)行。

美格智能研發(fā)團(tuán)隊(duì)在硬件和軟件層面的進(jìn)一步優(yōu)化，保證大模型運(yùn)行精度的同時(shí)，有效降低了內(nèi)存帶寬消耗，充分發(fā)揮了高算力模組AI硬件的最大效能，最終順利在算力模組端側(cè)跑通了Stable Diffusion大模型。