海天瑞聲：大模型向多模態(tài)發(fā)展后 將會(huì)產(chǎn)生更多新型數(shù)據(jù)需求

海天瑞聲近日接受機(jī)構(gòu)調(diào)研時(shí)表示，大模型向多模態(tài)發(fā)展后，將會(huì)產(chǎn)生更多的新型數(shù)據(jù)需求。例如文生圖的多模態(tài)大模型，通過文字輸入生成對(duì)應(yīng)圖片，這就需要機(jī)器理解文字語義的同時(shí)將理解的關(guān)鍵詞與圖片的關(guān)鍵標(biāo)簽進(jìn)行映射，通過對(duì)齊兩種獨(dú)立模態(tài)關(guān)鍵特征的方式，實(shí)現(xiàn)按指令的創(chuàng)作，以此完成學(xué)習(xí)訓(xùn)練過程。因此，當(dāng)大模型向多模態(tài)能力維度拓展時(shí)，高質(zhì)量多模態(tài)訓(xùn)練數(shù)據(jù)集的持續(xù)學(xué)習(xí)訓(xùn)練的重要性將更加凸顯，多模態(tài)的發(fā)展將推動(dòng)數(shù)據(jù)服務(wù)行業(yè)進(jìn)入更大的增量空間。