今天（4日）2024世界人工智能大會(huì)暨人工智能全球治理高級(jí)別會(huì)議在上海世博中心啟幕。在“AI賦工業(yè)，數(shù)智啟未來”人工智能賦能新型工業(yè)化主題論壇上，《中國AI大模型工業(yè)應(yīng)用指數(shù)（2024年）》發(fā)布。
隨著人工智能技術(shù)的快速迭代發(fā)展，AI大模型工業(yè)應(yīng)用場(chǎng)景不斷豐富�！爸袊鳤I大模型工業(yè)應(yīng)用指數(shù)”旨在及時(shí)跟蹤國內(nèi)外AI大模型技術(shù)發(fā)展態(tài)勢(shì)，挖掘大模型潛在工業(yè)應(yīng)用場(chǎng)景，系統(tǒng)評(píng)估通用人工智能與工業(yè)融合的進(jìn)展與成效。
指數(shù)體系由大模型基礎(chǔ)應(yīng)用能力與行業(yè)應(yīng)用能力構(gòu)成。大模型基礎(chǔ)應(yīng)用能力包含文生文、圖生文等領(lǐng)域的準(zhǔn)確性、穩(wěn)定性能力；大模型的行業(yè)應(yīng)用能力包含民爆、電力、石化、鋼鐵、醫(yī)藥等重點(diǎn)行業(yè)大模型在研發(fā)設(shè)計(jì)、生產(chǎn)制造、運(yùn)維管理等環(huán)節(jié)具體場(chǎng)景的應(yīng)用有效程度。
經(jīng)過多輪測(cè)評(píng)與專家研討，在基礎(chǔ)應(yīng)用能力方面，率先發(fā)布中國AI大模型文生文準(zhǔn)確性與穩(wěn)定性指數(shù)，其中準(zhǔn)確性指數(shù)反映了國內(nèi)外頭部AI大模型在工業(yè)領(lǐng)域文本生成的精準(zhǔn)程度�？傮w上，國內(nèi)大模型準(zhǔn)確性指數(shù)為78，國際大模型準(zhǔn)確性指數(shù)為76，國內(nèi)頂級(jí)大模型在工業(yè)領(lǐng)域文本生成的準(zhǔn)確性已具備競爭力；在行業(yè)知識(shí)層面，我國在多個(gè)行業(yè)如電力、建材、紡織的知識(shí)儲(chǔ)備已經(jīng)具備一定領(lǐng)先優(yōu)勢(shì)；細(xì)分能力層面，國內(nèi)模型在語句能力和專業(yè)知識(shí)掌握上比國外模型更加優(yōu)秀，在數(shù)理能力還有待提升。穩(wěn)定性指數(shù)代表模型在一定外部擾動(dòng)下持續(xù)給出正確回答的能力，反映模型在復(fù)雜環(huán)境下的魯棒性。總體上，國內(nèi)大模型穩(wěn)定性指數(shù)為71分，低于國際的74分；在行業(yè)知識(shí)層面，電力和采礦等行業(yè)知識(shí)儲(chǔ)備有待提升；在細(xì)分能力層面，國內(nèi)大模型需要在順序變換和邏輯擾動(dòng)等領(lǐng)域需進(jìn)一步加強(qiáng)。
在行業(yè)應(yīng)用能力方面，率先發(fā)布中國AI大模型民爆行業(yè)應(yīng)用指數(shù)，針對(duì)大模型在民爆行業(yè)安全防控場(chǎng)景開展應(yīng)用評(píng)測(cè)�？傮w上，國內(nèi)大模型行業(yè)應(yīng)用指數(shù)為84分，國際為93分，國外大模型仍具備領(lǐng)先優(yōu)勢(shì)；在場(chǎng)景細(xì)分能力上，國內(nèi)大模型在人員行為監(jiān)測(cè)、事故監(jiān)測(cè)、危險(xiǎn)車輛監(jiān)測(cè)細(xì)分場(chǎng)景與國外大模型有一定的差距，國內(nèi)模型仍有較大進(jìn)步空間。