以多樣性算力測(cè)試體系，打造產(chǎn)業(yè)進(jìn)步的公正“標(biāo)尺”

當(dāng)前，我們正在大步邁入“算力時(shí)代”。隨著整個(gè)社會(huì)加速數(shù)字化轉(zhuǎn)型，尤其是5G、人工智能、大數(shù)據(jù)、區(qū)塊鏈等技術(shù)興起，以及遠(yuǎn)程醫(yī)療、智慧教育、無(wú)人駕駛、金融科技等應(yīng)用加速落地，算力在經(jīng)濟(jì)社會(huì)發(fā)展中扮演愈來(lái)愈重要的角色，成為支撐數(shù)字經(jīng)濟(jì)蓬勃發(fā)展的新引擎。不同行業(yè)的多樣化應(yīng)用要求不同的數(shù)據(jù)和算力支持，計(jì)算多樣性已經(jīng)成為必然。

隨著多樣性算力的廣泛應(yīng)用，國(guó)內(nèi)現(xiàn)有算力產(chǎn)品測(cè)評(píng)和認(rèn)證體系的不完善，造成了供需雙方巨大的資源和人力浪費(fèi)，對(duì)于產(chǎn)業(yè)規(guī)模的持續(xù)發(fā)展產(chǎn)生了制約。為此，亟需建立開(kāi)放、中立和公正的多樣性算力測(cè)評(píng)工具平臺(tái)和一致的測(cè)評(píng)體系，來(lái)降低重復(fù)性的工作，以及樹(shù)立有序競(jìng)爭(zhēng)的產(chǎn)業(yè)環(huán)境促進(jìn)多樣性算力持續(xù)創(chuàng)新。

2021年中國(guó)移動(dòng)全球合作伙伴大會(huì)期間，中國(guó)移動(dòng)聯(lián)合業(yè)界多家芯片公司共同打造的多樣性算力芯片孵化平臺(tái)“芯巢”舉行了發(fā)布儀式，聚焦“計(jì)算”與“數(shù)字本質(zhì)，以孵化新型芯片為要義，提升多元化計(jì)算能力，構(gòu)建開(kāi)放、健全的多樣性算力生態(tài)系統(tǒng)。時(shí)隔兩年，2023年4月24日第二屆多樣性算力產(chǎn)業(yè)峰會(huì)上，為推動(dòng)多樣性算力技術(shù)和產(chǎn)業(yè)發(fā)展，中國(guó)移動(dòng)、華為、清華大學(xué)、中國(guó)電信、中國(guó)聯(lián)通等11家初創(chuàng)成員共同發(fā)起成立多樣性算力產(chǎn)業(yè)及標(biāo)準(zhǔn)推進(jìn)委員會(huì)，并發(fā)布“芯巢多樣性算力孵化平臺(tái)”（簡(jiǎn)稱(chēng)“芯巢平臺(tái)”），構(gòu)建敏捷、智能的芯片孕育環(huán)境，助力產(chǎn)業(yè)打造開(kāi)放、健全的多樣性算力生態(tài)體系。

從“芯巢”到“芯巢平臺(tái)”，其宗旨在于通過(guò)以標(biāo)準(zhǔn)規(guī)范為牽引，以孵化迭代為途徑，以產(chǎn)業(yè)推廣為目的的一整套解決方案，以期助力提升國(guó)內(nèi)多樣性算力芯片能力，快速滿足通信等重點(diǎn)行業(yè)極致要求的算力孵化平臺(tái)；其意義在于芯巢平臺(tái)可以提供節(jié)約人力重復(fù)性芯片測(cè)試工作、快速評(píng)估芯片服務(wù)能力、驗(yàn)證多產(chǎn)品之間兼容性滿足程度、提供可視化報(bào)告等服務(wù)，持續(xù)推動(dòng)多樣性算力發(fā)展。

如會(huì)上鄭緯民院士所總結(jié)道：“多樣性算力的規(guī)模部署，關(guān)鍵在于兩個(gè)方面，一是供給方做好軟硬件協(xié)同和異構(gòu)融合創(chuàng)新，釋放多樣性算力潛能；二是需求方牽頭構(gòu)建一致性測(cè)評(píng)體系，以需求和評(píng)測(cè)牽引產(chǎn)品快速迭代，引導(dǎo)用戶(hù)敢用、多用經(jīng)過(guò)測(cè)評(píng)認(rèn)證的多樣性算力產(chǎn)品。”

而當(dāng)前，用戶(hù)在采購(gòu)算力軟硬件產(chǎn)品時(shí)，往往需要面臨多種選擇。這需要辨別各家產(chǎn)品的性能、功能、兼容性、安全和可靠性等，以及考慮廠商提供產(chǎn)品和技術(shù)后的供應(yīng)保障能力，確保業(yè)務(wù)系統(tǒng)的連續(xù)性和供應(yīng)鏈的安全性。鑒于算力基礎(chǔ)設(shè)施供應(yīng)鏈的復(fù)雜性，多樣性算力測(cè)評(píng)和驗(yàn)證為最終的基礎(chǔ)設(shè)施業(yè)主和運(yùn)營(yíng)方提供了多維度的測(cè)評(píng)和標(biāo)準(zhǔn)規(guī)范，如供應(yīng)可靠性測(cè)評(píng)、功能性能測(cè)評(píng)、兼容性測(cè)評(píng)等。同時(shí)，測(cè)評(píng)流程規(guī)范化并符合國(guó)家和國(guó)際自愿性團(tuán)體標(biāo)準(zhǔn)的規(guī)則制定，代表了產(chǎn)業(yè)鏈廠商的共識(shí)，為用戶(hù)提供更有力的算力基礎(chǔ)設(shè)施采購(gòu)和招標(biāo)參考。

多樣性算力的測(cè)評(píng)體系依賴(lài)大量的測(cè)試工具與IT平臺(tái)來(lái)提升測(cè)試的效率，芯巢將作為整體工具平臺(tái)的一個(gè)重要組成部分。在推委會(huì)的總體協(xié)調(diào)下為廣大成員提供服務(wù)。

目前，國(guó)內(nèi)算力產(chǎn)品的測(cè)評(píng)和認(rèn)證體系還存在著一系列問(wèn)題。首先，這個(gè)體系呈現(xiàn)出碎片化的現(xiàn)狀。不同領(lǐng)域的企業(yè)標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)以及測(cè)評(píng)機(jī)構(gòu)自定義的測(cè)評(píng)準(zhǔn)則和工具導(dǎo)致缺乏統(tǒng)一的面向用戶(hù)需求的測(cè)評(píng)體系。這樣的現(xiàn)狀會(huì)導(dǎo)致測(cè)試結(jié)果無(wú)法在用戶(hù)間得到相互認(rèn)可，各個(gè)用戶(hù)單位都要自行組織測(cè)評(píng)活動(dòng)，這樣就會(huì)造成巨大的資源和人力浪費(fèi)。

其次，測(cè)評(píng)結(jié)果缺乏可對(duì)比性�，F(xiàn)有的測(cè)試標(biāo)準(zhǔn)規(guī)范過(guò)于注重產(chǎn)品能力條目的設(shè)置，而普遍缺乏等級(jí)或者分?jǐn)?shù)權(quán)重設(shè)置。測(cè)試結(jié)果通常只能發(fā)放證書(shū)或者是只能區(qū)分各個(gè)能力項(xiàng)通過(guò)與否的測(cè)試報(bào)告。這樣，產(chǎn)品的測(cè)評(píng)結(jié)果是區(qū)分不出能力等級(jí)或者測(cè)評(píng)分?jǐn)?shù)高低的。各測(cè)試結(jié)果之間很難進(jìn)行對(duì)比，也無(wú)法滿足用戶(hù)單位支撐采購(gòu)排名的訴求，測(cè)評(píng)結(jié)果不能支撐商業(yè)評(píng)價(jià)和采購(gòu)的能力。

再次，部分評(píng)測(cè)規(guī)范和工具與用戶(hù)需求脫節(jié)。第三方測(cè)評(píng)機(jī)構(gòu)自行定義的測(cè)評(píng)準(zhǔn)則或者測(cè)評(píng)工具，如各類(lèi)國(guó)產(chǎn)化測(cè)評(píng)，缺乏相關(guān)的標(biāo)準(zhǔn)支撐或者產(chǎn)業(yè)共識(shí)，執(zhí)行過(guò)程中容易引起爭(zhēng)議。同時(shí)測(cè)評(píng)規(guī)范在制定過(guò)程中缺乏用戶(hù)單位需求的對(duì)齊，所定義的測(cè)試內(nèi)容與用戶(hù)單位所關(guān)心考核內(nèi)容相差較大。這樣，測(cè)評(píng)活動(dòng)通常解決不了用戶(hù)單位的測(cè)評(píng)需求，導(dǎo)致有實(shí)力的用戶(hù)單位不得不自行組織測(cè)試。

最后，測(cè)評(píng)結(jié)果缺乏有效的背書(shū)支撐。缺乏能達(dá)成產(chǎn)業(yè)共識(shí)的信用背書(shū)體系來(lái)支撐產(chǎn)品測(cè)評(píng)結(jié)果的可對(duì)比性和可量化性。雖然用戶(hù)單位對(duì)測(cè)試結(jié)果有排名訴求，但是測(cè)評(píng)機(jī)構(gòu)對(duì)產(chǎn)品的測(cè)評(píng)等級(jí)、等分情況和排名的信用背書(shū)存在顧慮。即使某些測(cè)評(píng)機(jī)構(gòu)自定義測(cè)評(píng)比拼準(zhǔn)則，測(cè)評(píng)結(jié)果的權(quán)威性也容易受到挑戰(zhàn)。

測(cè)評(píng)孤島化或者碎片化其實(shí)反應(yīng)了個(gè)性化訴求與標(biāo)準(zhǔn)化方法之間的失衡。推委會(huì)創(chuàng)造性的提出測(cè)試內(nèi)容的“原子化”和累積滿足用戶(hù)需求的測(cè)評(píng)項(xiàng)的題庫(kù)，并允戶(hù)單位按需從庫(kù)中編排形成個(gè)性化“考題”。推委會(huì)對(duì)原子化測(cè)試項(xiàng)制定過(guò)程的公信力負(fù)責(zé)，對(duì)測(cè)評(píng)實(shí)驗(yàn)室的資質(zhì)進(jìn)行認(rèn)定。用戶(hù)單位可以通過(guò)推委會(huì)平臺(tái)提出自己評(píng)測(cè)需求，參評(píng)單位可以自由參加推委會(huì)評(píng)測(cè)項(xiàng)的制定過(guò)程。最終形成供需雙方、三方評(píng)測(cè)、推委會(huì)平臺(tái)的多方動(dòng)態(tài)平衡。推委會(huì)的三大措施包括：

測(cè)評(píng)內(nèi)容“原子化”，廣泛覆蓋評(píng)測(cè)需求匯聚為測(cè)評(píng)項(xiàng)題庫(kù)

每個(gè)測(cè)試項(xiàng)定義標(biāo)準(zhǔn)化的測(cè)試用例。每個(gè)測(cè)試項(xiàng)定義獨(dú)立的得分評(píng)判機(jī)制。標(biāo)準(zhǔn)附錄中為相應(yīng)的參考權(quán)重值。每個(gè)測(cè)評(píng)項(xiàng)成為“原子”，允許用戶(hù)單位基于這些原子自行編排“測(cè)評(píng)的分子鏈”。在推委會(huì)吸納眾多用戶(hù)單位訴求，形成覆蓋全面的測(cè)試項(xiàng)的“原子庫(kù)”。

支持個(gè)性化的產(chǎn)品考核方案（試卷個(gè)性化）

用戶(hù)單位有采購(gòu)權(quán)這個(gè)抓手，可以定義測(cè)評(píng)排名規(guī)則。用戶(hù)單位既可以完全采用標(biāo)準(zhǔn)附錄中定義權(quán)重值，也可以個(gè)性化定義。從“題庫(kù)”中采題，或者自增補(bǔ)考題，組成試卷，自行定義權(quán)重值。“題庫(kù)”中的測(cè)試項(xiàng)由DCIA認(rèn)證實(shí)驗(yàn)室測(cè)試過(guò)的結(jié)果，可以重用，不需要重新測(cè)試，只用戶(hù)只測(cè)新增的。

分布式的背書(shū)體系

基于角色進(jìn)行背書(shū)分工，分成定義測(cè)評(píng)項(xiàng)集合、定義產(chǎn)品排名考核方案、測(cè)評(píng)執(zhí)行、測(cè)評(píng)審核、結(jié)果排名等不同環(huán)節(jié)的背書(shū)主體，各主體相互配合，從而組成一個(gè)嚴(yán)謹(jǐn)背書(shū)分工體系，避免將背書(shū)壓力過(guò)于集中在某個(gè)角色（如測(cè)評(píng)實(shí)驗(yàn)室）的弊端，解決產(chǎn)品測(cè)評(píng)排名難以權(quán)威背書(shū)的問(wèn)題。

一個(gè)成功的測(cè)評(píng)體系需要在各方利益、貢獻(xiàn)之間達(dá)成動(dòng)態(tài)平衡，并在產(chǎn)業(yè)化中實(shí)現(xiàn)應(yīng)用與迭代。推委會(huì)作為一個(gè)產(chǎn)業(yè)協(xié)作平臺(tái)，正是達(dá)成動(dòng)態(tài)平衡的孵化器。為了在產(chǎn)業(yè)應(yīng)用中實(shí)現(xiàn)測(cè)評(píng)體系的應(yīng)用與迭代，需要業(yè)主方的統(tǒng)一需求牽引，需要參與方的公正與平衡，需要核心工具和平臺(tái)的構(gòu)建，也需要最終結(jié)果的應(yīng)用與正向迭代。同時(shí)，測(cè)評(píng)體系建設(shè)也是知識(shí)產(chǎn)權(quán)密集型工作，因此需要尊重知識(shí)產(chǎn)權(quán)。推委會(huì)也將嘗試進(jìn)行測(cè)評(píng)結(jié)果的授權(quán)和認(rèn)定，為國(guó)家計(jì)算產(chǎn)業(yè)發(fā)展的公序良俗構(gòu)建貢獻(xiàn)力量。

總的來(lái)說(shuō)，多樣性算力測(cè)試體系離不開(kāi)各方的積極參與和支持，每一個(gè)環(huán)節(jié)都需要各個(gè)領(lǐng)域的專(zhuān)業(yè)人士和機(jī)構(gòu)的不斷努力和創(chuàng)新。同時(shí)，政府也需要加大對(duì)人才培養(yǎng)、科技創(chuàng)新等方面的投入，為算力行業(yè)的長(zhǎng)期健康發(fā)展提供有力的支持。在未來(lái)，我們期待更多的人們關(guān)注和參與算力領(lǐng)域的發(fā)展，共同推動(dòng)行業(yè)的進(jìn)步和創(chuàng)新。