上海建科咨詢集團(tuán)近日宣布，正式推出國內(nèi)首個工程監(jiān)理行業(yè)大模型測評基準(zhǔn)——Norma-MESBench 1.0。這一創(chuàng)新成果填補了監(jiān)理領(lǐng)域在AI大模型測評方面的空白，為行業(yè)提供了科學(xué)、量化的評估工具，幫助企業(yè)精準(zhǔn)判斷AI技術(shù)在監(jiān)理各專業(yè)領(lǐng)域的應(yīng)用能力。

Norma-MESBench 1.0的構(gòu)建基于“全維度測評框架”，涵蓋專業(yè)技術(shù)、通用綜合和特色場景三大板塊，并細(xì)分為多個層級。項目團(tuán)隊采用“人工+大模型輔助”的混合模式，生成了超過一萬條測評數(shù)據(jù)，并通過格式標(biāo)準(zhǔn)化、去重算法和多輪人工復(fù)核等流程確保題目質(zhì)量。這一框架不僅為行業(yè)提供了統(tǒng)一的測評標(biāo)準(zhǔn)，還通過“多層級加權(quán)評分”和“裁判模型評審組”等算法，實現(xiàn)了測評流程的自動化和標(biāo)準(zhǔn)化。

目前，該測評集已完成對17款主流通用大模型在監(jiān)理工作場景中的能力評估，為企業(yè)和從業(yè)人員提供了專業(yè)、精準(zhǔn)的參考依據(jù)。這一成果有助于企業(yè)科學(xué)選擇適合自身需求的AI大模型，推動AI技術(shù)在工程監(jiān)理領(lǐng)域的落地應(yīng)用。

為促進(jìn)行業(yè)AI生態(tài)的開放與可持續(xù)發(fā)展，上海建科咨詢集團(tuán)決定將Norma-MESBench 1.0開源發(fā)布。此舉旨在鼓勵更多企業(yè)和科研機構(gòu)參與進(jìn)來，共同推動監(jiān)理行業(yè)人工智能技術(shù)的創(chuàng)新與發(fā)展。

作為工程監(jiān)理行業(yè)AI測評體系的重要突破，Norma-MESBench 1.0的發(fā)布標(biāo)志著“人工智能+”戰(zhàn)略在工程建設(shè)領(lǐng)域邁出了關(guān)鍵一步。隨著AI技術(shù)的深入應(yīng)用，工程監(jiān)理行業(yè)有望迎來更高質(zhì)量、更可靠的智能化轉(zhuǎn)型。