工業(yè)人工智能的全球領(lǐng)導者Cognite今天宣布發(fā)布《Cognite Atlas AI? LLM和SLM工業(yè)代理基準報告》。該報告首開先河，通過對定制大型語言模型（LLM）和小型語言模型（SLM）的評估，解決了一般基準數(shù)據(jù)集的不足，將重點放在專門的工業(yè)任務(wù)上，確保了工業(yè)人工智能解決方案的可靠性、準確性和有效性。

“一般的LLM和SLM基準報告無法捕捉到工業(yè)環(huán)境的復雜性，也不符合工業(yè)運營的專業(yè)需求，在工業(yè)運營中，精度、安全性和領(lǐng)域?qū)I(yè)知識至關(guān)重要。”Cognite產(chǎn)品管理主管Knut Vidvei在2024年國際構(gòu)裝暨電路板研討會（IMPACT 2024）上發(fā)言時說道，“通過《Cognite Atlas AI? LLM和SLM工業(yè)代理基準報告》，我們?yōu)檎鎸嵤澜绲墓I(yè)任務(wù)定制了評估框架，確保人工智能代理可靠有效，并推動工業(yè)人工智能的發(fā)展。”

工業(yè)代理工作平臺Cognite Atlas AI?是領(lǐng)先工業(yè)數(shù)據(jù)和人工智能平臺Cognite Data Fusion???的擴展。憑借無與倫比的數(shù)據(jù)管理和全面的人工智能能力，Cognite榮獲Frost & Sullivan授予的年度全球公司獎（數(shù)字工業(yè)平臺市場）和Frost Radar?：數(shù)字工業(yè)平臺市場巨頭稱號，鞏固了公司在工業(yè)數(shù)據(jù)和人工智能領(lǐng)域的權(quán)威地位。

Cognite Atlas AI?工業(yè)代理基準報告最初的關(guān)注重點在于自然語言搜索，是工業(yè)人工智能代理的關(guān)鍵數(shù)據(jù)檢索工具。測試集包括為石油天然氣和制造業(yè)等行業(yè)設(shè)計的各種數(shù)據(jù)模型，并通過真實的問答評估不同場景下的性能，答案經(jīng)過了各種指標的評估。這些基準數(shù)據(jù)集能夠系統(tǒng)地評估系統(tǒng)在回答復雜問題時的表現(xiàn)，例如跟蹤設(shè)施中未完成的安全關(guān)鍵工單。

報告的未來版本將評估更多的人工智能工具，如用于匯總、分析和推理工業(yè)數(shù)據(jù)的工具，以測定工業(yè)人工智能代理的全面性能。

首份《Cognite Atlas AI? LLM和SLM工業(yè)代理基準報告》將于2024年10月28日開放免費下載。之后，該報告將定期發(fā)布，助力數(shù)字化轉(zhuǎn)型領(lǐng)導者利用生成式人工智能更準確地執(zhí)行更復雜的操作。