工业人工智能的全球领导者Cognite今天宣布发布《Cognite Atlas AI™ LLM和SLM工业代理基准报告》。该报告首开先河，通过对定制大型语言模型（LLM）和小型语言模型（SLM）的评估，解决了一般基准数据集的不足，将重点放在专门的工业任务上，确保了工业人工智能解决方案的可靠性、准确性和有效性。
“一般的LLM和SLM基准报告无法捕捉到工业环境的复杂性，也不符合工业运营的专业需求，在工业运营中，精度、安全性和领域专业知识至关重要。”Cognite产品管理主管Knut Vidvei在2024年国际构装暨电路板研讨会（IMPACT 2024）上发言时说道，“通过《Cognite Atlas AI™ LLM和SLM工业代理基准报告》，我们为真实世界的工业任务定制了评估框架，确保人工智能代理可靠有效，并推动工业人工智能的发展。”
工业代理工作平台Cognite Atlas AI™是领先工业数据和人工智能平台Cognite Data Fusion ® 的扩展。凭借无与伦比的数据管理和全面的人工智能能力，Cognite荣获Frost & Sullivan授予的年度全球公司奖（数字工业平台市场）和Frost Radar™：数字工业平台市场巨头称号，巩固了公司在工业数据和人工智能领域的权威地位。
Cognite Atlas AI™工业代理基准报告最初的关注重点在于自然语言搜索，是工业人工智能代理的关键数据检索工具。测试集包括为石油天然气和制造业等行业设计的各种数据模型，并通过真实的问答评估不同场景下的性能，答案经过了各种指标的评估。这些基准数据集能够系统地评估系统在回答复杂问题时的表现，例如跟踪设施中未完成的安全关键工单。
报告的未来版本将评估更多的人工智能工具，如用于汇总、分析和推理工业数据的工具，以测定工业人工智能代理的全面性能。
首份《Cognite Atlas AI™ LLM和SLM工业代理基准报告》将于2024年10月28日开放免费下载。之后，该报告将定期发布，助力数字化转型领导者利用生成式人工智能更准确地执行更复杂的操作。
