集成智能系统评价框架与应用研究

目前人工智能尚处于狭义人工智能阶段，只能针对特定任务与封闭场景，难以应对多任务 与不确定性环境时应用需求。 “集成智能”是将一种或多种智能能力进行集成，是实现适应场景的 人工智能的可能路径。 现有研究对于集成智能系统评价的研究尚不成熟，难以牵引集成智能系统 研究。 在分析集成智能概念内涵的基础上，提出了面向基础级、系统级以及应用级的多视角多层次 集成智能系统评价框架并以人机协同军事智能应用为例，应用该框架建立了相应的指标体系，从而 指导集成智能系统的评价。

近年来，人工智能加速发展，“里程碑” 成果不 断涌现，应用领域快速拓展，即将演进形成颠覆式科 技变革，“智能化革命” 正在孕育。 但是，当前人工 智能研究还是以解决场景封闭的特定任务的单一智 能为主，在应用于诸如军事等领域中缺乏通用性与 适应性［１］ 。 集成智能是将多种单一智能集成从而 提高通用性与适应性，是今后人工智能研究的重要方向。

智能系统评价不仅关乎对现有系统评价比较， 更关乎未来发展方向的牵引与指导，是人工智能研 究中的关键领域。 面向特定领域的智能系统测评研 究已经有一定研究成果，如面向组件级、系统级等多 层次的 ＳＣＯＲＥ（Ｓｙｓｔｅｍ， Ｃｏｍｐｏｎｅｎｔ ａｎｄ Ｏｐｅｒａｔｉｏｎａｌｌｙ Ｒｅｌｅｖａｎｔ Ｅｖａｌｕａｔｉｏｎｓ）评价模型［３］ 、面向自治水平的 （Ａｕｔｏｎｏｍｙ Ｌｅｖｅｌｓ ｆｏｒ Ｕｎｍａｎｎｅｄ Ｓｙｓｔｅｍｓ，ＡＬＦＵＳ）评 价框架［４］与认知心理学中反映人类认知能力的典 型结构（Ｃａｔｔｅｌｌ⁃Ｈｏｒｎ⁃Ｃａｒｒｏｌｌ，ＣＨＣ） ［１４］等。 但是上述 相关研究一方面并没有突出对于未来集成智能系统 的评价框架与方法研究，更重要的是上述研究往往 是从计算机系统、应用场景或认知科学等单一领域 出发，没有全面分析“智能”的概念内涵，缺乏在多 学科领域下对“智能”的认知与评价，因而难以实现 对智能以及智能系统未来发展的牵引与指导。 为此，本文首先面向智能尤其是集成智能的概 念内涵的相关研究进行借鉴与分析，以“集成智能” 概念内涵为基础，提出了多视角、多层次的集成智能 评价框架，具有更好的通用性、全面性与科学性；然 后，以该框架为指导、以典型军事智能应用需求为例 构建相应指标体系，指导集成智能系统评价并支撑 集成智能系统测评的应用落地，从而为集成智能技 术发展与系统研制提供牵引支撑。