8月10日,由软件中心牵头研制的团体标准T/SAITA 001-2021 《人工智能 计算机视觉系统测评规范》正式获批发布,该标准将于2021年9月1日起实施。
计算机视觉是人工智能的关键技术之一,它是使用计算机模仿人类视觉系统的科学,让计算机拥有类似人类提取、处理、理解和分析图像以及图像序列的能力。然而,业界缺乏对计算机视觉系统的可靠性、安全性、可解释性等的系统性测评方法,一定程度上影响着计算机视觉系统的广泛应用和技术发展。团体标准《人工智能 计算机视觉系统测评规范》以科学研究成果和实践经验为依据,在充分兼容了其他相关标准的要求的同时,针对计算机视觉应用产品化的趋势,制定计算机视觉测评标准,有利于加快计算机视觉技术创新、成果转化和推广,规范、提升计算机视觉产品质量和服务质量,切实保障用户安全,营造公平开放的计算机视觉产业生态,填补了我国在计算机视觉标准化、规范化建设上的空白。
《人工智能 计算机视觉系统测评规范》规定了基于机器学习的计算机视觉系统的测评规范,适用于基于机器学习的计算机视觉系统的设计、研发、测试、部署与运维,其他人工智能领域也可参考使用。该标准从功能有效性、性能、兼容性、维护性、可移植性、训练数据质量、对抗样本、鲁棒性、可解释性、安全性等方面对计算机视觉系统的测评指标进行梳理,提出了计算机视觉系统测评指标体系及测评流程规范。尤其是针对人工智能的安全问题,该规范在传统软件质量指标体系基础上增加了对抗样本影响、可解释性、鲁棒性、安全性等具有人工智能特色的指标,为人工智能安全性测评提供了测评指导。(软件中心)