ICS 35.080 L 77 团 体 标 准 T/CESA 1026 -2018 人工智能 深度学习算法评估规范 Artificial intelligence —Assessment specification for deep learning algorithms 2018 -07-01发布 2018 -07-01实施 中国电子工业标准化技术协会 发布 T/CESA 1026 -2018 I 目 次 前言 ................................ ................................ ............... III 引言 ................................ ................................ ................ IV 1 范围 ................................ ................................ .............. 1 2 术语和定义 ................................ ................................ ........ 1 3 评估指标体系 ................................ ................................ ...... 2 3.1 评估指标体系表 ................................ ................................ 2 3.2 算法功能实现的正确性 ................................ .......................... 4 3.3 代码实现的正确性 ................................ .............................. 4 3.4 目标函数的影响 ................................ ................................ 4 3.5 训练数据集 的影响 ................................ .............................. 4 3.6 对抗性样本的影响 ................................ .............................. 4 3.7 软硬件平台依赖的影响 ................................ .......................... 5 3.8 环境数据的影响 ................................ ................................ 5 4 评估流程 ................................ ................................ ........... 5 4.1 概述 ................................ ................................ .......... 5 4.2 确定可靠性目标 ................................ ................................ 6 4.3 选择评估指标 ................................ ................................ .. 7 4.4 评估准则 ................................ ................................ ...... 7 4.5 各阶段评估 ................................ ................................ .... 8 4.6 评估结论 ................................ ................................ ...... 8 5 需求阶段的评估 ................................ ................................ .... 8 5.1 概述 ................................ ................................ .......... 8 5.2 前提条件 ................................ ................................ ...... 8 5.3 输入 ................................ ................................ .......... 8 5.4 关键活动 ................................ ................................ ...... 9 5.5 输出 ................................ ................................ .......... 9 6 设计阶段的评估 ................................ ................................ .... 9 6.1 概述 ................................ ................................ .......... 9 6.2 前提条件 ................................ ................................ ...... 9 6.3 输入 ................................ ................................ .......... 9 6.4 关键活动 ................................ ................................ ...... 9 6.5 输出 ................................ ................................ ......... 10 7 实现阶段的评估 ................................ ................................ ... 10 7.1 概述 ................................ ................................ ......... 10 T/CESA 1026 -2018 II 7.2 前提条件 ................................ ................................ ..... 10 7.3 输入 ................................ ................................ ......... 10 7.4 关键活动 ................................ ................................ ..... 10 7.5 输出 ................................ ................................ ......... 11 8 运行阶段的评估 ................................ ................................ ... 11 8.1 概述 ................................ ................................ ......... 11 8.2 前提条件 ................................ ................................ ..... 11 8.3 输入 ................................ ................................ ......... 11 8.4 关键活动 ................................ ..........................