YDT 4515-2023移动智能终端智能化性能基准测评方法.pdf

ICS33.050 CCS M37 YD 中 华 人 民 共 和 国 通 信 行 业 标 准 YD/T XXXX—XXXX 移动智能终端智能化性能基准测评方法 Benchmarktest methodsfor intelligence performance of mobile smart terminal (报批稿) XXXX-XX-XX发布 XXXX-XX-XX实施 中华人民共和国工业和信息化部 发 布 YD/ XXXXX—XXXX 前  言 本文件按照GB/T 1.1—2020 《标准化工作导则 第1部分：标准化文件的结构和起草规则》的规定 起草。 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这些专利的责任。 本文件由中国通信标准化协会提出并归口。 本文件起草单位：中国信息通信研究院、中国电信集团有限公司 、OPPO广东移动通信有限公司、 高通无线通信技术(中国)有限公司、北京小米移动软件有限公司、中国—东盟信息港股份有限公司、 华为技术有限公司，北京三星通信技术研究有限公司，北京奇虎科技有限公司，维沃移动通信有限 公司，北京百度网讯科技有限公司。 本文件主要起草人：解谦、张睿、庞涛、贾利敏、杜志敏，刘欣、李小娟、卢炳全、高立发、 马艳军、洪明、朱亚军、朱政、雷震、吴春雨、姚一楠 III YD/ XXXXX—XXXX 移动智能终端智能化性能基准测评方法 1 范围 本文件规定了通过使用神经网络模型在移动智能终端侧进行推理计算的基准测试的方法，对终端基 于神经网络模型的计算性能进行评估。评测场景包括图像处理、视频处理等不同场景，针对不同场景测 试集，测试方法和评测指标提出要求。 本文件适用于具备智能操作系统的移动智能终端，包括数字移动电话机，平板电脑以及其他数字移 动通信终端设备。 2 规范性引用文件 本文件没有规范性引用文件 3 术语、定义和缩略语 3.1 术语和定义 本文件没有需要界定的术语和定义。 3.2 缩略语 下列缩略语适用于本文件。 AI 人工智能 Artificial Intelligence CPU 中央处理器 Central Processing Unit DSP 数字信号处理 Digital Signal Processing FAR 错误接受率 False Acceptance Rate FN 错误的负样本 False Negative GPU 图形处理器 Graphics Processing Unit IoU 交并比 Intersection over Union mAP 平均准度均值 mean Average Precision NPU 神经网络处理器 Neural Network Processing Unit PR 正确通过率