ICS33.030 CCSM21 YD 中华人民共和国通信行业标准 YD/T XXXXX—XXXX 面向公众应用的移动互联网网络质量 评价指标和评测方法移动游戏类 Metrics and methods of public application-oriented quality evaluation for mobile internetMobile gaming （点击此处添加与国际标准一致性程度的标识） （报批稿） XXXX-XX- XX 发布 XXXX-XX-XX实施 发布 中华人民共和国工业和信息化部 前言 本文件按照GB/T1.1一2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起 草。 本文件是系列标准《面向公众应用的移动互联网网络质量评测指标与评测方法》之一，本系列标准的 名称和结构预计如下： 面向公众应用的移动互联网网络质量评价指标和评测方法 总体要求 面向公众应用的移动互联网网络质量评价指标和评测方法 网页浏览类 一面向公众应用的移动互联网网络质量评价指标和评测方法 视频通话类 一面向公众应用的移动互联网网络质量评价指标和评测方法 视频播放类 一面向公众应用的移动互联网网络质量评价指标和评测方法 云游戏类 一面向公众应用的移动互联网网络质量评价指标和评测方法 文件上传下载类 面向公众应用的移动互联网网络质量评价指标和评测方法 视频直播类 面向公众应用的移动互联网网络质量评价指标和评测方法 移动游戏类 面向公众应用的移动互联网网络质量评测方法 移动终端APP测速 一面向公众应用的移动互联网网络质量评测方法 路测 面向公众应用的移动互联网网络质量评测方法 众测 随着技术的发展，本系列标准的结构可能存在更新。 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。 本文件由中国通信标准化协会提出并归口。 本文件起草单位：努比亚技术有限公司、中兴通讯股份有限公司、西安华为技术有限公司、中国信息 通信研究院、中国电信集团有限公司、中国移动集团有限公司、中国联合网络通信集团有限公司 本文件主要起草人：马伟、徐嘉利、何小虎、田力、李莲源、陈德威、樊兆宾、雷波、高敏、秦岩 II 面向公众应用的移动互联网网络质量评价指标和评测 方法移动游戏类 1范围 本文件规定了移动游戏类应用进行移动互联网网络质量测试的方法，定义了移动终端移动游戏类应用 进行移动互联网网络质量测试的基本模型和移动游戏类用户体验指标。 本文件适用于面向移动游戏类场景下移动互联网网络质量的评价和分析，以及由此可以展开的对互联 网网络质量的用户感知评价。 规范性引用文件 2 本文件没有规范性引用文件。 3术语和定义 下列术语和定义适用于本文件。 3. 1 移动游戏mobilegame 基于移动互联网，可供单人或多人同时参与的游戏类型，是实时网络互动的游戏，体现了用户的“数 字虚拟成就与存在体验”，其核心是“网络下载，同步数据交换”。本文件所提及的移动游戏均默认为移 动网络游戏。 4移动游戏概述 在具备网络链接前提下，移动游戏在移动终端运行过程中需要不断与游戏服务器进行信息同步，并且 具备不同强弱程度的网络交互需求，包括对交互响应时延敏感的强交互类游戏，对交互响应时延要求中等 的中等交互类游戏以及对交互响应时延要求低的 弱交互类游戏等。移动游戏的用户体验在很大程度上取决 于游戏参与的流畅程度，而网络质量则是影响游戏流畅程度的主要因素之 口 移动终端 基站 核心网 游戏服务器 图1移动游戏框架图 面向移动游戏类应用的网络质量评价指标 5.1概述 目前影响用户移动游戏体验的因素较多，评价使用移动游戏类应用时的网络质量，指标应选取与用户 体验直接相关的业务质量指标，以及对业务质量有影响的网络质量指标。基于网络相关性及指标可测性的 考虑，本文件采用网络强相关且可测量的指标评价面向移动游戏类应用的互联网网络质量，并将其归为3 个大类，分别是可接入指标，操作响应指标和过程损失指标 5.2移动游戏网络质量评价指标定义 5.2.1移动游戏应用网络质量评价指标概述 根据影响移动游戏应用的网络质量评价指标的特性，可分为三大类，分别是可接入性指标，操作响应 指标和过程损失指标。 可接入性指标主要体现为用户能否与移动游戏的服务会话建立连接，以及在建立连接的过程能否保持 稳定，断线重连时间是否影响游戏体验，该大类指标的细分指标包括游戏启动时延、游戏加载时延、连接 失败率、断线重连时延和游戏时延抖动。 操作响应指标主要体现为移动游戏体验过程中发出指令响应的即时性，主要包括点击或滑动响应时延、 操作无响应率。 过程损伤指标主要体现为进行移动游戏时游戏数据传输过程存在的数据丢失等问题，在基于移动游戏 类应用的网络质量评测中，主要包括丢包率。 5.2.2移动游戏应用业务质量指标 5.2.2.1游戏启动时延 游戏启动时延指用户在终端页面点击应用图标进入到游戏登录界面所等待的时延，时延过长或启动失 败会影响用户体验。 5.2.2.2游戏加载时延 游戏加载时延是指用户在移动游戏应用界面内开启游戏到进入游戏场景开始所等待的时延，游戏等待 加载时延过长会影响用户游戏体验。 5.2.2.3连接失败率 连接失败率是指用户登录失败次数和游戏加载失败次数的总和在总连接数中的占比，连接失败会中断 游戏体验服务。 5.2.2.4断线重连时延 断线重连时延是指受网络影响导致与游戏服务器断开连接并重新连接的时延，断线会影响用户的游戏 体验过程。 5.2.2.5点击或滑动响应时延 点击或滑动响应时延是指用户终端输入游戏指令到传输到游戏服务端并传输到游戏画面响应的时延， 点击或滑动响应时延会影响用户的游戏体验，特别是强交互类游戏 5.2.2.6操作无响应率 操作无响应率是指用户操作不响应的次数占总操作数的百分比例，在强交互类游戏中明显的卡顿感会 导致用户游戏体验降低。 2 5.2.3移动游戏应用网络质量指标 5.2.3.1游戏时延抖动 游戏时延抖动是游戏体验过程中网络时延的标准差，时延抖动会影响用户的游戏体验过程。 5.2.3.2丢包率 去包率指的是游戏数据传输过程中丢失数据包与总数据包的百分比例。 6测试工具要求 6.1测试工具总体结构 与网络交互性强的时延敏感类游戏更能反映网络质量，体现相关测试指标，因此测试过程采用强交互 移动游戏类型。 测试所使用的终端及后台应保持一致，测试游戏服务器应保持良好稳定性，保证唯一强相关变量为网 络质量。 测试工具的总体结构由以下几部分组成： a）测试软件工具：根据测试对象选取具有对应功能的软件工具，如设备网络监控功能、ping命令功 能、网络抓包分析功能等， b）屏幕画面采集工具：根据获取屏幕信息的方式选取对应的画面采集工具，如高速摄像机、录屏工 具（保证游戏录制顿率）等， c）辅助工具：测试终端，计时工具、计数工具等。 6.2测试终端设备要求 为了使得进行互联网网络质量评价的指标更具有可靠性和准确性，选定测试的终端设备要求应当符合 如下要求： a）测试的终端设备应当安装完所需测试的移动游戏，保证在进入移动游戏时无需进行版本更新、补 丁下载操作，且进入移动游戏的过程不受弹窗、初始开场动画影响； b）测试的终端设备应当满足测试游戏的推荐配置； c）测试的终端设备应当具有可靠性和稳定性，测试全过程不受终端设备的硬件、软件和系统对网络 造成的影响。 7面向移动游戏类应用的网络质量测试方法 7.1测试预置条件 测试预置条件如下： a) 测试终端安装测试移动游戏； b）测试环境温度保持15℃-25℃； c) 测试终端亮度关闭自动调节亮度，并且亮度调节到最大： (P 测试终端不能处于低电量模式，电量70%以上； e) 关闭蓝牙、近场通信（NFC）、全球定位系统（GPS）、超级省电等； f）清理后台，保持只有测试工具和测试游戏运行； 3 g）各类终端需保障测试本用例所使用的游戏、方法、版本均保持一致； h）测试移动游戏服务器运行稳定。 7. 2 2测试流程 7.2.1游戏启动时延 7.2.1.1测试概述 在满足测试工具要求的条件下，测试从启动游戏程序到用户可以点击操作游戏界面（游戏登录界面） 结束的时间即为游戏启动时延，启动时延数值越小越好。多次测量获取统计平均结果时，每次测试开始前 应清理内存并保证测试终端恢复到环境温度。 7.2.1.2测试步骤 测试步骤如下： a）按照测试预置条件配置测试终端，开启屏幕画面采集工具； b）点击游戏应用图标，并用屏幕画面采集工具捕捉整个过程； c) 录界面的时间）的记录时间Tb； d）计算游戏启动时延T1。 7.2.2游戏加载时延 7.2.2.1测试概述 在满足测试工具要求的条件下，测试在移动游戏应用内游戏开始匹配进入具体游戏场景时的等待时间 进入具体游戏场景时的等待时间越短越好。多次测量获取统计平均结果时，每次测试开始前应清理内存并 保证测试终端恢复到环境温度 7.2.2.2测试步骤 测试步骤如下： a）按照测试预置条件配置测试终端，启动游戏并登录进入游戏主界面内，开启屏幕画面采集工具； b) 点击游戏开始按钮，并用屏幕画面采集工具捕捉整个过程； c) 景完整界面）的记录时间Tb； d）计算游戏加载时延T2。 7. 2. 3 连接失败率 7.2.3.1测试概述 在满足测试工具要求的条件下，测试用户登录失败和加载失败的次数占测试总次数的比例，连接失败 率越高，用户体验越差。多组测量获取统计平均结果时，每组测试开始前应清理内存并保证测试终端恢复 到环境温度。 7.2.3.2测试步骤 测试步骤如下： 4 a）按照测试预置条件配置测试终端，点击启动游戏时开