手机键盘输入法评测方案.doc

手机键盘输入法评测方案152020年4月19日文档仅供参考，不当之处，请联系改正。附件：手机键盘输入法评测方案全国信息技术标准化技术委员会中国电子技术标准化研究所信息处理产品标准符合性检测中心二九年五月二十五日目录一、目的3二、范围3三、评测指标3四、实施方法10(一)参评要求10(二)评测过程11(三)参评申请表12(四)承诺书12一、 目的为进行手机键盘输入法产品的评测，受工业和信息化部科技司委托，中国电子技术标准化研究所、全国信息技术标准化技术委员会和信息处理产品标准符合性检测中心特联合编制手机键盘输入法评测方案，用于指导手机键盘输入法产品的评测活动。二、 范围本次评测活动的对象，是手机键盘输入法。三、 评测指标本次评测分为三个部分：标准符合性评测、产品质量评测和实际影响力评测。1. 标准符合性评测本项评测的依据为GB/T18031- 信息技术 数字键盘汉字输入通用要求。凡参评产品必须符合该标准中的所有规定，否则取消其继续评测的资格。参评产品在符合GB/T18031- 各项要求的基础上，选取汉字输入平均码长和重码字词键选率两项指标作为度量元，度量模型及公式如下：Q标=0.7Q平均码长+0.3Q重码字词键选率Q平均码长=1-A/A标A=参评产品的平均码长A标=标准中规定的平均码长上限值Q重码字词键选率=1-A/A标A=参评产品的重码字词键选率A标=标准中规定的重码字词键选率上限值2. 产品质量评测本项评测的度量模型参考GB/T16260.2 软件工程 产品质量 第2部分：外部度量，并根据评测对象进行了适当裁剪。度量模型如下：Q质=0.6Q功能性+0.3Q易用性+0.1Q其它Q功能性=0.8Q功能充分性+0.2Q计算准确性Q易用性=0.3Q易理解性+0.3Q易学性+0.3Q易操作性+0.1Q吸引性Q其它=0.2Q软件规模+0.8Q易改变性上述公式中各分量的度量方法如下：2.1. 功能性2.1.1. 功能充分性按照下面列出的功能列表对参评产品进行黑盒测试，记录不能正确实现或缺少的功能数，将其与列表中列出的功能总数相比较。Q功能充分性=1-A/BA=在评价中检测出的不能正确实现或缺少的功能数B=评价要求中描述的功能数功能列表智能输入1词语联想2标点符号联想3英文单词联想4整句输入5词语记忆或自造词6词频调整混合输入7汉、英、数、符混合输入多语种少数民族文8蒙文9藏文10维文常见外国语11英语12法语13德语14俄语15西班牙语16阿拉伯语其它语种17每多一种，Q值加0.01字符集支持18GB13000.1-199319GB18030- （强制性部分）自定义功能20默认值修改（输入法设置）21词库维护22界面定制23字符集范围设置信息无障碍功能24左手操作者习惯25模糊音（或万能键）26读音（或笔顺等）互查27汉字简繁转换2.1.2. 计算准确性测试样本的实际输入过程中，得到的结果与预期的结果之间有不可接受的差别的字数，与测试样本总字数的比。Q计算准确性=1-A/BA=记录下的字数B=样本包含总字数2.2. 易用性2.2.1. 易理解性在规定时间内，评价者阅读参评产品的用户文档后能理解的功能数所占全部功能的比例。Q易理解性=1-A/BA=不理解的功能数B=功能总数2.2.2. 易学性Q易学性=0.7Q功能学习的难易性+0.3Q帮助的频率i. 功能学习的难易性记录评价者从初始状态（对参评输入法完全陌生）到完成规定测试样本的输入所需的时间。Q功能学习的难易性=1-T/TmaxT=初始状态到完成输入的时间Tmax=所有参评产品中T的最大值ii. 帮助的频率记录评价者从初始状态（对参评输入法完全陌生）到完成规定测试样本的输入过程中，必须查阅用户文档的次数。Q帮助的频率=1-A/AmaxA=查阅用户文档以协助完成其任务的事例数Amax=所有参评产品中A的最大值2.2.3. 易操作性Q易操作性=0.6Q一致性+0.4Q默认值的可用性i. 一致性评价者在评价过程中发现界面风格及操作方式不一致的事例数。Q一致性=1- A/AmaxA=评价者发现与她们的期望不一致的事例的数目Amax=所有参评产品中A的最大值ii. 默认值的可用性记录参评输入法提供的默认值总数。与评价过程中，评价者希望更改默认值的次数进行比较。 Q默认值的可用性=1-A/BA=评价者希望更改的默认值B=默认值总数2.2.4. 吸引性评价者对参评产品用户界面的第一印象，及界面风格与操作风格的主观评价。Q吸引性=A/10A=评价者打分，按 10分整数制，越接近10越好。2.3. 其它特性2.3.1. 软件规模记录参评输入法占用内存状况。Q软件规模=1-A/ AmaxA=内存占用量Amax=所有参评产品的A的最大值2.3.2. 易改变性Q易改变性=0.7Q参数的可修改性+0.3Q版本控制i. 参数的可修改性记录参评产品所提供的维护用数据接口及相关参数的有效性。Q参数的可修改性=1-A/BA=维护者无法修改的接口及参数数B=参评产品提供的接口及参数总数ii. 版本控制评价者应能方便的标识出参评产品的修订版本。Q版本控制=1或0可标识出版本的，X=1；无法标识版本的，X=0。3. 实际影响力评测本项评测的度量元为参评产品装机型号数量及参评产品相关技术支撑国家项目状况。度量公式如下：Q影响力=0.3Q装机+0.3Q项目+0.2Q专利+0.2Q签约Q装机=A/AmaxA=参评产品的装机型号数量Amax=所有参评产品中A的最大值Q项目=0.7Q部委级+0.3Q地方级Q部委级= A/AmaxA=参评产品支撑部委级项目数Amax=所有参评产品中A的最大值Q地方级= A/AmaxA=参评产品支撑地方级项目数Amax=所有参评产品中A的最大值Q专利= A/AmaxA=参评产品核心技术获得专利数Amax=所有参评产品中A的最大值Q签约= A/AmaxA=参评产品已签约客户数Amax=所有参评产品中A的最大值4. 评测结果参评产品最终得分按如下公式计算：Q=0.4Q标+0.5Q质+0.1Q影响力四、 实施方法(一) 参评要求1. 本次评价活动的对象是手机键盘输入法产品。参评厂家必须拥有参评输入法产品的清晰知识产权状况及相关证明材料，并如实填写参评申请表。参评申请表须加盖申请企业公章或有效签字。同时签署承诺书，承诺所提交一切材料的真实性。2. 参评单位必须在中华人民共和国境内合法注册并存续的相关法人。3. 参评企业须提供3套完全相同的已安装参评输入法的样机，且样机必须是已获得入网许可的机型。4. 为考查参评产品在多语种及大字符集方面的性能，参评企业须提供可运行于PC平台上的模拟器。5. 如参评输入法可支持多种软硬件平台不同的机型，则须提供所有这些机型的列表，及每款机型的入网许可证复印件，以备抽查。6. 参评企业须提供参评输入法的完整码表一份。格式为TXT，每行一个字及其对应的编码，字与编码之间用空格分隔，字在前，编码在后，输入法能输入的所有汉字都应包含在该文件中。除上述内容外，该文件中不得包含任何其它内容。7. 参评企业应提供参评输入法的用户文档。用户文档应是随参评手机的正式印刷品，或手机中的联机文件。(二) 评测过程本次评测过程中，易用性度量由一般评价者进行，称为“用户性评测”。一般评价者为背景接近的大学在校学生。其它部分的评测由第三方专业检测机构及专家组进行评价，称为“专业性评价”。评测分为两个独立单元，即智能手机和普通手机。评价过程的流程如下：1. 参评企业提交申请资料。2. 评价活动组织方审核申请资料。3. 参评产品接收及入库。4. 由第三方检测机构对参评产品进行评测，易用性及功能性中的多语种支持除外。5. 由多语种评价专家组对所有参评产品的多语种支持情况进行评价，并记录在多语种评价记录中。多语种评价专家组由少数民族语言文字专家及外国语言文字专家组成。6. 一般评价者从库中随机抽取参评产品。每个产品由3名评价者分别独立评价。评价者为背景接近的大学在校学生。7. 由一般评价者对产品的易用性进行评价。8. 所有参评产品的评价记录均提交给最终专家评审组后，由专家组剔除无效记录，并根据评价要求和评价记录对参评产品进行打分。9. 所有参评产品打分完毕后，公布评价结果。参评申请资格审查材料入库专业性评价用户性评价专家组评分公布结果(三) 参评申请表见附件一。(四) 承诺书见附件二。附件一、手机输入法参评申请表手机输入法参评申请表企业基本信息企业名称企业地址联系人电话传真Email参评产品信息须提供的内容：1、 产品名称2、 机型3、 支持字符集4、 支持语种（包括少数民族文和外文）5、 面向用户的默认值列表6、 面向维护者的接口及参数列表7、 参评产品所能支持的全部操作系统列表8、 参评产品已安装且已上市销售的全部机型列表及入网证明9、 参评产品全部知识产权证明材料10、 参评产品的完整码表11、 参评产品的总模块（或功能）列表12、 可经过局部修改而不影响全局的模块（或功能）列表13、 参评产品或其核心技术支撑部委级科研项目列表及证明材料14、 参评产品或其核心技术支撑地方级科研项目列表及证明材料15、 就参评输入法与手机厂商签约总数及证明材料16、 就参评输入法的本年度实际装机数量及证明材料附件二、参评承诺书承 诺 书本单位承诺，为参与本次手机输入法评价活动而向评测机构提供的一切资料均属实。如有弄虚作假，经查实后由本单位承担一切法律责任。特此声明。承诺方：签 章：日 期：