客户端质量监控和测试-CUHKCSE.pptVIP

质量数据分析和AI测试 wujiezheng (郑吴杰) 腾讯公司微信技术架构部 2018.4 业务介绍 质量数据分析 日志信息: 终端Crash,ANR;后台Core 反馈信息: 用户提交的意见反馈 统计信息(没有参与): 各种业务的统计量idkey AI测试 机器翻译 智能音箱 语音识别 意见反馈数据 微信团队（投诉、提问和闲聊） 帮助与反馈—意见反馈（投诉，有路径信息） 覆盖问题多，涉及业务广 关键词统计 分功能、日期进行关键词统计 搜索、趋势图 搜索具体反馈，并给出趋势图和属性统计 报警 时间维度分析：哪些反馈有突增？ 关键词组合+趋势分析 自动微信提醒 其他可能工作 问题总结、展示 聚类 vs. 统计 过滤无效反馈 分类 vs. 安全接口（过滤恶意用户反馈） 新问题反馈挖掘 有的反馈，只要有少数几条就能判断是否为bug 微信神经机器翻译 微信翻译 在微信中对消息或朋友圈文字，选中后按右键，进行翻译操作 技术上采用神经机器翻译（NMT） 基于神经网络，源句子首先编码成为一个向量，然后根据这个向量进行解码自动生成译文。每个目标文字都依赖于完整的源句子，以及前一个目标文字 翻译评测 整理评测集合；确定评测指标（BLEU）；Jenkins任务自助评测 评测结果自动入库，进行Web展示和对比 初期通过检查BLEU分较低／差值大的翻译，能够发现