一种基于人工智能的场景拓扑确定方法和装置.pdf

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 110750193 A (43)申请公布日 2020.02.04 (21)申请号 201910989250.5 (22)申请日 2019.10.17 (71)申请人 腾讯科技（深圳）有限公司 地址 518057 广东省深圳市南山区高新区 科技中一路腾讯大厦35层 (72)发明人 杨丽　单少波　岑恩杰　 (74)专利代理机构 深圳市深佳知识产权代理事 务所(普通合伙) 44285 代理人 王兆林 (51)Int.Cl. G06F 3/0482(2013.01) G06F 3/0481(2013.01) G06F 16/58(2019.01) 权利要求书3页 说明书21页 附图13页 (54)发明名称 一种基于人工智能的场景拓扑确定方法和 装置 (57)摘要 本申请实施例公开了一种基于人工智能的 场景拓扑确定方法和装置，至少涉及人工智能中 的多种技术，通过采用基于实时分析待测功能服 务的显示图像的方式，确定其场景拓扑。针对需 要确定场景拓扑的待测功能服务，根据待测功能 服务的第一显示图像，确定第一显示图像对应的 第一场景信息，并识别第一显示图像中的控件。 针对其中识别出的第一控件，生成对应的控制指 令，以指示通过待测功能服务触发第一控件，从 而得到基于该触发在待测功能服务中生成的第 二显示图像，确定第二显示图像的场景信息后， A 可以根据第一场景信息、第二场景信息和第一控 3 件间的关联关系，确定待测功能服务的场景拓 9 1 0 扑。该方法不会影响待测功能服务的正常工作， 5 7 0 适应性、兼容性强。 1 1 N C CN 110750193 A 权　利　要　求　书 1/3页 1.一种基于人工智能的场景拓扑确定方法，其特征在于，所述方法包括： 根据待测功能服务的第一显示图像，确定所述第一显示图像对应的第一场景信息； 识别所述第一显示图像中的控件，所述控件为可操控的模块；识别出的所述控件包括 第一控件； 通过根据所述第一控件生成的控制指令，获取第二显示图像；所述第一控件生成的控 制指令用于指示通过所述待测功能服务触发所述第一控件； 确定所述第二显示图像对应的第二场景信息； 根据所述第一场景信息、所述第二场景信息和所述第一控件间的关联关系，确定所述 待测功能服务的场景拓扑。 2.根据权利要求1所述的方法，其特征在于，在所述识别所述第一显示图像中的控件之 后，所述方法还包括： 判断所述第一显示图像中是否包括未触发的控件； 若确定第二控件为未触发的控件，通过根据所述第二控件生成的控制指令，获取第三 显示图像；所述第二控件生成的控制指令用于指示通过所述待测功能服务触发所述第二控 件； 确定所述第三显示图像对应的第三场景信息； 根据所述第一场景信息、所述第三场景信息和所述第二控件间的关联关系，确定所述 待测功能服务的场景拓扑。 3.根据权利要求1所述的方法，其特征在于，所述识别所述第一显示图像中的控件，包 括： 通过控件识别模型识别所述第一显示图像中的控件； 所述控件识别模型至少包括神经网络子模型，训练所述神经网络子模型的训练样本包 括如下训练样本中的一种或多种： 组合不同控件和图像生成的训练样本； 根据从历史显示图像中控件位置剪裁出感兴趣区域生成的训练样本； 根据从至少两张所述历史显示图像中提取的不变区域生成的训练样本。 4.根据权利要求3所述的