A1包、大数据深化应用建设.docVIP

A1包、大数据深化应用建设 一、供应商资格要求 1、符合《中华人民共和国政府采购法》第二十二条的规定。 2、供应商的资质要求：无 二、技术要求 一、项目概述： 本项目为山东省质量技术监督局大数据深化应用建设项目。要求以建成的大数据共享平台为依托，对质量监管相关数据进行深层次的挖掘利用，引导社会公众参与产品质量监督管理工作，同时采用移动App等技术手段，提高监管效能和服务效能。本项目为“交钥匙”工程。 二、项目建设内容 项目建设内容包括四大部分，具体如下： 2.1 社会公众和外部信息采集及数据深度融合 2.1.1 社会公众及外部信息来源 大数据共享平台已采集的主要是质监部门在办理业务过程中产生的数据，本次要扩大信息采集范围，采集企业公示的信息、企业产品销售情况、社会公众报告的信息、其他政务部门共享的信息等，结合已有的质监政务数据组成山东质监大数据信息资源库。 实现和第三方电商销售和监管平台的对接，采集企业产品销售、评价、退换货、假冒伪劣、行政执法等数据。社会公众报告的信息包括从社会公众通过移动APP、门户网站、邮件、电话、传真、微信、微博等各种途径反馈的产品质量情况、特种设备事故和安全隐患等相关信息和重点的行业、企业、产品海量质量数据以及各个领域涉及产品质量的数据，形成以质监业务数据为主的大数据汇聚整合。 2.1.2 外部信息与质监数据的融合 业务归类整理 质监信息资源按照五主题（组织机构、人员、产品、设备、标准）、六层次（法规标准、行政许可、行政执法、检验检测、举报自报、舆情信息）进行组织。对本次采集的信息要进行科学组织，并和原有质监政务信息进行关联。从其他部门共享过来的政务信息资源，按照相应的业务主题和可信程度进行组织。 信息校对及融合 1、数据填充。通过大数据共享平台提供的信息资源，结合不同来源的数据，根据类别、可信层次对数据进行填充。 2、数据转换。不同的信息系统的数据和通过爬虫抓取的网页信息，需要进行数据转换。完成格式和字段合并与拆分、数据翻译、数据匹配、数据聚合以及其他复杂计算等。 3、数据比对。对共享库中不符合实际情况的数据进行校准，并对相关的重合数据项进行数据的比对，然后按着一定的规则注入到共享区中，使数据在含义上保持一致性。 4、企业信息上报及校对。与质监局业务相关的企业在经过身份确认的前提下，可以通过本系统上报和修改与自身相关的企业基本信息、产品信息等数据，也可以对互联网采集到的与企业相关的数据就行校对和修改。 数据存储的统一 对采集的数据，根据数据来源、性质、结构、用途等合理规划存储方式，实现对关系型数据、非关系型数据等多维数据的合理存储，并能实现对历史数据的追溯。 2.1.3 大数据健康评价管理系统 数据的质量将直接影响到数据分析的结果，通过新建大数据健康评价管理系统对获取的社会公众及外部信息的相关数据进行信息校对、融合并做健康评价，基于数据质量的一系列规则和指标，将结构化、非结构化、半结构化数据进行分析，实现对基础数据的管理和动态更新，形成对数据的监控评价报告，提高原始数据的准确性和完整度，保障数据能够作为后期大数据分析和挖掘的来源。 2.2 质量监管相关数据资源深度挖掘利用 通过对海量的产品质量相关数据的挖掘，包括销售退货信息、消费者投诉信息、各地政府部门执法监管信息、公检法机关执法信息、网络交流信息、媒体传播信息、技术研究信息等，发现产品的质量安全问题或潜在质量风险。 3.2.1 构建业务模型 在数据模型的基础上，根据业务需求，通过模型定义工具、指标定义工具以及数据预处理工具建立业务模型，并通过对处理结果的分析和评估，对模型不断进行完善、优化。最终用户可直接运用该模型，实现相应的业务需求。同时，还要实现模型和规则的加载、维护、完善、分类、查询等管理功能。业务模型主要包括下面三种： 预警型：企业生产环境条件的变化判断是否具备取换证条件，企业是否超范围经营, 机动车安检机构风险等。分析了解全省的分行业的产品质量状况。 分析型：通过企业的产品质量问题原因的分析，找出企业可能存在的质量问题。针对各个渠道获取到的与生产企业信用档案关联的数据，建立企业信用档案，信息公示后，为社会提供透明的信息化服务，对企业行为进行监督。 预测型：通过收集重点行业、企业、产品的海量质量数据和涉及产品质量的数据，利用数据挖掘，对各项数据进行风险分析，对市场中重点产品的质量和缺陷进行提前预判和预警。 2.2.2 业务处理过程 1）数据准备：为了不影响业务系统的正常工作，加工数据要转移到查询库中，后续的业务从查询库中进行提取，在进行数据加工之前建立临时查询信息库，将业务相关的数据汇集到一起便于进一步加工处理。 2）数据预处理：为了保证后续业务数据的准确性和一致性，在应用之前对数据进行规范化处理，定义数据字典和数据项，根据原始凭证的表达