Web数据研究应用论文.docVIP

Web数据研究与应用论文 秘 1知如何能够投其所好，为用户实现主动推荐，提供个性化服务；这些都是电子商务成败的关键问题。在这种新型的商务模式下，如何对网络上大量的信息进行有效组织利用，帮助海量数据的拥有者们找出真正有价值的信息和知识，以指导他们的商业决策行为，成为电子商务经营者关注的问题。迅速发展的基于eb的数据挖掘技术，为解决电子商务所面临的问题提供了有效途径。 2 eb数据挖掘 21 eb数据挖掘概述 数据挖掘（Data ining）是从大量的、不完全的、有噪声的、模糊的和随机的数据中提取人们事先不知道的、潜在有用的信息和知识的非平凡过程。 eb数据挖掘（eb ining）是从eb档和eb活动中抽取感兴趣的、潜在的有用模式和隐藏的信息，是数据库、数据挖掘、人工智能、信息检索、自然语言理解等技术的综合应用，是在一定基础上应用数据挖掘的方法以发现有用的知识帮助人们从中提取知识。eb数据挖掘可以分为eb内容挖掘（eb ntent ining）、eb结构挖掘（eb Struture ining）、eb使用记录挖掘（eb Usage ining）三类。eb内容挖掘是指从档内容或其描述中抽取知识的过程，又可以分为基于本的挖掘和基于多媒体的挖掘两种。eb本挖掘可以对eb上大量档集合的内容进行总结、分类、聚类、关联分析等。eb结构挖掘是指从eb组织结构和链接关系中推导知识。通过对eb结构的挖掘，可以用指导对页面进行分类和聚类，找到权威页面，从而提高检索的性能，同时还可以用指导网页采集工作，提高采集效率。eb使用记录挖掘是指从服务器端记录的客户访问日志或从客户的浏览信息中抽取感兴趣的模式。 基于eb的数据挖掘技术的出现不仅为商家做出正确的商业决策提供了强有力的工具，也为商家更加深入地了解客户需求信息和购物行为的特征提供了可能性。 22 电子商务中eb数据挖掘的步骤 电子商务中eb数据挖掘的步骤如下： ① 明确数据挖掘的对象—业务对象，确定商业应用主题，不能盲目地进行挖掘； ② 将与业务对象的各类原始数据收集起作为挖掘的数据泉； ③ 对收集的数据进行预处理，一般包括数据净化、用户识别、会话识别、路径补充、事务识别和格式化等阶段，以提高挖掘效率，剔除无用、无关信息并对信息进行必要的整理。 ④ 根据需要解决的问题建立合适的数据挖掘模型，然后利用已知数据对模型进行训练和测试，并应用该模型得到挖掘结果； ⑤ 利用可视化技术，验证、解释挖掘的结果，并据此做出决策或丰富知识，即进行模式分析与应用。 在整个eb数据挖掘的过程中，被明确的业务对象是挖掘过程的基础，它驱动整个eb数据挖掘的全过程； 同时，也是检验挖掘结果和引导分析人员完成挖掘的依据。 23 电子商务中eb数据挖掘的数据 在电子商务中，可以用作为数据挖掘分析的数据量比较大，而且类型众多，总结起有以下几种类型的数据可用于eb数据挖掘技术产生各种知识模式。 ① 服务器数据。客户访问站点时会在eb服务器上留下相应的日志数据，这些日志数据通常以本的形式存储在服务器上。一般包括servers lgs、errr lgs、ies lgs等。 ② 查询数据。它是电子商务站点在服务器上产生的一种典型数据。例如，对于再现存储的客户也许会搜索一些产品或某些广告信息，这些查询信息就是通过ie或是登记信息连接到服务器的访问日志上。 ③ 在线市场数据。这类数据主要是传统关系数据库里存储的有关电子商务站点信息、用户购买信息、商品信息等数据。 ④ eb页面。主要是指HTL和XL页面的内容，包括本、图片、语音、图像等。 ⑤ eb页面超级链接关系。主要是指页面之间存在的超级链接关系，这也是一种重要的资。 ⑥ 客户登记信息。客户登记信息是指客户通过eb页输入的、要提交给服务器的相关用户信息，这些信息通常是关于用户的人口特征。在eb的数据挖掘中，客户登记信息需要和访问日志集成，以提高数据挖掘的准确度，使之能更进一步的了解客户。 24 eb数据挖掘能够获取的知识模式 运用eb数据挖掘技术能够对站点上的各种数据进行挖掘，找到相关的一些知识模式，以指导站点人员更好地运作站点和向客户提供更好的服务。一般运用eb数据挖掘可以在站点上挖掘出的知识模式有以下几个： ① 路径分析。它可以被用于判定在一个eb站点中最频繁访问的路径。通过路径分析，可以得到重要的页面，可以改进页面及网站结构的设计。 ② 关联规则的发现。在电子商务中关联规则的发现可以找到客户对网站上各种之间访问的相互关系，可以找到用户访问的页面与页面之间的相关性和购买商品间的相关性。利用这些相关性，可以更好的组织站点的内容，实施有效的市场策略，增加交叉销售量，同时还可以减少用户过滤信息的负担。 ③ 序列模式的发现。序列模式的