数据库技术在web挖掘中研究应用.docxVIP

数据库技术在web挖掘中研究应用 电子商务购物类网站已进入了人们日常生活中。这些网站中包含丰富的数据，通过对这些数据进行挖掘，可以得到大量有用处的信息，为商家营销和买家购物提供便利。本文提出了针对于购物网站，利用数据库技术和web挖掘技术相互结合，对购物网站进行数据挖掘。结合数据库技术使得web挖掘转化为了数据库挖掘，使得挖掘更简化，结果也更准确，在此基础上设计了一个系统。该系统主要分为;数据爬取、数据抽取、数据入库、数据挖掘。 1.web挖掘概述 网络上蕴含着丰富的信息，但是网页具有无结构化，动态的特点。网页中蕴含信息不能直观的挖掘。搜索引擎的出现在一定程度上解决了人们对信息查找的需求，但是搜索引擎基于关键词的查询，不能提供有针对性的服务。因此，web数据挖掘应用而生，又可分为内容挖掘、结构挖掘、使用记录挖掘。 1.1 web内容挖掘 Web内容挖掘主要指从文档中抽取相关信息。可分为文本挖掘、多媒体挖掘。目前研究主要集中在词频统计、分类算法、机器学习、数据间隐藏的模式和生成抽取规则等。web内容挖掘可以看做是信息检索和信息查询二者的相结合。由于直接处理数据对象内容，故结果也较为准确。因此本文就是采用基于web内容挖掘的方式对购物网站数据进行挖掘分析。利用网络爬虫程序对购物网站进行爬取，再利用htmlparse对网页内容进行抽取。 1