新闻推荐中所用到的数据及操作-厦门大学.pptVIP

- * - - * - - * - - * - - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - http://RecS - * - 新闻推荐中所用到的数据及操作 2015.11.11 http://RecS 一、目录 1.数据流程图 2.数据来源及结构 3.常用的正则表达式 4.数据的获取 5.数据的处理 6.将数据写入数据库 7.代码实现 http://RecS 厦大新闻网 获取日志文件 数据筛选 数据处理 存入数据表news_log(Record_id,User_ip,User_time,User_path) 搜狐新闻、网易新闻 爬虫 得到用户查看的新闻标题 运用分词软件获取关键词 获取新闻信息 获取访问信息 通过访问地址(news_log.User_path)和新闻地址(article.link)进行内连接 通过正则表达式匹配 二、流程图 数据筛选 存入数据表article(id, title, link, content……) http://RecS 数据来源：厦门大学新闻网、 数据