用Curl模块进行数据抓取与分析.ppt

用Curl模块进行数据抓取与分析 数据抓取简介 php数据抓取方法 curl和socket获取网页 抓取分析网页的2个例子 搜索引擎和爬虫： 收集互联网数亿网页数据，按相关算法展现用户匹配结果 爬虫抓取数据、分析建立索引、搜索排序输出结果 一般数据抓取： 获取城市列表 生成分类 电影、餐厅等资料库 自动化操作 数据抓取简介 一次读取函数： file_get_contents 返回整个字符串 file 返回数组 分段读取函数： fopen fread fclose 自定义缓冲大小 fsockopen fputs fread fclose 端口读写 curl模块 功能强大，众多选项 调用操作系统功能 linux: system(“wget ”); system exec passthru php数据抓取方法 curl和socket获取网页 curl和socket获取网页 品牌世家读取品牌 分析需要的分类 按分类抓取索引 按索引读取品牌 新浪明星资料 按首字母归类 读取每个字母列表 读取明星简介 抓取分析网页的2个例子 刘志华 网 址： 电子邮箱：6628831@ 地 址：北京市海淀区海淀大街3号鼎好电子商城B座12层 邮 编：100081 谢 谢！