- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
数据爬虫基础讲座.ppt
数据类型
c() 向量
list() 列表
dataframe() 数据框
……
txtprogress
生成一列从1到10的数:f
Data - [1:10]
赋值
=
- (快捷键alt -)
a - 8
10-a
运算和判断符号
其他不说了(加减乘除之类,爬虫基本用不到)
重点:
== 绝对等于(也可以===)
!=不等于
数据的选择 $ [ ]
AAA
BBB
CCC
DDD
1839
……
……
……
3994
……
……
……
892
……
……
……
1
2
3
选择AAA列
test$AAA
选择第一行 test[1]
选择第2-5行 test[2:5]
常见函数
Length()
空向量 c()
向量合并 c(x,y)
字符串合并paste() 类似excel
# 注释符号(以及定位功能)
专有
getURL()
……
Apply()
代码规范
来自 Google 的 R 语言编码风格指南
/thread-1410518-1-1.html
赋值 -
命名 .
代码部分
空口讲
准备好需要爬取的网页『单条,或者列表』
伪装浏览器
网页内容整体抓取
转换格式
数据抓取
数据存储
另存数据
循环部分
链接列表
自己生成(但需要发现规则)
如何观察,以及network 的相应查找
案例/events/week-music
案例/cn/ch/restaurant-locator.html
通过原网页获取
比如城市名单:/service_network_2.asp?areaid=29
比如翻页列表:/events/week-music
其他情况的处理
文本处理函数(自己了解)
缺失值判断
数据项存在,但为空 if ( ){}
数据项不存在,程序报错 错误信息收集并记录
进度条显示
txtprogress
文档评论(0)