Python-urllib、BeautifulSoup爬取豆瓣数据.pdfVIP

b站学习地址：urllib获取网页数据

/video/BV12E411A7ZQ?p18

1、get请求

importurllib.request#指定url，获取网页数据

importurllib.parse#解析器

response=urllib.request.urlopen()

print(response.read().decode(utf-8))#对获取到的网页源码进行utf-8的解码

2、post请求

#post请求url=http://httpbin.or/post专门用测试的网址post可模拟用户真实登录

try:

data=bytes(urllib.parse.urlencode({hello:world}),encodin=utf-8)#将信息转换成二进制数据包

response=urllib.request.urlopen(http://httpbin.or/post,data=data,timeout=1)

print(response.read().decode(utf-8))

exceptExceptionase:

ifhasattr(e,code):#如果