爬虫学习（五）——使用handler管理器对象进行数据爬取的步骤

# 使用管理器对象进行爬取数据的步骤

import urllib.requesturl = "https://www.baidu.com/"# 创建handler的管理器对象handler = urllib.request.HTTPHandler()# 根据handler创建一个openeropener = urllib.request.build_opener(handler)headers = {"User-Agent":"Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36"}# 创建请求对象requset = urllib.request.Request(url,headers = headers)# 对请求对象进行访问response = opener.open(requset)print(response.read().decode("utf8"))

转载于:https://www.cnblogs.com/kuangkuangduangduang/p/10370001.html