一、python写爬虫的方法
1、将urllib2库引用进来。
2、调用库中的方法,将请求回应封装到response对象中。
3、调用response对象的read()方法,将回应字符串赋给hhtml变量。
4、打印。
import urllib2 #将urllib2库引用进来 response=urllib2.urlopen("http://www.xiaofamao.com") #调用库中的方法,将请求回应封装到response对象中 html=response.read() #调用response对象的read()方法,将回应字符串赋给hhtml变量 print html #打印出来
拓展内容:
1、爬虫的介绍
网络爬虫,其实叫作网络数据采集更容易理解。
就是通过编程向网络服务器请求数据(HTML表单),然后解析HTML,提取出自己想要的数据。
2、使用流程
根据url获取HTML数据;
解析HTML,获取目标信息;
存储数据;
重复第一步。
以上就是用python写爬虫的方法,大家学会后就可以动手尝试运行代码了。当然光有爬虫还是远远不够的,也可以使用优质的服务让爬虫更好的工作,希望对大家有所帮助。更多常见问题解决:
python爬虫相关知识点推荐:
本文教程操作环境:windows7系统、Python 3.9.1,DELL G3电脑。