6节课掌握Python爬虫（视频教程）

1、http需要了解的知识

1、url

2、知道url地址的规律和总得页码数:构造url地址的列表

3、start_url

2、发送请求,获取响应

1、requests 3、提取数据 1、返回json字符串:json模块

2、返回的是html字符串:lxml模块配合xpath提取数据

4、阶段文件保存