东莞万江Python爬虫学习路线培训班

我们有目标网址，怎么写爬虫呢？这个时候，建议大家可以找一些简单爬虫的视频或者文章，跟着老师一起写代码，先感受一下爬虫是怎么一步一步的在你的手里完成的！
当然这里不是说你照着老师的代码敲一遍就算学会了，个人认为，这里你较少要做三步：

所有你不知道的库、函数、语法都需要记录下来，自行学习掌握，并在以后的爬虫中继续这个步骤，很重要
要学会老师的思路。比如基本所有的教程并不是拿到url就开始写代码了，都有自己的分析过程，而思路在爬虫中占到很大一部分的比重，有了思路，写代码就不难了

先模仿在独立完成。先跟着老师做一些简单的爬虫，然后思路和代码都掌握以后，就可以尝试自行查找类似的项目去独立完成一个爬虫了！推荐基础模块：re,requests,time等，自定义函数、类等语法以及报头、cookie的写入等等也需要了解
到这里，你应该已经掌握了python的基础模块并写出了你的简单爬虫，那么可以进行下一个步骤的学习了

深入掌握抓包并分析提取需要的内容
在我们练习的过程中，会经常碰到有反爬措施的网站，而这些网站较常使用的措施就是隐藏数据，那么这时我们就要学会使用抓包分析，推荐大家一定要精通浏览器的开发者工具以及fiddler抓包工具，当然其他抓包工具或者抓包插件也可以，没有特别要求。