最近想转爬虫工程师,主要想深入学习一下 python,各位有什么高见请赐教
网上搜了下,最常用的框架就是 scrapy 吧,
爬虫工程师最基本的素养是熟悉 HTTP 协议,精通各种正则表达式吧
知道的不太多,网上也没搜到系统的指导
求实战老司机给指个路
先谢过了.
ps.前几年用 python 写过模拟登陆之类简单的,不知道现在 python 还在爬虫界流行么?貌似爬虫工程师只会 python 也不行吧.
1
spider82 2016-05-29 15:41:12 +08:00
python 还是很适合爬虫的。常用的就 scrape ,熟悉 XPATH 和各种调试工具就差不多了,关键是浏览器的模拟、复杂的 js 之类的可能会给初学者造成障碍。
|