• 外包信息请发到 /go/outsourcing 节点。
• 不要把相同的信息发到不同的节点
这是一个创建于 2056 天前的主题，其中的信息可能已经有所发展或是发生改变。
爬虫专家
职位诱惑：
氛围好,BAT 牛人,行业领先,发展迅速
工作职责：
1 ）爬虫平台的架构改进以及各主要模块的开发与优化。
2 ）爬虫策略和防屏蔽规则，提升各端抓取的效率和质量。
3 ）能统筹从对手策略分析、抓取、解析入库、仓库建设、数据分析、产品研发等各环节全流程的架构设计和管理。
职位要求：
1.3 年+以上实际的爬虫项目经验
2.掌握 python,熟悉常用爬虫框架中的一种或多种，如 Scrapy 框架或其他的 Web scraping framework。
3.熟悉 HTML/JavaScript/CSS/xpath/url/Ajax/xml 等 web 技知识, 熟悉 HttpClient、jsoup、WebDriver、phantomjs 等工具。
4.熟悉 linux 系统，熟悉 mysql、redis，nosql 等,熟悉 Internet 基本协议（如 TCP/IP. HTTP 等）。
5.熟悉 APP 的抓包、加密参数等识别。
5.能够解决封账号、封 IP 采集等问题,解决抓取、信息抽取等问题,构建完善的网络信息收集平台。
6.有分布式爬虫架构经验者优先。
7.有仓库建设、数据分析、数据挖掘相关经验者优先。
站内联系或者邮箱 lijinqiang@dip-ai.com
职位诱惑：
氛围好,BAT 牛人,行业领先,发展迅速
工作职责：
1 ）爬虫平台的架构改进以及各主要模块的开发与优化。
2 ）爬虫策略和防屏蔽规则，提升各端抓取的效率和质量。
3 ）能统筹从对手策略分析、抓取、解析入库、仓库建设、数据分析、产品研发等各环节全流程的架构设计和管理。
职位要求：
1.3 年+以上实际的爬虫项目经验
2.掌握 python,熟悉常用爬虫框架中的一种或多种，如 Scrapy 框架或其他的 Web scraping framework。
3.熟悉 HTML/JavaScript/CSS/xpath/url/Ajax/xml 等 web 技知识, 熟悉 HttpClient、jsoup、WebDriver、phantomjs 等工具。
4.熟悉 linux 系统，熟悉 mysql、redis，nosql 等,熟悉 Internet 基本协议（如 TCP/IP. HTTP 等）。
5.熟悉 APP 的抓包、加密参数等识别。
5.能够解决封账号、封 IP 采集等问题,解决抓取、信息抽取等问题,构建完善的网络信息收集平台。
6.有分布式爬虫架构经验者优先。
7.有仓库建设、数据分析、数据挖掘相关经验者优先。
站内联系或者邮箱 lijinqiang@dip-ai.com
 |
1
iannil 2019-04-16 16:53:00 +08:00
第 5 条这个....有法律风险的吧
|
 |
2
leoliu168 2019-04-17 08:49:07 +08:00
Locate@?
|
Select Language