岗位名称：数据爬虫工程师
招聘人数：1-2人
职位月薪：看能力、看期待薪资
工作性质：全职
位置：大连西岗区
岗位职责：
1.编写大规模分布式网络爬虫（多线程、分布式调度、协议处理）；
2.系统解决动态网页内容抓取.深度网页内容抓取的关键技术；
3.对负责大数据高性能分布式处理系统的开发感兴趣；
4.对设计网络爬虫的架构，和网络爬虫代码的编写以及数据上线和日常维护工作感兴趣；
5.不断学习最新反抓取技术，突破采集障碍。
职位要求：
1.熟练使用fiddler、wireshark、BurpSuite等工具。
2.精通HTTPS及 TCP 底层协议，熟练掌握网页端、移动app端数据抓取原理及技术、正则表达式、多线程，具有丰富的反IP封锁经验，并有实际项目多线程操作经验。
3.熟悉MySql数据库及数据存储技术，有较好的数据库设计能力；
4.精通网页抓取原理及技术.深度抓取.动态网页技术抓取、浏览器模拟抓取技术，从结构化的和非结构化的数据中获取信息；
5.精通爬虫和反爬技术；
6.熟悉分布式系统、多线程。
7.对网络安全、网络爬虫精通其一，且想从事爬虫相关工作的也可考虑。
另外，有意向来大连发展的爬虫小伙伴也可以联系我
QQ2751874139