爬虫工程师

部门: 研发部
工作地点: 杭州
学历: 本科
薪资: 12K - 18K

岗位职责

1、参与爬虫系统的架构设计和研发,独立进行抓取和清洗工作;
2、参与爬虫核心算法的策略优化研究;
3、根据要求完成相应模块,持续优化代码。

所需技能

1、2年以上爬虫相关工作经验有过网络爬虫、网页去重、网页信息抽取优先;
2、掌握java/C++/js等语言;
3、对网络协议原理等熟知,熟悉web前端,可读懂js代码;
4、掌握常见解析方法,会使用正则4、掌握python语言,有一年以上使用经验;
5、熟练linux操作,可进行简单维护与脚本编写
6、熟练使用nosql数据库中至少一种;
7、有手机开发逆向、网络数据包破解、DNS缓存等经验优先。

服务咨询

告诉我们您的需求

凡闻为您提供智能解决方案