爬虫工程师(浙江总部,技术部)

爬虫工程师 职位描述:

岗位职责:
1、负责多平台信息爬取和页面内容的提取分析;
2、优化抓取策略,充分利用带宽资源避免限制;
3、分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进。任职资格:
1、计算机相关,本科以上学历,经验不限。
2、熟悉HTTP协议;熟悉Java编程语言;熟悉Linux命令、脚本编写;
3、精通网页抓取原理及技术,熟悉正则表达式,xpath,jsoup,从结构化的和非结构化的数据中获取信息;
4、能独立解决实际开发过程碰到的各类问题。