必威电竞官网>职位百科>职位百科大全>爬虫开发工程师

爬虫开发工程师

爬虫开发工程师是指掌握python和网络爬虫技术,能够从任何一个网页开始,不断链接其它网页,实现互联网数据的索取并开发相关软件的工程技术人员。

求职指导

岗位要求

  • 爬虫开发工程师
  • 学历要求:本科

    适合专业:计算机科学与技术

    上岗要求:初级程序员

    专业技能要求:

    一般 良好 熟练 精通
    • Java
    • Python

    其他技能要求:1、能理解业务逻辑,有责任心,学习能力强;
    2、工作积极主动,思路清晰,擅长沟通。

职位工作内容

  • 1-3年
  • 3-5年
  • 职位描述

    1、主导和参与爬虫系统的架构设计、开发与优化;
    2、研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性;
    3、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
    4、能独立解决实际开发过程中碰到的各类问题;
    5、负责大数据产品所需的信息抓取、解析、清洗等研发与优化工作。

  • 职位描述

    1、负责数据采集、解析处理、入库等工作;
    2、负责网络爬虫架构设计、功能开发及更新优化等工作;
    3、负责爬虫核心算法和策略优化,熟悉采集系统的调度策略。

爬虫开发工程师工资薪酬水平(人民币/月)

切换城市切换行业

已选城市北京上海广州深圳武汉杭州成都重庆青岛厦门

已选行业互联网/电子商务

该数据通过企业招聘薪资计算所得,与行业实际标准略有偏差,仅供参考

爬虫开发工程师就业趋势

该数据只显示该职位在某些城市的热门程度,仅供参考

4
Baidu
map