爬虫开发工程师
爬虫开发工程师是指掌握python和网络爬虫技术,能够从任何一个网页开始,不断链接其它网页,实现互联网数据的索取并开发相关软件的工程技术人员。
求职指导
岗位要求
学历要求:本科
适合专业:计算机科学与技术
上岗要求:初级程序员
专业技能要求:
其他技能要求:1、能理解业务逻辑,有责任心,学习能力强;
2、工作积极主动,思路清晰,擅长沟通。
职位工作内容
职位描述
1、主导和参与爬虫系统的架构设计、开发与优化;
2、研究优化爬虫算法,提升爬虫系统的稳定性、可扩展性;
3、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
4、能独立解决实际开发过程中碰到的各类问题;
5、负责大数据产品所需的信息抓取、解析、清洗等研发与优化工作。
职位描述
1、负责数据采集、解析处理、入库等工作;
2、负责网络爬虫架构设计、功能开发及更新优化等工作;
3、负责爬虫核心算法和策略优化,熟悉采集系统的调度策略。
爬虫开发工程师工资薪酬水平(人民币/月)
该数据通过企业招聘薪资计算所得,与行业实际标准略有偏差,仅供参考
爬虫开发工程师就业趋势
该数据只显示该职位在某些城市的热门程度,仅供参考