2023年数据抓取工程师的工作职责_数据抓取工程师岗位职责_数据抓取工程师职责及工作内容
数据抓取工程师工作职责描述范本,数据抓取工程师招聘条件要求会做什么,应聘数据抓取工程师需要做什么工作
数据抓取工程师需要做什么工作
数据抓取工程师工作职责
岗位职责：
1、负责网页信息抽取技术的研究和开发；
2、负责爬虫各个系统核心代码开发；
3、提高数据抓取的效率和质量，解决数据的重复，垃圾数据识别，清洗；
4、提高系统的可运维，可测性，易用性。
任职要求：
1、3年以上python或java开发经验；
2、熟悉mysql,redis,具备sql调优经验；
3、了解爬虫的设计及实现流程；
4、了解HTML基础知识；
5、具备团队协作精神；
6、了解文本分类，统计分析，自然语言处理，机器学习算法，熟悉前端技术和分布式计算，有分布式存储经验者优先。