每家公司的人才需求不同,对于技术要求也是不同,建议可以详细的去了解一下,一般情况下来说,岗位职责包含以下几种:1、负责传统网页、微博及SNS等各种网站信息高效采集与正确解析2、对用户数据进行整理分析,参与模型的构建;3、总结分析不同网站,网页的结构特点及规律,负责爬虫架构设计和研发,参与爬虫核心算法和策略优化研究;4、设计策略和算法,提升网页抓取的效率和质量,进一步解决系统的网页排重、垃圾控制、资源划分等问题;5、分析爬虫系统的技术缺陷,对策略架构做出合理地调整和改进
看各个公司,忙的时候早9晚11
少的时候每天1、2个小时,项目紧的时候一天得工作超过14个小时。
非常优厚。1、爬虫工程师是负责网站、App、公众号、微博等信息的高效采集,参与公司爬虫系统的设计与开发,解决实际开发过程碰到的各类问题。2、爬虫工作师有一定的学历要求,还需要熟练代码方面的工作,是比较费脑子的工作,薪资比较优厚,每个月工资在14000-20000左右。
143 浏览 2 回答
287 浏览 3 回答
240 浏览 5 回答
274 浏览 4 回答
91 浏览 4 回答
100 浏览 5 回答
105 浏览 2 回答
204 浏览 2 回答
156 浏览 2 回答
97 浏览 4 回答