科创中国

需求描述

职位描述：

1、搭建通用爬虫框架；

2、编写爬虫实现对互联网网站、网页内容的爬取、采集和数据抽取等工作；

3、独立解决各类网站的反爬措施（如代理IP、各种请求数据加密等）和充分利用现有的资源达到爬取的最大效率；

4、网页内容抽取、处理、结构化、清洗过滤等数据处理；

5、攻关抓取过程中的关键技术，优化代理，调度，解析，数据处理等核心模块。

岗位要求：

1、1年以上实际的爬虫项目经验；

2、熟练掌握至少一门编程语言，如Python、Java、Go等熟练掌握并发编程模型与网络通信编程；

3、熟悉TCP／IP、HTTP协议熟练掌握HTML/CSS/JavaScript等Web技术；

4、熟练使用正则表达式、Xpath等解析工具一种或多种；

5、熟悉各种反爬技术，并能够通过多种应对策略（包括但不限于：代理池、模拟登录、验证码处理、浏览器渲染等）来保证数据的持续交付；

6、熟练使用各种http抓包分析工具（如：httpwatch/HttpAnalyzer/fiddler）；

7、有移动端App的数据爬取的工程经验加分项。

福利待遇

1、体现岗位价值的薪资体系。

2、年终奖。

3、双休制，享有国家法定假日，工作满一年的职员可享受带薪年假。

4、享有“五险一金”。（五险：养老保险、医疗保险、失业保险、工伤保险和生育保险；一金：住房公积金。）

5、员工可享受婚假、丧假、产假、哺乳假等 。

6、中餐补贴。

7、入职满一年可享每年免费全面体检一次。

工作时间：周一至周五8:30-12:00 13:30-17:20

公司地址：贵阳国家高新技术开发区贵州科学城7号15层

办公地址

贵阳市白云区贵州科学城(高海路) 7号楼15F

处理进度