职位描述
该职位还未进行加V认证,请仔细了解后再进行投递!
工作职责:
1、负责数据爬虫系统的设计和开发工作,能应对各种网站的反爬机制,顺利爬取数据;
2、负责数据爬取、解析、清洗、入库等工作;
3、帮助团队解决各种爬虫技术问题,提升海量数据系统的抓取效果与性能。
任职资格:
1、本科及以上学历,熟练使用python,并掌握常用的信息抽取工具,如正则表达式、Xpath等;
2、熟悉JavaScript、html、css、并能够通过调试网页代码搜索请求地址并进行模拟;
3、熟悉常用反爬机制并能够进行破解;
4、熟悉常用的IP代理访问方式;
5、熟悉多线程、网络编程以及分布式爬虫架构开发场景;
6、了解大数据技术如hadoop、spark等。
工作地点
地址:深圳福田区深圳平安金融中心
求职提示:用人单位发布虚假招聘信息,或以任何名义向求职者收取财物(如体检费、置装费、押金、服装费、培训费、身份证、毕业证等),均涉嫌违法,请求职者务必提高警惕。
职位发布者
HR
中国平安人寿保险股份有限公司
- 保险
- 200-499人
- 股份制企业
- 福田中心区福华路星河发展中心
相似职位
-
hrbp(支持电商团队) 25000-35000元海淀区 应届毕业生 本科百度在线网络技术(北京)有限公司
-
搜索整页策略产品经理 26000-27000元海淀区 应届毕业生 本科百度在线网络技术(北京)有限公司
-
公安组_政府事务经理(公安方向) 17000-27000元海淀区 应届毕业生 本科百度在线网络技术(北京)有限公司
-
品牌bd 18000-35000元海淀区 应届毕业生 本科百度在线网络技术(北京)有限公司
-
数据挖掘工程师 30000-60000元海淀区 应届毕业生 本科贝壳找房(北京)科技有限公司
-
流量增长组_文库流量增长方向产品(j68539) 30000-40000元海淀区 应届毕业生 本科百度在线网络技术(北京)有限公司