• EN
|

招聘信息 | 企业服务

警示:以招聘为名收取培训费用、提供培训贷款,或在录用过程中需支付体检、服装、押金等费用的,都属违法行为。一经发现,请立即举报,并向当地公安机关报案。更多详情

爬虫开发工程师

1-1.5万/月

武汉水象科技有限公司 查看所有职位

武汉-洪山区  |  3-4年经验  |  大专  |  招2人  |  03-19发布

五险一金 员工旅游 交通补贴 通讯补贴 年终奖金 绩效奖金 周末双休

职位信息

岗位职责:

1、负责分布式网络爬虫系统的架构设计与开发(如抓取调度,多样化抓取,页面解析和结构化抽取,海量数据存储和读取等);

2、负责爬虫核心算法的策略优化研究,提升爬虫抓取效率和质量(如调权调度、分析预测、质量判断、封禁与反封禁研究等);

3、负责HTTP、AJAX、API等各类网络请求分析,探索和研究高效的数据抓取解决方案。

任职要求:

1、大专及以上学历,良好的代码能力,扎实的数据结构和算法功底,有快速迭代、逐步优化的工程项目经验;

2、3年以上工作经历,深度参与过至少一个‘分布式网络爬虫系统’的架构设计;

3、有良好逻辑思维能力、沟通能力、团队合作精神、学习能力,抗压能力,对挑战性问题充满激情 ;

4、熟悉linux和Java开发,熟悉shell/python等脚本语言,熟练掌握正则表达式;

5、精通一种开源爬虫框架,如scrapy、webmagic、nutch、heritrix等,有开发爬虫框架经验;

6、精通http协议,各种web认证和APP认证机制,熟悉常见的爬虫/反爬虫策略;

7、有多线程、异步IO开发和网络数据处理经验优先 ;

8、有APP反编译经验优先;

9、退伍军人、党员优先考虑。

职能类别: 软件工程师

关键字: python

联系方式

上班地址:当代光谷梦工场

地图

公司信息

        水象科技,成立于2016年,是一家以数据为成长驱动的创新型科技企业,致力于大数据、人工智能、物联网等前沿探索和创新,专注于新零售、金融科技、智能硬件以及数字文娱生态链建设。
        水象科技秉承“用技术连接未来”理念,全面服务实体经济。发展至今,已构建成一个自我强化的 水象科技生态系统,为机构以及个人提供综合购物、娱乐、金融、智能产品等数字化全场景全服务链平台,形成了鲜明的ABCI技术发展战略。
回到
顶部
意见反馈