python爬虫高级开发工程师

职位信息

岗位职责:

1、 设计和开发汽车垂直网站已知账号密码下的账户爬取系统,负责爬虫核心算法和调度策略优化;

2、 负责网络网页自动图形、文字验证码的自动登录,信息精准抽取等搜索核心技术,构建高可用性、高可扩展性的网络信息搜集软件;

3、熟悉爬虫的应用策略和网站的防爬机制,解决各类验证码识别机制,提升网页抓取的效率和质量;

4、负责多个汽车垂直业务网站和APP数据的数据爬取、解析、过滤,清洗、消重、结构化处理等工作,提升平台的抓取效率。

5、软件的日常维护

任职要求:

1.       大学本科及以上学历,计算机相关专业,基础扎实;开发过类似软件

2.       Python工作经验2年以上,熟悉Python常用函数库,熟练掌握Xpath和正则表达式;

3.       精通常用Python爬虫框架中的一种或多种,熟悉Scrapy、Pyspider框架中的至少一种;

4.       熟练掌握Linux系统;

5.       熟练掌握MySql、Redis、MongoDB等,有丰富的mysql性能优化经验;

6.       熟练掌握网页抓取原理及解析技术,对SQL优化有一定的经验熟悉基于正则表达式、XPath、CSS等网页信息抽取技术;

7.       具有优秀的团队合作和沟通协作能力,善于学习,能承受较大的工作压力。

联系方式

上班地址:北京市海淀区北四环中科资源大厦南楼

地图

公司信息

北京连盈科技有限公司一直专注于汽车行业“移动大数据+AI人工智能”商业模式的研究与开发,基于“大数据”基础上开发的专利产品、运营业务项目定义了我们作为现代化汽车行业科技型企业的行业位置。
公司秉承着“客户至上”的理念,悉心辅助汽车行业各品牌厂家和经销店,在服务汽车厂家的同时,提升经销店的客户服务体系能力,提供各项能力改善解决方案。
目前公司业务范围涉及汽车移动营销智能软硬件产品等诸多方面,客户范围遍布全国。为方面业务的开展和服务用户,公司总部设立在北京,并分别在北京和杭州设立了北区业务分部和南区业务分部。
我们会和汽车厂家、经销商伙伴一起,打造一个全新的以提升经销店销量和盈利为目标的成长型平台企业。
连盈科技–汽车移动营销专家!