爬虫工程师5000-7000/月
1-3年 丨 专科 丨 20-40 丨 重庆市-市辖区-九龙坡区 丨 招1人
专属职位 量身打招;精准匹配最新招聘
1-3年 丨 专科 丨 20-40 丨 重庆市-市辖区-九龙坡区 丨 招1人
岗位职责:
1.了解网页抓取原理,能够总结分析不同网站、网页的结构特点及规律;
2. 熟悉 XPATH、JQUERY、正则表达式、JSON等网页信息抽取技术,对 HTML、JS 等前端技术有一定了解;
3.熟练掌握 Python 爬虫框架 scrapy;
4.熟悉常见的反爬虫机制,了解其相关解决办法;
5.熟练使用 Python 网络请求库 requests、httpx 等、解析库 lxml、parsel 等;
6.掌握 SQL 语言的基本操作,能够熟练使用 Python 与 MySQL、MongoDB 等数据库进行增删改查操作
任职资格:
1. 根据公司需求,负责设计和开发分布式网络爬虫系统,进行多平台数据抓取;
2. 负责设计和开发分布式网络爬虫以及采集程序更新、优化
3. 对采集数据进行清洗、入库
重庆市-市辖区-九龙坡区
软件和信息服务
围绕企业供应链、管理咨询、营销市场、物流、融资贷款、知识产权、资产贯标、产线改造、政策咨询等需求,开发政策快报、产业资讯、企业商城、供需对接系统、企业服务、物流、软件库、专家库、模型库、大数据匹配系统 ... 展开
重庆数字大厦2号门5楼