职位&公司对比
职位详情
- 深圳
- 1-3年
- 本科
- 爬虫架构
- Python
- 数据采集
岗位职责: 1、BOSS直聘负责搭建和维护现有爬虫系统; 2、负责数据的抓取、解析、清洗、入库、实时监控更新; 3、持续优化系统提高系统的稳定、高效性; 4、与业务部门和上级沟通确保数据的高效及时性; 5、与其它各部门对接,确保数据的完整准确性; 岗位要求: 1、全日制统招本科及以上学历理工科相关专业; 2、2年以上python使用经验,熟悉常用python库的使用,熟悉面向对象编程,且熟练使用scrapy框架、django框架、熟悉Selenium、有scrapy-redis使用经验者优先考虑: 3、熟悉常见反爬技术,能处理各种反爬问题者优先;直聘 4、掌握正则表达式、xpath、beautifuls直聘oup4、css选择器等信息抽取技术; 5、 掌握Linux基本操作,能够编写shell脚本优先,能独立解决简单常见的问题; 6、熟悉MYSQL、Redis等数据库操作能进行简单的数据库优化;BOSS直聘 可关注微信直聘公众号“原点参数”,了解更多详情。
职位详情
- 深圳
- 3-5年
- 本科
- Scrapy
- html
- HTTP
- Python
岗位职责: 1、负责上级安排的爬虫脚kanzhun本开发工作; 2、负责网页信息抽取、数据清洗等研来自BOSS直聘发和优化工作; 3、负kanzhun责爬虫的运行维护和数据检查。 任职要求: 1、全日制本科及以上学历,计算机相关专业,3年以上爬虫开发经验; 2、熟悉html/css/xpath/ajax/xml等技术,熟悉HTTP传输协议,了解网页抓取原理和整合技术,熟悉正则表达式; 3、熟悉Python语言,熟悉Scrapy、Selenuim框架; 4、熟悉常kanzhun见反爬策略(如IP限制、验证码识别、图像识别等),并能够做出正确应对; 5、熟悉各种通用加密算法,熟悉常规对称及非对称加密特征识别与分析; 6、熟悉MySql或MongoDB,了解Redis; 7、有一定的JS逆向和安卓逆向能力; 8、具备独立分析和解决问题的能力,积极主动,有良好的沟通能力。
技能解析
- 面向对象
- 熟悉面向对象
- 独立解决
- MYSQL
- 数据库操作
- 面向对象编程
- 优化系统
- 基本操作
- 数据库优化
- 微信公众号
数据来自CSL职业科学研究室
技能解析
- 分析和解决问题的能力
- 运行维护
- 解决问题的能力
- 解决问题
- 数据清洗
- 传输协议
- 加密算法
- 沟通能力
- 开发经验
- 好的沟通
- 分析和解决问题
- 开发工作
- 独立分析
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 五险一金
公司福利
- 生日福利
- 节日福利
- 高温补贴
- 团建聚餐
- 员工旅游
- 带薪年假
- 全勤奖
- 底薪加提成
- 绩效奖金
- 年终奖
- 定期体检
- 五险一金