职位&公司对比

招聘中

爬虫工程师

-K
  • 计算机软件
招聘中

高级爬虫工程师

-K
  • 移动互联网
  • 天使轮

职位详情

  • 北京
  • 1-3年
  • 大专
  • 数据抓取
  • 网络爬虫
  • 数据采集

采集软件的boss编写,采集,清洗BOSS直聘,整理来自BOSS直聘BOSS直聘来自BOSS直聘存。也可灵活形式合作。

职位详情

  • 北京
  • 5-10年
  • 大专
  • 爬虫
  • 逆向

岗位职责: kanzhun1.对指定的网站进行网页抓取、数据提取、破解反爬策略; 2.负责多平台信息抽取、数据清洗、入库、服务化等研发和优化工作; 3.参与开发和设计分布式网络爬虫系统,进行信息的抓取和分析工作; 4.研究优化爬虫算法,提升爬虫BOSS直聘系统的稳定性、可扩展性; 5.独立解决实际开发过程中碰到的各BOSS直聘类产品数据需求和接口问题。 任职要求: 1.专科及以上学历,计算机相关专业,5年以上相关工作经验; 2.精通 Python 语言,精通常见开源爬虫框架; 3.精通 Charles等抓包工具,精通网页抓取原理及技术,精通正则表达式,熟练从结构化和非结构化的数据中获取信息; 4.精通 JS debugger、JS逆向; 5.精通 selenium 、直聘DrissionPage 等自动化抓取技术; 6.熟悉 破解网站验证码、绕过机器人检测等技术; 7.熟悉 APP脱壳、APP逆向反编译; 8.熟悉 android & ios 自动化; 9.具备优秀的逻辑思维能力,对解决挑战性问题充满热情善于分析问题/解决问题。

技能解析

    暂无识别出相关技能要求

    技能解析

    专有技能
    • 独立解决
    • 善于分析
    • 分析问题
    • 抓包工具
    • 可扩展性
    • 获取信息
    • 善于分析问题
    • 解决问题
    • 逻辑思维
    • 逻辑思维能力
    • 开发过程
    • 数据清洗

      数据来自CSL职业科学研究室

      工作时间

      上午9:00   -   下午7:00
      更新于 2025-03-23