职位&公司对比

招聘中

大数据爬虫工程师

-K·薪
  • 批发/零售
  • 已上市
招聘中
  • 互联网
  • 已上市

职位详情

  • 上海
  • 不限
  • 本科
  • 淘天
  • 京东
  • 得物
  • 抖音
  • 爬虫
  • 清洗

工作内容 1、负责大数据爬虫项目的开发直聘与维护,确保数据的准确性和时效性。 2、在淘天、京东、得物、抖音等公域电商平台上进行数据爬取,并进行数据清洗和处理。 3BOSS直聘、与团队合作,优化爬虫算法,提数据处理效率和质boss量。 任职要求 1、具备扎实的编程能力,熟练使用Python等编程语言。 2、熟悉各类社交媒体和电商平台的结构和规则,能够高效地编写爬虫代码。 3、具有良好的团队合作精神,能够在快节奏直聘的环境中保持高效率。

职位详情

  • 上海
  • 3-5年
  • 大专
  • 互联网
  • 逆向
  • 电商

爬虫专家/工程师 【本boss职位可base广州或上海】 职责: 1、通过逆向协议请求、模拟点击请求等形式对公司内部的反爬系统进行能力验证,分析薄弱点 2、分析业内竞品公司的反爬系统,对前端/云端防护策略进行分析进直聘而推动提升自身能力水平 任职要求: 1.熟悉app端数据抓取(有逆向、脱壳等经验),掌握Apktool、dex2jar、JD-GUI、frida、ida等工具; 2.熟悉并使用过一种主流爬虫架构,如Scrapy、Gocolly、Webmagic等 3.熟练掌握主流爬虫攻防技术,对设备指纹/boss协议破解/模拟点击/人机识别等有较深入的研究; 4.掌握反爬风控策略,能够从直聘协议/设备/环境/行为/真人化等多角度识别定位,绕过防来自BOSS直聘御系统

技能解析

专有技能
  • 数据爬虫
  • 团队合作精神
  • 与团队合作
  • 编程语言
  • 合作精神
  • 开发与维护
  • 数据处理
  • 编程能力
  • 团队合作
  • 数据清洗

    数据来自CSL职业科学研究室

    技能解析

    专有技能
    • 风控策略

      数据来自CSL职业科学研究室

      工作时间

      上午09:00   -   下午06:00
      双休偶尔加班

      工作时间

      上午9:00   -   下午6:00
      双休弹性工作

      公司福利

      • 节日福利
      • 团建聚餐
      • 带薪年假
      • 法定节假日三薪
      • 年终奖
      • 五险一金

      公司福利

      • 五险一金
      • 补充医疗保险
      • 定期体检
      • 全勤奖
      • 年终奖
      • 股票期权
      • 带薪年假
      • 员工旅游
      • 免费班车
      • 通讯补贴
      • 交通补助
      • 包吃
      • 节日福利
      • 住房补贴
      • 零食下午茶
      更新于 2024-12-22