职位&公司对比

职位关闭

大数据爬虫工程师

-K·薪
  • 批发/零售
  • 已上市
职位关闭

python爬虫工程师(会PHP优先)

-K·薪
  • 大数据
  • A轮

职位详情

  • 上海
  • 不限
  • 本科
  • 淘天
  • 京东
  • 得物
  • 抖音
  • 爬虫
  • 清洗

工作内容来自BOSS直聘 1负责大数据爬虫项目的开发与维护,确保数据的准确性和时效性。 2、在淘天、京东、得物、抖音等公域电商平台上进行数据爬BOSS直聘取,并进行数据清洗和处理。来自BOSS直聘 3、与团队合作,优化爬虫算法,提升数据处理效率和质量。 任职要求 1、具备扎BOSS直聘实的编程能力,熟练使用Python等编程语言。 2、熟悉各类社交媒体和电商平台的结构和规则,能够高效地编写爬虫代码。 3、具有良好的团队合作精神,能够在快节奏的环境中保持高效率。

职位详情

  • 上海
  • 5-10年
  • 本科
  • python
  • PHP

工作内容: 1.负责网络爬虫系统的设计与开发工作,数据处理,数据看板来自BOSS直聘 2.对多平台数据源 (WEB/APP/H5/小程序等) 进行直聘数据采集及分析 3.设计数据采集策略,提升数据采集效率kanzhun及质量 4.深入了解数据内容,分析数据特征,持续优化数据的清洗规则 任职要求: 1.计算机相关专业,本科及以上学历,有5年以上爬虫相关经验 2.掌握开发语言Python,熟悉PHP,具备良好的编码能力、扎实的数据结构知识 3.熟悉TCP/IP,HTTP及相关网络协议 4.了解各种Webboss前端技术 5.有反爬相关问题处理经验,熟悉常用的爬虫技术及架构设计 6.对分布式、多线程、缓存、消息队列等常用boss互联网技术有一定了解 7.了解后端开发

技能解析

专有技能
  • 数据爬虫
  • 团队合作精神
  • 与团队合作
  • 编程语言
  • 合作精神
  • 开发与维护
  • 编程能力
  • 团队合作
  • 数据清洗
相同技能
  • 数据处理

数据来自CSL职业科学研究室

技能解析

专有技能
  • 架构设计
  • 网络协议
  • 互联网技术
  • 系统的设计
  • 平台数据
  • 熟悉PHP
  • 数据结构
  • 分析数据
  • 前端技术
  • 消息队列
  • 开发工作
  • 数据采集
  • 编码能力
  • 开发语言
相同技能
  • 数据处理

数据来自CSL职业科学研究室

工作时间

上午09:00   -   下午06:00
双休偶尔加班

工作时间

上午09:00   -   下午06:00
双休弹性工作

公司福利

  • 节日福利
  • 团建聚餐
  • 带薪年假
  • 法定节假日三薪
  • 年终奖
  • 五险一金

公司福利

  • 五险一金
  • 定期体检
  • 加班补助
  • 年终奖
  • 带薪年假
  • 员工旅游
  • 节日福利
更新于 2025-03-11