职位&公司对比

招聘中
  • 电子商务
  • 不需要融资
招聘中

爬虫工程师

-K
  • 互联网
  • 已上市

职位详情

  • 广州
  • 3-5年
  • 本科
  • 开发
  • 数据处理

岗位工作内容: 1. 设计、开发和维护高效、可靠的网络爬虫系统。 2. 解析不同格式的网页内容(HTML、JSON、XML等),并提取所需数据。 3. 处理大量数据,保证数据的准确性和完整性。 4. 优化爬虫性能,确保爬虫运行的高效性和稳定性。 5. 处理反爬虫机制,确保BOSS直聘数据抓取的持续性。 6. 与数据分析团队合作,提供高质量的数据支持。 7. 维护和扩展现有爬虫框架直聘和工具。BOSS直聘 8. 监控爬虫运行状态,及时解决异常问题。 本岗位任职资格: 1. 教育背景:计算机科学、软件工程或相关专业专科及以上学历。 2. 工作经验:2年以上网络爬虫相关工作经验。 3. 编程技能:熟练掌握Python及其相关的爬虫库(如Scrapy、BeautifulSoup、Selenium等)。 4. BOSS直聘数据处理:熟悉常见的数据格式和处理方法,具备一定的数据清洗和数据预处理能力。 5. 网络知识:了解HTTP协议及网络基本原理,熟悉常见的反爬虫机制及应对方法。 6. 数据库:掌握至少一种数据库技术(如MySQL、来自BOSS直聘MongoDB等)。 7. 工具使用:熟悉Linux操作系统及常用命令,能够使用Git进行代码管理。 8. 问题解决能力:具备良好的分析和解决问题的能力,能够独立处理爬虫过程中遇到的各种技术难题。 9. 团队合作:具备良好的沟通能力和团队合作精神,能够与其他团队成员紧密合作。 10. 学习能力:对新技术充满热情,具备较强的学习能力和自我驱动力。

职位详情

  • 广州
  • 3-5年
  • 本科
  • Python
  • Linux
  • 数据采集

有米云是专业的全球营销大数据平台,帮助企业提升从市场洞察、产品决策、营销策略、创意内容到推广执行等营销全链路数字化效率。2010年成立,2015年新三板上市。 【初级爬虫工程师】 工作职责: 1、负责数据产品平台采集系统的设计、研发与维护; 2、设计采集策略与算法,提升抓取效率; 3、持续优化系统,提高系统的稳定性及性能。 任职资格: 1、全日制统招本科,1年以上爬虫开发经验,熟悉Python语言,有js逆向、反爬经验优先; boss2、熟悉常用的数据结构和算法,熟悉常见设计模式; 3、熟悉网络编程(TCP/HTTP 协议),具有 Linux 下编程经验和操作经验; 4、了解常见的采集框架 Scrapy、Celery、异步aiohttp请求库等; 5、优秀的分析、解决问题能力,对处理未知的、挑战性问题充满激情; 6、良好的沟通能力和团队合作精神。 直聘 来有米,你可以拥有: 【薪酬待遇】领先市场的薪资+暖心补贴(餐补/设kanzhun备补贴) 【五险一金】入职即缴纳五险一金、BOSS直聘额外加补充商业保险(意外险) 【带薪假期】各类法定的带薪休假,节假日礼品礼金、司龄福利假等 【团队活动】不定期的下午茶生日会、聚会、outing活动,劳逸结合 【技能提升】组织新人培训、专业技能培训、行业知识培训、产研通道培训等 【年度体检】每年组织所有正式员工参加健康体检,包括常规体检、中医理疗等 【人才吸引】满足条件可申请轮候公司人才公寓、购房免息借款、广州户口办理等

技能解析

专有技能
  • HTML
  • JSON
  • 软件工程
  • 工具使用
  • 数据分析
  • 学习能力和
  • 紧密合作
  • 技术难题
  • 数据库技术
  • 数据处理
  • 解决能力
  • 良好的分析
  • 分析和解决问题的能力
  • 问题解决能力
  • 解决问题的能力
  • 编程技能
  • HTTP协议
  • 代码管理
  • 数据支持
  • 数据清洗
  • 问题解决
  • 较强的学习
  • 大量数据
  • 基本原理
  • 学习能力
  • 分析和解决问题
相同技能
  • 团队合作精神
  • 沟通能力
  • 合作精神
  • 沟通能力和
  • 解决问题
  • 好的沟通
  • 团队合作

数据来自CSL职业科学研究室

技能解析

专有技能
  • 数据产品
  • 数据结构和算法
  • 数据结构和算
  • 网络编程
  • 系统的设计
  • 编程经验
  • 数据结构
  • 设计模式
  • 优秀的分析
  • 团队活动
  • 开发经验
  • 优化系统
  • 营销策略
  • 熟悉网络编程
  • 解决问题能力
相同技能
  • 团队合作精神
  • 沟通能力
  • 合作精神
  • 沟通能力和
  • 解决问题
  • 好的沟通
  • 团队合作

数据来自CSL职业科学研究室

工作时间

上午09:30   -   下午06:30
双休偶尔加班

工作时间

上午09:00   -   下午06:30
双休弹性工作

公司福利

  • 生日福利
  • 节日福利
  • 通讯补贴
  • 免费班车
  • 有无线网
  • 团建聚餐
  • 零食下午茶
  • 员工旅游
  • 带薪年假
  • 工龄奖
  • 法定节假日三薪
  • 节假日加班费
  • 加班补助
  • 绩效奖金
  • 年终奖
  • 定期体检
  • 意外险
  • 补充医疗保险
  • 五险一金

公司福利

  • 节日福利
  • 通讯补贴
  • 零食下午茶
  • 餐补
  • 员工旅游
  • 带薪年假
  • 股票期权
  • 年终奖
  • 定期体检
  • 意外险
  • 五险一金
  • 大病互助
  • 文娱活动
更新于 2025-01-07