职位&公司对比
职位详情
- 广州
- 3-5年
- 本科
- 开发
- 数据处理
岗位工作内容： 1. 设计、开发和维护高效、可靠的网络爬虫系统。 2. 解析不同格式的网页内容（HTML、JSON、XML等），并提取所需数据。 3. 处理大量数据，保证数据的准确性和完整性。 4. 优化爬虫性能，确保爬虫运行的高效性和稳定性。 5. 处理反爬虫机制，确保数据抓取的持续性。 6. 与数据分析团队合作，提供高质量的数据支持。 7. 维护和扩展现boss有爬虫框架和工具直聘。 8. 监控爬虫运行状态，及时解决异常问题。 本岗位任职资格： 1. 教育背景：计算机科学、软件工程或相关专业专科及以上学历。 2. 工作经验：boss2年以上网络爬虫相关工作经验。 3. 编程技能：熟练掌握Python及其相关的爬虫库（如Scrapy、BeautifulSoup、Selenium等）。 4. 数据处理：熟悉常见的数据格式和处理方法，具备一定的数据清洗和数据预处理能力。 5. 网络知识：了解HTTP协议及网络基本原理，熟悉常见的反爬虫机制及应对方法。 6. 数据库：掌握至少一种数据库技术（如MySQL、Mon来自BOSS直聘goDB等）。 7. 工具使用：熟悉Linux操作系统及常用命令，能够使用Git进行代码管理。 8. 问题解决能力：具备良好的分析和解决问题的能力，能够独立处理爬虫过程中遇到的各种技术难题。 9. 团队合作：具备良好的沟通能力和团队合作精神，能够与其他团队成员紧密合作。 10. 学习能力：对新技术充满热情，具备较强的学习能力和自我驱动力。
职位详情
- 广州
- 3-5年
- 大专
- 爬虫
岗位职责： 1直聘、设计爬虫策略和防屏蔽规则，解决封账号、封IP、验证码识别、图像识别等难点； 2、维护和优化已有的爬虫服务； 3、负责爬虫核boss心算法的策略优化研究，充分利用资源，提升网页抓取的效率和质量。 4、负责网络爬虫及数据库的BOSS直聘设计与开发； 5、保障采集的数BOSS直聘据按时、准确、稳定的输出 6、与数据仓库团队做好采集数据流转的对接。 岗位要求： 1、本科及以上学历，统计学、信息与计算机相关专业，3年以上相关工作经验，优秀者可放宽要求； 2、有电商主流网站、生意参谋、抖音罗盘、京东商智等主流APP爬虫经验优先，可以逆向AkanzhunPP者优先。 3、有2年以上各渠道爬虫经验； 4、熟练使用开发语言python、RPA，影刀使用、原生态Javascript、HTML、CSS、JQuery； 5、熟练应用各类主流数据库如MSSQL、MySQL、Redis等； 6、能随各平台反爬技术更新而更新，能独立解决验证码问题。
技能解析
- 沟通能力和
- JSON
- 软件工程
- 工具使用
- 数据分析
- 学习能力和
- 沟通能力
- 紧密合作
- 技术难题
- 数据库技术
- 合作精神
- 数据处理
- 解决能力
- 良好的分析
- 分析和解决问题的能力
- 问题解决能力
- 团队合作精神
- 解决问题的能力
- 编程技能
- HTTP协议
- 解决问题
- 团队合作
- 代码管理
- 数据支持
- 数据清洗
- 问题解决
- 较强的学习
- 大量数据
- 基本原理
- 好的沟通
- 学习能力
- 分析和解决问题
- HTML
数据来自CSL职业科学研究室
技能解析
- 维护和优化
- 主流数据库
- 独立解决
- 数据仓库
- MSSQL
- 生意参谋
- 开发语言
- HTML
数据来自CSL职业科学研究室
工作时间
公司福利
- 生日福利
- 节日福利
- 通讯补贴
- 免费班车
- 有无线网
- 团建聚餐
- 零食下午茶
- 员工旅游
- 带薪年假
- 工龄奖
- 法定节假日三薪
- 节假日加班费
- 加班补助
- 绩效奖金
- 年终奖
- 定期体检
- 意外险
- 补充医疗保险
- 五险一金
电子营业执照
京公网安备11010502032801