职位&公司对比
职位详情
- 广州
- 3-5年
- 本科
- 开发
- 数据处理
岗位工作内容: 1. 设计、开发和维护高效、可靠的网络爬虫系统。 2. 解析不同格式的网页内容(HTML、JSON、XML等),并提取所需数据。 3. 处理大量数据,保证数据的准确性和完整性。 4. 优化爬虫性能,确保爬虫运行的高效性和稳定性。 5. 处理反爬虫机制,确保数据抓取的持续性。 6. 与数据分析团队合作,提供高质量的数据支boss持。 7. 维护和扩展现BOSS直聘有爬虫框架和工具。 8. 监控爬虫运行状态,及时解决异常问题。 本岗位任职资格: 1. 教育背景:计算机科学、软件工程或相关专业专科及以上学历。 2. 工作经验:2年以上网络爬虫相关工作经验。 3. 编程技能:熟练掌握Python及其相关的爬虫库(如Scrapy、BeautifBOSS直聘ulSoup、Selenium等)。 4. 数据处理:熟悉常见的数据格式和处理方法,具备一定的数据清洗和数据预处理能力。 5. 网络知识:了解HTTP协议及网络基本原理,熟悉常见的反爬虫机制及应对方法。 6. 数据库:掌握至少一种数据库技术(如MySQL、MongoDB等)。 7. 工具使用:熟悉Linux操作系统及常用命令,能够使用Git进行代码管理。 8. 问题解决能力:具备良好的分析kanzhun和解决问题的能力,能够独立处理爬虫过程中遇到的各种技术难题。 9. 团队合作:具备良好的沟通能力和团队合作精神,boss能够与其他团队成员紧密合作。 10. 学习能力:对新技术充满热情,具备较强的学习能力和自我驱动力。
职位详情
- 广州
- 3-5年
- 大专
- 计算机专业
- 爬虫经验
- 反爬
- MySQL
- 数据采集
- Python
- 网页抓取
岗位职kanzhun责: 1、负责多平台的信息抓取、解析、数据清洗等研发与优化工作; 2、开发和维护采集程序,研究和应对反爬策略,保证采集的稳定性; 3、负责抓取数据的解析入库,爬虫系统的监控和异常警报。 任职要求: 1、精通Python,有较丰富的分布式爬虫系统开发经验; 2、熟练网页抓取原理、技术及正则表达式,熟悉JS逆向技术; 3、熟悉http、https、tcp/ip、websocket协议; 4、熟练使用mysql、mongoDB数据库; 5、熟悉linux常用命令,并维护优化服务器和日志查看; 6、有解决复杂的反爬限制实践经验,能解决如图片验证码、滑块、账号限制、ip限制BOSS直聘、签名等问题; 7、工作主动性强,认真负责,抗压能力强,能够独立分析和解决boss问题; 8、性格乐观开朗,服从安排,有团BOSS直聘队合作意识。 公司福利: 1、上班时间9:30-12:30,中午午休1.5个小时,下午14:00-18:3kanzhun0,法定节假日正常放。 2、餐补+全勤奖+下午茶+团建+节假日礼品+带薪年假+五险一金。 3、公司环境优越,氛围好,办公舒适,交通方便。
技能解析
- 沟通能力和
- HTML
- JSON
- 软件工程
- 工具使用
- 数据分析
- 学习能力和
- 沟通能力
- 紧密合作
- 技术难题
- 数据库技术
- 合作精神
- 数据处理
- 解决能力
- 良好的分析
- 分析和解决问题的能力
- 问题解决能力
- 团队合作精神
- 解决问题的能力
- 编程技能
- HTTP协议
- 代码管理
- 数据支持
- 问题解决
- 较强的学习
- 大量数据
- 基本原理
- 好的沟通
- 学习能力
- 解决问题
- 分析和解决问题
- 团队合作
- 数据清洗
数据来自CSL职业科学研究室
技能解析
- 合作意识
- 开发经验
- 团队合作意识
- 系统开发
- 独立分析
- 有团队合作意识
- 解决问题
- 分析和解决问题
- 团队合作
- 数据清洗
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 生日福利
- 节日福利
- 通讯补贴
- 免费班车
- 有无线网
- 团建聚餐
- 零食下午茶
- 员工旅游
- 带薪年假
- 工龄奖
- 法定节假日三薪
- 节假日加班费
- 加班补助
- 绩效奖金
- 年终奖
- 定期体检
- 意外险
- 补充医疗保险
- 五险一金
公司福利
- 团建聚餐
- 零食下午茶
- 餐补
- 员工旅游
- 带薪年假
- 全勤奖
- 加班补助
- 五险一金