职位&公司对比
职位详情
- 北京
- 1-3年
- 大专
- 数据抓取
- 网络爬虫
- 数据采集
采集软件的boss编写,采集,清洗BOSS直聘,整理来自BOSS直聘,BOSS直聘储来自BOSS直聘存。也可灵活形式合作。
职位详情
- 北京
- 5-10年
- 大专
- 爬虫
- 逆向
岗位职责: kanzhun1.对指定的网站进行网页抓取、数据提取、破解反爬策略; 2.负责多平台信息抽取、数据清洗、入库、服务化等研发和优化工作; 3.参与开发和设计分布式网络爬虫系统,进行信息的抓取和分析工作; 4.研究优化爬虫算法,提升爬虫BOSS直聘系统的稳定性、可扩展性; 5.独立解决实际开发过程中碰到的各BOSS直聘类产品数据需求和接口问题。 任职要求: 1.专科及以上学历,计算机相关专业,5年以上相关工作经验; 2.精通 Python 语言,精通常见开源爬虫框架; 3.精通 Charles等抓包工具,精通网页抓取原理及技术,精通正则表达式,熟练从结构化和非结构化的数据中获取信息; 4.精通 JS debugger、JS逆向; 5.精通 selenium 、直聘DrissionPage 等自动化抓取技术; 6.熟悉 破解网站验证码、绕过机器人检测等技术; 7.熟悉 APP脱壳、APP逆向反编译; 8.熟悉 android & ios 自动化; 9.具备优秀的逻辑思维能力,对解决挑战性问题充满热情,善于分析问题/解决问题。
技能解析
暂无识别出相关技能要求
技能解析
- 独立解决
- 善于分析
- 分析问题
- 抓包工具
- 可扩展性
- 获取信息
- 善于分析问题
- 解决问题
- 逻辑思维
- 逻辑思维能力
- 开发过程
- 数据清洗
数据来自CSL职业科学研究室