各大行业职位任你选
首次验证通过即注册BOSS直聘账号职位描述
- 独立解决封账号
- MySQL或PostgreSQL
- 精通App逆向或Web逆向
- 数据采集与爬取
1、负责开发网络爬虫系统以及优化爬虫策略,进行高并发多平台信息的分析和抓取;
2、完成数据采集与爬取、解析处理、入库等数据日常工作;
3、积极主动探索爬虫在实际业务中的价值,参与设计数据有效利用策略,从数据合理性、完整性角度提供建议和方案;
4、把握网络爬虫核心技术研究方向,研究优化方向,充分利用资源,提升爬虫系统的稳定性、可扩展性;
5、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量。
任职资格:
1. 统招专科以上学历,计算机相关专业,具备良好的计算机专业知识
2. 至少精通Python/JavaScript/Go其中一种语言,熟练使用XPath或RE正则等常用模块,了解指纹浏览器、无头浏览器的工作原理,具备扎实的编程功底,具有良好的程序设计能力;
3. 熟悉爬虫业务流程,2年以上爬虫项目经验,熟练Scrapy、Pyspider等主流爬虫框架框架,能够独立解决封账号、封IP、验证码、JS逆向、网页限制爬取等问题;
4. 熟悉Appium、Selenium、Playwright、Puppeteer等自动化采集技术;
5. 有网站采集系统架构经验优先;
6. 有丰富的App采集经验或网站采集经验,至少精通App逆向或Web逆向之一;
7. 熟练使用MySQL或PostgreSQL、了解Redis、Elasticsearch、Kafka等技术;
8. 业务理解和分析转化能力较强,富有进取精神及团队合作精神,责任心强,善于合作沟通,能够承受压力。
王女士 今日活跃
竞争力分析
BOSS 安全提示
BOSS直聘严禁用人单位和招聘者用户做出任何损害求职者合法权益的违法违规行为,包括但不限于扣押求职者证件、收取求职者财物、向求职者集资、让求职者入股、诱导求职者异地入职、异地参加培训、违法违规使用求职者简历等,您一旦发现此类行为, 请立即举报
了解更多职场安全防范知识公司介绍
工商信息
- 公司名称北京意讯无限科技有限公司
- 法定代表人丁悦芳
- 成立日期2022-03-24
- 企业类型有限责任公司(台港澳法人独资)
- 经营状态存续
- 注册资金2000万人民币
工作地址
点击查看地图
精选职位
更新于:2024-10-06