招聘中

数据采集工程师(初级)

9-14K

北京 1-3年 大专

...
节日福利团建聚餐员工旅游年终奖定期体检五险一金
节日福利团建聚餐员工旅游年终奖定期体检五险一金
数据采集工程师(初级) 9-14K
...
节日福利团建聚餐员工旅游年终奖定期体检五险一金
节日福利团建聚餐员工旅游年终奖定期体检五险一金
意讯无限 查看所有职位

各大行业职位任你选

首次验证通过即注册BOSS直聘账号
+86
已阅读并同意BOSS直聘《用户协议》 《隐私政策》,允许BOSS直聘统一管理本人账号信息

公司基本信息

未融资

20-99人

智能硬件

查看全部职位
计算

职位描述

  • 独立解决封账号
  • MySQL或PostgreSQL
  • 精通App逆向或Web逆向
  • 数据采集与爬取
工作职责:
1、负责开发网络爬虫系统以及优化爬虫策略,进行高并发多平台信息的分析和抓取;
2、完成数据采集与爬取、解析处理、入库等数据日常工作;
3、积极主动探索爬虫在实际业务中的价值,参与设计数据有效利用策略,从数据合理性、完整性角度提供建议和方案;
4、把握网络爬虫核心技术研究方向,研究优化方向,充分利用资源,提升爬虫系统的稳定性、可扩展性;
5、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量。
任职资格:
1. 统招专科以上学历,计算机相关专业,具备良好的计算机专业知识
2. 至少精通Python/JavaScript/Go其中一种语言,熟练使用XPath或RE正则等常用模块,了解指纹浏览器、无头浏览器的工作原理,具备扎实的编程功底,具有良好的程序设计能力;
3. 熟悉爬虫业务流程,2年以上爬虫项目经验,熟练Scrapy、Pyspider等主流爬虫框架框架,能够独立解决封账号、封IP、验证码、JS逆向、网页限制爬取等问题;
4. 熟悉Appium、Selenium、Playwright、Puppeteer等自动化采集技术;
5. 有网站采集系统架构经验优先;
6. 有丰富的App采集经验或网站采集经验,至少精通App逆向或Web逆向之一;
7. 熟练使用MySQL或PostgreSQL、了解Redis、Elasticsearch、Kafka等技术;
8. 业务理解和分析转化能力较强,富有进取精神及团队合作精神,责任心强,善于合作沟通,能够承受压力。

王女士 今日活跃

意讯无限·人事

竞争力分析

加载中...
个人综合排名:人中排名第
一般 良好 优秀 极好

BOSS 安全提示

BOSS直聘严禁用人单位和招聘者用户做出任何损害求职者合法权益的违法违规行为,包括但不限于扣押求职者证件、收取求职者财物、向求职者集资、让求职者入股、诱导求职者异地入职、异地参加培训、违法违规使用求职者简历等,您一旦发现此类行为, 请立即举报

了解更多职场安全防范知识

公司介绍

北京意讯无限科技有限公司是国内一家领先的虚拟货币数据追溯和分析方案供应商,致力于通过区块链技术、大数据和人工智能解决数字货币监管治理问题。北京意讯打造了先进的链上数据分析平台,构建了链上数据的监控、分析、穿透和治理的一体化服务模式。
查看全部

工商信息

  • 公司名称北京意讯无限科技有限公司
  • 法定代表人丁悦芳
  • 成立日期2022-03-24
  • 企业类型有限责任公司(台港澳法人独资)
  • 经营状态存续
  • 注册资金2000万人民币
查看全部

工作地址

北京海淀区国际软件大厦二区104-106
公司地址

点击查看地图

精选职位

更新于:2024-10-06

快速完善简历,与Boss开聊

与在线Boss直接聊,最快当天拿offer

快速完善信息