-
岗位要求:
1、本科及以上学历,计算机相关专业;
2、2年以上python语言开发经验,有完整软件项目开发、迭代和实施经验;
3、具备良好的python语言基本
-
岗位职责:
1、负责爬取外网图文、视听等资源的持续爬取工作;
2、负责反爬虫策略研究,代理IP、验证码识别等采集支撑服务建设;
3、负责大规模文本、图像数据的抓
-
岗位职责:
1、根据项目需求,负责爬虫调研、评估、开发及维护等全流程工作。
2、参与爬虫系统的架构设计、开发与优化。
3、参与攻克反爬风控手段。
4、主动完善监
-
岗位职责:
1.负责公司现有爬虫产品的维护;
2.负责指定领域数据的定向抓取,深度提取.清洗和结构化;
3.解决封印.封账号.验证码.页面跳转等难点;
4.参与
-
1.负责Python后端开发工作,能够独立承担研发职责,对代码、设计质量、数据质量负责;
2.负责网页、APP的数据抓取和爬取链路优化(包括逆向分析、脱壳、加密
-
岗位职责:
1、负责网页及APP数据采集。
2、负责网页爬虫架构设计,如分布式。
3、使用爬虫和自动化技术模拟人工行为进行并发操作任务。
4、实时监控爬虫进度和
-
岗位描述
1. 参与QPON外部数据层建设,专注于基础数据采集平台建设,负责各类外部数据接入,清洗等工作
2. 参与基础数据采集平台的架构设计、开发与优化
3
-
1.负责公司旗下大数据平台数据采集,入库
2.攻破各种反爬策略,快速解决各类技术疑难问题,建设反爬对抗组件库
3.实时监控爬虫的进度和警报反馈
-
岗位职责:
参与爬虫系统中网页端、移动端爬虫相关开发工作;
设计爬虫策略和反爬虫规则,提升网页抓取的效率和质量;
负责针对复杂反爬技术的破解和绕过,包括但不限
-
职位描述
1、负责猎芯采集系统的建设,负责建元器件知识图谱,深度学习体系,
2、负责页面的抓取采集,处理网络数据抓取规划、汇总,具备搭建数据采集平台,建立爬虫系
-
工作职责:
1、负责相关网站、App的分布式爬虫、RPA的架构设计和开发;
2、负责大规模文本、图像、视频数据的抓取、抽取、去重、清洗等工作;
3、负责制定反爬
-
1、负责抖音/app/小程序/pc等热门的爬取工作,包括数据抓取和爬取链路优化,提升抓取能力;
2、负责反爬虫策略研究,代理IP、验证码识别等采集支撑服务建设;
-
岗位职责:
1、参与爬虫系统中网页端、移动端爬虫相关开发工作;
2、设计爬虫策略和反爬虫规则,提升网页抓取的效率和质量;
3、负责针对复杂反爬技术的破解和绕过
-
一、岗位职责
1、数据采集开发:负责设计并开发爬虫系统,精准采集目标电商平台(美客多、SHEIN等)的商品、销量、评论、关键词等公开数据。
2、反爬虫攻克:应对
-
产品介绍:www.upkuajing.com
为提高沟通效率,建议对产品进行一定了解或体验后再发起沟通!
岗位职责:
1、负责公司的重要爬虫项目的方案设计,工
-
【岗位职责】
1、数据采集系统设计:构建高效、稳定的爬虫系统,系统化采集多源金融与互联网数据。
2、模拟登录与逆向分析:研究目标站点机制,安全实现模拟登录、请求
-
岗位职责:
1. 负责根据业务需求/规划开展爬虫工作,同时对现有爬虫进行维护和完善;
2. 持续进行爬虫核心技术研究和策略优化,攻克疑难技术问题,设计防屏蔽规则
-
岗位职责:
1、负责定向数据的采集与爬取、解析处理、入库及备份等数据日常工作;
2、研究主流网站的爬取方法及数据清洗处理,负责非定向数据的清洗、整理、整合及合并
-
岗位职责:
1、需求分析与方案设计:与业务团队紧密合作,理解数据采集的具体需求,包括数据类型、采集频率、目标平台等,并设计合理的手机群控数据采集方案,包括设备配
-
岗位的工作地点是在广州,非外包外派,全自研,大规模数据采集。
目前业务增长,初级-中级-高级-资深都有HC,薪资会根据面试评估职级来定。
岗位职责:
1、发挥
-
1、设计、开发基于Python的应用及系统爬取数据;
2、负责工具类应用系统的设计与开发;
3、负责App接口逆向开发;
4、进行后端开发,使用Python编写
-
岗位职责:
1.参与公司核心项目的架构设计和代码实现,解决技术难题
2.挖掘AI应用场景,并在公司推动落地
能力要求:
1、计算机科学、人工智能或相关领域大专及
-
岗位职责:
1、负责大规模数据采集系统的架构设计与开发,确保高可用性、高并发及稳定性;
2、优化爬虫策略,提升数据抓取效率,降低被封禁风险;
3、处理动态渲染页
-
需要对海外的反爬虫系统 有成熟的方案。
能突破 px3 datadome akamai的风控。
实现协议并发。
-
岗位职责:
负责设计、开发和维护高效、稳定的 Python 爬虫程序,针对公开网站进行数据采集工作。
研究目标国际网站的结构和反爬机制,制定合理的爬取策略,解决
-
岗位职责:
1、设计和开发高效的爬虫系统,负责数据的抓取、解析与存储;
2、优化爬虫性能,处理大规模数据抓取中的并发、延迟等问题;
3、维护爬虫的稳定性和可靠性
-
该岗位核心方向:TikTok Shop/Temu/Shein/Amazon/Mercado
关于我们:我们是一家高速发展的跨境电商企业,致力于通过数据驱动的方式
-
岗位职责:
1. 负责电商平台的商品信息爬取与整理
2. 分析电商数据,为市场趋势提供支持
3. 维护爬虫程序,确保数据的准确性和时效性
任职要求:
1. 具
-
逆向爬虫工程师
风控 产品:
1、 可 独立 解决 Akamai、 Incapsula Reese84、 x-s3-s4e、 同盾 BlackBox、 易盾滑块
-
岗位职责
1、负责跨境电商(亚马逊、Shopify等)、海外社媒平台等数据采集平台的设计与开发,实现自动化数据爬取和API对接
2、构建和维护分布式爬虫系统,