-
该岗位可支持异地办公。
岗位职责:
1. 针对春秋、亚航、捷星、宿务、Scoot 等 20+ 廉价航空官网/APP,7×24 小时滚动抓取运价、税费、行李额、
-
最低本科 985优先
岗位职责:
一、爬虫开发与维护:
1.使用Python进行网页数据爬取,编写高效、稳定的爬虫程序。
2.负责爬虫系统的设计、开发、测试、
-
岗位职责:
1、负责核心系统的架构设计与Go语言开发,保障系统的高性能与高可用性;
2、参与关键模块的代码实现与优化,提升系统稳定性与扩展性;
3、
-
岗位职责
1、负责业务后台系统开发和优化;
2、熟悉业务,开发业务逻辑模块、功能,分析和发现系统的优化点,负责推动产品性能和架构优化,不断创新;
3、跟其他相关
-
【职位描述】
1.参与公司研发工作系统架构的设计、任务调度系统的搭建、中间件开发、容器调度、数据中台的设计与实现;
2.主导服务架构优化、性能调优、瓶颈排查等工
-
【公司介绍】
奇思信息科技有限公司
我们是一家通过IT技术驱动,专注将大数据、爬虫、人工智能技术应用在时尚、海淘、跨境电商等领域的科技公司。在广州、香港拥有办事
-
职位描述
1、负责业务冷启动阶段关键爬虫项目的方案设计与工程实现,数据源以海外及国内主流内容平台的图文、视频、评论、账号信息等为主;
2、围绕业务冷启和内容供给
-
岗位职责:
1. 负责开发和维护爬虫系统,确保数据的准确性和及时性
2. 与团队合作,共同完成项目任务,保证服务质量
任职要求:
1. 具备良好的沟通能力,能
-
职位职责:
负责抖音、小红书、百度热榜、微博、知乎、快手等主流平台的热搜榜、热词、实时内容数据采集;
针对平台加密接口或请求参数,进行 JS 逆向、抓包分析、
-
1、负责设计和开发分布式网络爬虫系统,进行数据抓取和分析;
2、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
3、参与分布式爬虫和数据采集系统的架构设计
-
Python开发工程师(Python/Go)
Python/Go岗位要求:
1、负责华为云数据库管控系统,全链路监控,等基础平台的设计及开发;
2、负责华为云数
-
岗位职责:
1、负责难点网站的抓取;
2、优化数据调度、抓取、解析、存储等流程;
3、负责爬虫系统相关服务的部署和维护。
岗位要求:
1、本科及以上学历,计算机
-
职位: 高级Golang/Python开发工程师
工作地点: 厦门
汇报对象:技术经理
职位概述:
作为高级Golang/Python开发工程师,您将负责设计、
-
一、工作职责
1. 负责设计、开发、优化网络爬虫系统,采集并处理海量数据;
2. 研究并解决反爬技术,确保数据采集的稳定性和高效性;
3. 监控数据质量,清洗、
-
岗位要求:<div> 1.负责设计开发爬虫系统以及优化爬虫策略,进行多平台信息的抓取和分析
2.设计爬虫策略和防屏蔽规则,完成对复杂网站和APP的信息抓取
-
"岗位职责
1. 数据全链路治理
- 负责搭建从数据采集、清洗到存储的全流程自动化系统,确保数据时效性、完整性及合规性。
- 设计反爬虫对抗策略(如IP池
-
Job Description
1. 负责海外电商平台的数据采集系统设计与开发,构建高效、稳定、可扩展的分布式爬虫框架。
2. 设计与优化大规模算法素材数据采集
-
岗位描述:
1、负责 AI 爬虫系统的后端、平台及策略开发,构建自动化的内容发现与下载能力,高效获取网页、图片、音视频、文档等优质资源;
2、面向千亿级数据规模
-
任职资格:
1、熟练掌握 Python,熟悉爬虫开发,有 3 年及以上爬虫开发经验,熟悉 Selenium、DrissionPage、FastAPI 等开源框架
-
薪资范围:
15-30K
职位详情
JS逆向
网络爬虫技术
Python语言
【岗位职责】:
1、负责设计和开发网络爬虫系统,完成关键信息的数据抽取、清洗、去重
-
岗位职责:
1. 负责Web/APP/小程序多端爬虫的开发,确保数据的准确性和完整性。
2. 设计和优化爬虫策略,提升数据采集的效率与质量,保证爬虫系统的稳定运
-
岗位职责:
1.根据业务需求开发特定或通用爬虫模块,确保分配的爬虫开发任务按时,按质量完成。
2.负责对已上线数据源进行定期维护,包括:数据源改版重新适配、失效
-
岗位职责:
1、负责公司爬虫系统的设计、研发与维护;
2、设计爬虫策略与算法,提升抓取效果;
3、持续优化系统,提高系统的稳定性及性能。
4、负责网络数据抓取规
-
岗位职责:
1、负责开发网络爬虫系统以及优化爬虫策略,进行多平台信息的抓取和分析;
2、完成数据采集与爬取、解析处理、入库等数据日常工作;
3、积极主动思考探索
-
岗位职责:
1、负责大数据抓取 ;
2、负责项目的后期维护;
任职要求:
1、本科及本科以上学历,计算机、软件及相关专业毕业;
2、熟悉 Python/J
-
岗位职责:
1、负责设计和开发爬虫系统,进行多平台信息的抓取和分析工作;
2、负责网页信息和平台信息抽取、清洗、消重等工作,提升平台的抓取效率;
3、负责爬虫核
-
岗位职责
1、负责爬虫相关技术的研究和实现工作,比如APP破解、小程序破解、分布式爬虫、验证码破解、JS逆向反爬机制的研究;
2、负责公司爬虫的核心算法以及策略
-
岗位的工作地点是在广州,非外包外派,全自研,大规模数据采集。
目前业务增长,初级-中级-高级-资深都有HC,薪资会根据面试评估职级来定。
岗位职责:
1、发挥
-
工作职责:
1、负责各大航空公司官网或者APP数据采集,主要是动态数据。
2、负责网页爬虫架构设计(包括基础资源,如代理池技术、反爬技术、浏览器采集技术等等)与
-
一、任职要求(并不表示部分条件未达到则一定不会聘用):
1.熟练使用Python标准库和流行的第三方库,精通Python语言;
2.熟悉以下主流服务器端开源系统