爬虫/数据工程师
20-40K 北京昌平区北七家 1-3年 大专
岗位职责： - 数据采集： 负责互联网公开数据（图片、文本、视频）的定向抓取，应对各种反爬策略。 - 数据清洗与入库： 对抓取的非结构化数据进行清洗、去重、格式
岗位职责： 1. 负责设计、开发和优化网络爬虫系统，以实现多平台信息的高效抓取和分析； 2. 承担分布式爬虫系统的建设工作，优化数据调度、抓取、解析和存储流程
职位描述 1. 采集全球主流社交媒体平台数据数据采集，建立自动化、可持续的采集pipeline 2. 设计并实现采集数据库，建立数据清洗、去重、标准化流程，实现
上班时间9点到下午5点半 双休 岗位职责： 1.根据业务需求，从目标页面或系统采集相关数据； 2.对采集数据按相应规则清洗，入库； 3.对采集数据和原始数据的
岗位职责： 1、负责分布式爬虫系统的架构设计、迭代开发、性能优化与日常维护，搭建高并发、高可用、可扩展、低封禁率的自动化数据采集体系，保障海量数据稳定抓取。
【工作内容】 1、负责网页、APP、接口等多渠道数据采集开发，完成数据抓取、解析、清洗、结构化处理及入库； 2、使用Java 或 Python开发采集脚本，处理
职位描述 1、负责采集脚本维护，对指定的网站进行网页抓取、破解反爬策略、数据提取、清洗、入库； 2、负责数据采集平台的运行维护，并能实时监控爬虫的进度和警报反馈- 公司自研非外包 一、核心职责： 多平台优惠券数据抓取、反爬破解及实时更新 二、技术要求 1. 爬虫技术 ◦ 精通Python（Scrapy/Feapd
大四实习生优先，公司提供龙湖公寓的宿舍 工作内容 1、负责开发和维护爬虫系统，确保数据采集的准确性和效率。 2、分析和处理采集到的数据，确保数据质量和可用性。
岗位职责： 1. 负责大数据爬虫系统的设计与开发，优化数据采集流程； 2. 处理数据抓取中的异常情况和反爬虫策略，提升数据抓取效率； 3. 对抓取的- 岗位职责： 1、负责设计和开发高效、稳定的网络爬虫系统，从各种数据源中抓取数据； 2、对抓取到的数据进行清洗、去重、转换等处理，确保数据的质量和准确性； 3、解
岗位要求： 1、熟悉app逆向、脱壳相关技术，了解分布式网络爬虫等内容等优先，对APP、小程序、Web的爬取开发。 2、 有群控经验优先,能够改机过风控优先。- 1.丰富的python ，JAVA等开发经验 2.熟悉基本数据结构算法 3.善于构建大型分布式爬虫框架 4.善于编写高质量代码 5.注重后期优化 6.具备工作责
- 数据自动标注，视频剪辑
岗位职责： 1. 负责网络数据的采集，包括制定爬虫策略、编写和优化爬虫脚本； 2. 对采集的数据进行清洗、处理，确保数据质量和格式符合分析要求； 3. 维护和优- 设计并实现高效、稳定的爬虫系统，抓取并处理海量数据。 维护和优化现有爬虫，确保其高效运行和数据准确性。 分析和解决爬虫运行中的问题，如反爬机制、IP封禁等。 研
岗位职责: 1、负责新闻、论坛、社交平台、电商平台数据采集，包括特定目标和定向网站采集，及海量大规模采集； 2、负责设计、开发、维护采集相关的软件产品和模块数据
岗位职责： 负责多源数据采集系统的设计与开发，应对各类反爬策略，保障数据获取的稳定性与时效性。 负责海量非结构化数据（PDF、Word、图像、网页等）的解析、清
1.两年及以上.net软件从业经验，专科及以上学历，计算机软件等相关专业； 2.精通C#语言，熟悉Winform，Devexpress等，了解CefSharp技- 会JS、APP逆向。 能独立完成顶像、极验、树美等常见的逆向工作。
职位详情 一、 岗位使命 这不是一份普通的“爬虫”工作。而是构建支撑千万级用户的核心数据底座。 二、 岗位职责 1. 全维度引擎构建：负责全网核心信息及政策
岗位职责： 1.负责设计和开发高效的数据爬虫系统，确保数据抓取的准确性和稳定性； 2.参与数据爬虫策略的制定，优化爬虫算法，提升数据采集效率； 3.负责处理反爬
一、岗位职责 1. 负责多源异构数据的采集与抓取，支持结构化、半结构化和非结构化数据的自动化抓取与更新； 2. 设计并维护稳定、高可用的数据抓取系统，构建可扩
岗位职责 1. 负责公司核心分布式爬虫平台产品的架构设计、技术选型、核心模块开发与持续优化，确保系统的高并发、高可用性和可扩展性。 2. 负责对各类国外网站进行- 我们在寻找AI时代，敢于尝试，擅长学习，爬虫技术过硬的天才，这里是你磨炼技术的场所，这里将使你更强，在项目中磨炼自己，我们提供设备，你出技术，爬取一切可爬取的东
岗位要求： 必备技术背景： 语言：Python 为主，能写 Java/Go 加分 爬虫：mitmproxy、Scrapy、Selenium、Appium，掌握反- 1、负责国内外主流门户网站、新闻媒体、电商平台等目标网站的数据采集系统设计与开发； 2、构建灵活可配置的数据分类体系，通过规则引擎、关键词匹配等方式实现结构化/
工作职责： 1、配合逆向工程师，完成数据抓取项目的代码编写 2、负责日常的项目维护、功能迭代及优化 3、负责简单站点的数据抓取 职位描述： 1、3年以上Pyth
岗位职责: 1、负责新闻、论坛、社交平台、电商平台数据采集，包括特定目标和定向网站采集，及海量大规模采集； 2、负责设计、开发、维护采集相关的软件产品和模块数据- 任职要求： 1、1年以上相关工作经验； 2、扎实的Python基础，熟悉Web、APP爬虫，掌握爬虫与反爬虫技术； 3、熟悉常见爬虫框架，如scrapy、jso
爬虫数据工程师招聘信息页介绍
BOSS直聘为您提供【爬虫数据工程师】相关热门职位，求职者与Boss直接开聊、加快面试、即时反馈，找爬虫数据工程师相关工作就来BOSS直聘和Boss开聊吧！