logo of hello

哈啰数据采集工程师(Python)

社招全职2年以上软研类地点:上海状态:招聘

任职要求


1. 精通 Python,具备扎实的编程功底和良好的代码规范;
2. 2 年及以上 APP 接口分析、数据采集开发经验,熟练使用 Frida、Xposed、JEB 等工具;
3. 熟悉 HTTPS、protobuf、WebSocket 等主流网络协议解析与抓包技术;
4. 熟悉验证码、…
登录查看完整任职要求
微信扫码,1秒登录

工作职责


工作职责:
1. 负责数据采集需求分析与方案制定,基于授权场景完成 APP 接口分析与数据采集开发;
2. 运用抓包、协议解析、动态调试等技术,完成合法授权场景下的接口协议分析与数据采集实现;
3. 设计并优化标准化账号管理体系,遵循平台用户协议,实现账号合规使用与状态管理;
4. 研究主流平台安全防护机制(验证码、设备安全校验、行为验证等),基于合规场景制定兼容适配方案,保障正常业务访问;
5. 与数据开发团队协作,持续优化公开数据采集的稳定性、效率与合规性;
6. 跟踪行业数据安全与反自动化技术规范,迭代优化合规的数据采集方案。
包括英文材料
Python+
Interactive Disassembler+
Frida+
还有更多 •••
相关职位

logo of kuaishou
社招3-5年J0012

1、遵循robots协议,采集互联网上允许搜索爬虫采集的公开非敏感信息,满足大模型、电商、本地等公司核心业务数据需求; 2、负责分布式采集系统的建设与迭代优化,负责数据调度、采集、数据结构化、持久化全链路核心流程迭代升级; 3、帮助团队攻克各种采集技术难关,提升系统的采集效果与效率。

更新于 2026-06-15北京
logo of kuaishou
社招3-5年J0012

1、遵循robots协议,采集互联网上允许搜索爬虫采集的公开非敏感信息,满足大模型、商业化等核心业务数据需求; 2、负责分布式采集系统的建设与迭代优化,负责数据调度、采集、数据结构化、持久化全链路核心流程迭代升级; 3、帮助团队攻克各种采集技术难关,提升系统的采集效果与效率。

更新于 2026-06-18北京
logo of dewu
社招3年以上技术类

1. 负责广告投放的抖音、快手、B站、视频号、微博等媒体的达人视频播放量、点评赞等数据的抓取,通过数据分析提升投放效果; 2. 构建高性能、高可用的广告投放平台,开发高并发、低延迟的广告投放系统; 3. 实现与优化针对不同流量场景的投放需求,持续提升投放效率和效果;

更新于 2025-10-22上海
logo of mi
社招A127870

我们在做什么: 为大模型训练和评估提供高质量的数据供给。我们需要从各类公开数据源中大规模采集文本、对话、代码等多种类型的数据,部分场景涉及复杂的接口协议和安全策略分析,对工程能力和问题拆解能力有较高要求。 你会参与: 1. 分析目标数据源的接口协议与安全策略 2. 主流 Web 安全防护机制的研究与适配 3. JS 代码分析与调试,提取关键业务逻辑 4. Web 协议分析与接口还原 5. 移动端数据通路建设(协议分析、安全机制适配) 6. 设计并开发高可用数据采集系统,完成大规模数据的清洗与结构化存储

更新于 2026-05-11北京