logo of bytedance

字节跳动资深数据开发工程师

社招全职2年以上A248307地点:北京状态:招聘

任职要求


1、本科及以上学历,2年以上爬虫抓取采集相关工作经验;
2、熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等;
3、熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力。

工作职责


1、遵循Robots协议,参与爬虫系统的建设与优化,满足各类业务数据需求;
2、负责分布式爬虫系统的建设,优化数据调度、抓取、解析、存储全栈流程;
3、帮助团队攻克各种爬虫技术难关,提升海量数据系统的抓取效果与性能。
包括英文材料
学历+
Selenium+
Puppeteer+
Python+
Java+
Go+
C+++
相关职位

logo of netease
社招5-10年网易职能

1、负责网易集团财经数据中台的数仓规划与设计 2、完成相关原始数据采集、清洗、整理、去重和治理,保证数据及时性、完整性、一致性和准确性。 3、参与业务需求调研,根据业务需求设计数据仓库维度模型,并完成数据模型开发,沉淀数据指标。 4、持续改进优化ETL、分析处理等问题,对结构化的数据做数据分析; 5、对项目开发进度、代码质量进行管控、完成技术文档的沉淀。

更新于 2025-10-10
logo of didi
社招3年以上技术

1.参与ERP数仓的开发、维护、优化及相关技术支持工作,以及财务&法务&采购等数据体系建设; 2.负责数据仓库ETL流程的优化及解决相关技术问题; 3.参与数据产品设计和评审,保障数据平台架构稳定; 4.为日常项目中需求提供数据支持,并且在一定程度上给予评估和建议。

更新于 2025-06-17
logo of ctrip
社招5年以上火车票业务项目/

1、参与数据仓库的设计与搭建,重点支持算法团队对特征数据的使用; 2、参与公司数据应用(产品)的开发,推动业务部门的数据化运营; 3、探索包括大模型在内的新技术在数据应用和数仓领域的应用;

更新于 2024-08-23
logo of bytedance
社招5年以上A145050

1、负责地理位置中台POI、定位、画像等方向的数据分析工作,深度理解业务目标及现状,基于业务阶段负责指标体系建设,帮助洞察分析牵引业务目标,并对指标进行异常监控和分析并能够指导地理位置中台数仓的建设; 2、支持业务各类统计分析需求和AB实验设计与分析,给出客观准确的结论,完善实验规范,为策略迭代提供方向指导; 3、负责诊断性和探索性专项分析,产出有价值的分析结果,完善整体数据建设,协助支持数据工具的建设,从而将数据能力推广应用; 4、协同算法、产品、研发等团队推进数据策略方案,带来实际的业务价值增量。

更新于 2025-06-23