字节跳动大数据测试开发工程师-数据平台
社招全职A156683地点:北京状态:招聘
任职要求
1、计算机相关专业本科及以上学历; 2、具备大数据架构系统全景知识,熟悉HDFS、Yarn、Spark等基础组件原理,了解数据生产加工链路过程; 3、具备扎实的平台运维体系知识,熟悉大数据组件常见故障和运维流程,对大数据稳定性保障有见解和实践经验; 4、具备良好的项目推动能力、沟通能力和团队合作精神,能够独立解决问题并承担压力; 5、有大数据平台SRE经验优先,有运维平台工具建设经验优先; 6、有国际化经验或者英语能力为加分项。
工作职责
1、负责字节跳动大数据平台高可用性保障,协同大数据各组件团队制定稳定性标准、明确职责边界、推进稳定性项目落地; 2、负责运维流程标准建设和相应工具能力建设,包括稳定性目标管理、监控诊断运维能力、容灾应急方案等; 3、负责推进大数据组件风险治理和事故管理,降低平台事故、提升运维效率、降低运维成本。
包括英文材料
学历+
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
HDFS+
https://hadoop.apache.org/docs/r1.2.1/hdfs_design.html
The Hadoop Distributed File System (HDFS) is a distributed file system designed to run on commodity hardware.
https://www.ibm.com/cn-zh/think/topics/hdfs
Hadoop 分布式文件系统 (HDFS) 是一种管理大型数据集的文件系统,可在商用硬件上运行。
Yarn+
[英文] Introduction
https://yarnpkg.com/getting-started
Yarn is an established open-source package manager used to manage dependencies in JavaScript projects.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
相关职位
社招3年以上D2815
1、负责大数据产品相关(大数据开发、数据分析、流量管理与分析、AB实验平台等产品)的测试以及质量保证方面的工作; 2、根据数据产品的需求,分析并制定测试计划,设计测试数据和测试用例,执行测试用例,快速定位和解决问题; 3、对线上问题进行持续追踪,并从中得出一些优化监控、测试方案、框架提升等改进措施; 4、在项目中积极与产品经理、开发工程师和用户进行有效沟通,推进问题及时合理地解决。
更新于 2025-03-24
社招2年以上技术类-质量保证
我们正在寻找一位热衷于数据算法质量的专业人士,加入我们的团队,共同提升数据算法的整体质量。以下是您将承担的主要职责: 1)质量保障与测试设计:根据数据算法的整体架构和业务需求,设计全面的质量保障和测试策略,不断优化我们的数据算法质量体系。 2)文档编写与经验沉淀:负责编写测试分析文档,确保数据采集、ETL、指标加工、数据回流、算法模型、产品应用等各环节的质量。 3)技术创新与问题解决:参与解决测试过程中的复杂技术问题,推动质量工具、测试技术及研发测试过程的创新,提升测试工作效率。 4)日常监控与应急响应:参与数据算法线上任务的日常监控和运维保障工作,及时发现并处理生产风险,消除或降低对业务的影响。 5)风险治理与能力提升:分析识别业务风险,沉淀风险治理能力,推动风险治理措施落地,提升整体质量保障。 6)质量和风险意识培养:培养团队成员的质量风险意识,定期进行质量培训和指导,提升团队整体质量水平。
更新于 2025-09-13
社招2年以上A259603A
1、负责字节跳动国际化广告数据平台/数据产品相关的质量保障工作; 2、负责相关过程中测试效率类工具的开发; 3、跟进线上数据问题,进行追踪、分析以及推动改进; 4、以较强的产品意识,在项目过程中提出并实施好的产品解决方案。
更新于 2025-06-18