快手数据开发工程师-【风控】
社招全职2年以上D7229地点:北京状态:招聘
任职要求
1、熟悉分布式计算框架,掌握分布式计算的设计与优化能力,了解流式计算; 2、有Hive、Kafka、Spark、Flink、HBase等两种以上两年以上使用经验; 3、熟悉数据仓库理论方…
登录查看完整任职要求
微信扫码,1秒登录
工作职责
1、负责快手风控数据仓库的建设,整合构建各业务场景的基础数据; 2、根据业务需求,提供大数据计算应用服务,并持续优化改进; 3、针对复杂场景的数据进行合理的设计和加工,为业务上数据分析和应用加速、提效。
包括英文材料
Hive+
[英文] Hive Tutorial
https://www.tutorialspoint.com/hive/index.htm
Hive is a data warehouse infrastructure tool to process structured data in Hadoop. It resides on top of Hadoop to summarize Big Data, and makes querying and analyzing easy.
https://www.youtube.com/watch?v=D4HqQ8-Ja9Y
Kafka+
https://developer.confluent.io/what-is-apache-kafka/
https://www.youtube.com/watch?v=CU44hKLMg7k
https://www.youtube.com/watch?v=j4bqyAMMb7o&list=PLa7VYi0yPIH0KbnJQcMv5N9iW8HkZHztH
In this Apache Kafka fundamentals course, we introduce you to the basic Apache Kafka elements and APIs, as well as the broader Kafka ecosystem.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
还有更多 •••
相关职位
社招3-5年D11903
1、负责商业化风控数据仓库的建设,构建各垂直应用的数据集市; 2、定义并开发业务核心指标数据,负责垂直业务数据建模; 3、根据业务需求,提供大数据计算应用服务,并持续优化改进; 4、参与风控数仓应用数据开发工作,支持业务需求。
更新于 2025-10-21北京
校招研发
-负责爱奇艺业务风控平台以及规则引擎的架构和开发,保障爱奇艺会员,游戏,电商等关键业务的账号,接口,支付,交易安全,对抗各种欺诈,作弊,垃圾,盗号等非法行为; -负责业务部门协同配合,参与风控相关的需求定义,确定设计方案并最终开发上线; -和数据分析师一起通过数据挖掘,机器学习等手段不断优化系统监控和风控策略。
更新于 2026-01-12上海
社招数据开发岗
1.负责按照业务需求建立并完善风控所需要的风控集市 ,参与模型结构设计、模型mapping开发、特征开发等工作; 2.负责自有数据、三方数据进行分层管理和加工,通过合理的数据抽象和建模,沉淀可复用的数据资产; 3.参与数据治理、数据质量、数据服务及数据产品等基础数据平台和设施建设。
更新于 2025-06-16北京