快手数据研发工程师-安全线
社招全职5-10年D2815地点:北京状态:招聘
任职要求
1、三年以上数据研发经验; 2、对大数据相关引擎(Hadoop/Yar/Druid/Clickhouse/Hbase等)有一定理解; 3、精通数据仓库建模和离线/实时ETL开发技术,优秀的SQL查询分析、数据架构和数据治理能力; 4、良好的沟通协调能力,能够快速推动工作执行落地; 5、有数仓bp工作经验者优先,风控业务佳。
工作职责
1、参与快手风控数仓体系建设,跟进数据分层规范与开发标准的落地; 2、参与业务过程建模,设计数据域划分及指标体系; 3、深入理解内容安全、业务安全、社区运营和生态治理等业务场景,并基于维度建模方法论构建可复用的业务中间层(DWD/DWS); 4、参与风控业务数仓的元数据建设,参与风控数仓评价体系和监控工具的落地。
包括英文材料
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Hadoop+
https://www.runoob.com/w3cnote/hadoop-tutorial.html
Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集分布式处理大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
[英文] Hadoop Tutorial
https://www.tutorialspoint.com/hadoop/index.htm
Hadoop is an open-source framework that allows to store and process big data in a distributed environment across clusters of computers using simple programming models.
ClickHouse+
[英文] Advanced Tutorial
https://clickhouse.com/docs/tutorial
Learn how to ingest and query data in ClickHouse using the New York City taxi example dataset.
https://www.youtube.com/watch?v=FtoWGT7kS-c
ClickHouse is an open-source column-oriented DBMS for online analytical processing that allows users to generate analytical reports using SQL queries in real-time.
https://www.youtube.com/watch?v=Rhe-kUyrFUE&list=PL0Z2YDlm0b3gcY5R_MUo4fT5bPqUQ66ep
HBase+
[英文] HBase Tutorial
https://www.tutorialspoint.com/hbase/index.htm
HBase is a data model that is similar to Google's big table designed to provide quick random access to huge amounts of structured data. This tutorial provides an introduction to HBase, the procedures to set up HBase on Hadoop File Systems, and ways to interact with HBase shell.
数据仓库+
https://www.youtube.com/watch?v=9GVqKuTVANE
From Zero to Data Warehouse Hero: A Full SQL Project Walkthrough and Real Industry Experience!
https://www.youtube.com/watch?v=k4tK2ttdSDg
ETL+
https://www.ibm.com/think/topics/etl
ETL—meaning extract, transform, load—is a data integration process that combines, cleans and organizes data from multiple sources into a single, consistent data set for storage in a data warehouse, data lake or other target system.
https://www.youtube.com/watch?v=OW5OgsLpDCQ
It explains what ETL is and what it can do for you to improve your data analysis and productivity.
SQL+
https://liaoxuefeng.com/books/sql/introduction/index.html
什么是SQL?简单地说,SQL就是访问和处理关系数据库的计算机标准语言。
https://sqlbolt.com/
Learn SQL with simple, interactive exercises.
https://www.youtube.com/watch?v=p3qvj9hO_Bo
In this video we will cover everything you need to know about SQL in only 60 minutes.
数据治理+
https://www.ibm.com/think/topics/data-governance
Data governance is the data management discipline that focuses on the quality, security and availability of an organization’s data.
https://www.youtube.com/watch?v=uPsUjKLHLAg
Building data fabric eliminates the technological complexities of data governance so users can connect to the right data at the right time, regardless of where it resides.
相关职位
社招3年以上技术
安全引擎部门介绍:安全引擎承担网约车、花小猪、顺风车、货运等业务线安全需求的工程研发,致力于构建“事前隔离-事中研判干预-事后妥处置”的全链路工程架构,覆盖全场景安全产品矩阵、降发生策略架构、风险研判工作台、音视频合规与隐私保护等重点工作。 工作职责: 1、投身构建世界一流的平台型安全术体系,提升滴滴用户在安全场景下的体验和满意度; 2、积极参与业务需求讨论,支撑滴滴负向业务的需求研发,确保端到端的交付效率与质量; 3、深入理解安全业务逻辑,抽象业务,沉淀中台,用技术手段提升滴滴的负向业务能力,赋能业务发展。
更新于 2025-06-13
社招5年以上A147072
1、面向国际电商资金业务和中台服务,进行技术风险相关领域分析和建模,设计搭建风险防控系统守护业务的生产安全,解决线上高可用、变更风险防控、资损防控等技术风险问题; 2、主导技术风险防控的数据分析与设计、工程与算法落地工作,承担系统功能代码开发和维护; 3、持续在变更风险防控、高可用、资金安全等方面沉淀技术和业务能力。
更新于 2024-09-25
社招3年以上技术类-数据
1)基于风控数据平台,建设风控相关的数据体系,持续集成相关工具产品,以及搭建风控基础计算层相关工作; 2)参与风控离线、近线、实时数据相关系统的设计、开发,包括数据加工,计算,ETL, 管理, 监控等; 3)深入理解风控业务,根据需求进行数据模型的设计,不断完善并产出业务效果,对依赖的引擎设计提出建设性建议。
更新于 2025-05-06