快手数据研发工程师/专家(商业化)-【数据平台】
任职要求
1、有Hive,Kafka,Spark,Storm,Hbase,Flink等两种以上两年以上使用经验; 2、熟悉数据仓库建设方法和ETL相关技术,对于数据的设计有自己的思考,具备优秀的数学思维和建模思维; 3、熟练使用SQL,对类SQL有过优化经…
工作职责
1、负责数据中台-商业化各个业务线数据仓库建设,构建商业化垂直数据集市; 2、定义并开发业务核心指标数据,负责垂直业务数据建模,如用户画像; 3、根据具体问题,设计并实现合适的可视化展示,构建数据持续观测平台; 4、参与数据平台的搭建,优化数据处理流程具体工作; 5、数据收集,反作弊数据仓库,用户数据仓库,UGC数据仓库,审核数据仓库的研发; 6、A/B测试实时ETL研发,转化漏斗分析平台研发。
1、打造业界领先的广告算法模型数据平台,包括样本拼接、特征构建、实验框架等,为快手的广告算法模型提供高效稳定的学习能力; 2、负责广告系统核心数据流架构的设计与开发,支撑广告百万级QPS,为机器学习系统、客户报表及内部分析系统提供高可靠的实时数据; 3、负责研发广告转化归因(Attribution)系统,通过归因策略提升快手广告算法的效率; 4、通过数据和算法技术,为快手的广告客户打造智能投放工具,包括投放模拟、账户诊断、出价建议等,提升广告主的投放效率。
团队介绍:BABI平台是通过内部商业化/市场化的方式,以商品化为主要核心手段,围绕IT基础设施和人力成本提供一站式的平台支持,服务公司看清楚各业务部门从预算到成本到收入的经营过程,结合数据化、智能化的方式帮助业务线做好成本经营。 1、参与字节跳动技术团队及火山引擎业务等经营分析系统的大数据研发工作,包括但不限于BI可视化、OLAP分析、数据流调度、数据智能化服务等核心模块; 2、参与FinOps数据治理工作,持续提升数据易用性及数据质量,为经营分析提效赋能; 3、深入了解业务和系统痛点,给出优质的解决方案,并持续提升系统稳定性、可靠性、可扩展性,解决技术难题。
1、负责快手商业化品牌营销相关平台大数据研发工作,建设面向广告主和达人的品牌资产平台,沉淀用户核心数据资产; 2、参与行业领先的商业化数据仓库的架构、规划与落地; 3、保障离线、实时数据及时、稳定产出,保障数据质量; 4、支持数据开发相关提效工具建设,持续提升数据开发效率。
1、高并发实验平台建设; 设计亿级QPS用户分流系统,开发低侵入式Agent/SDK,支撑短视频、直播、商业化等核心业务AB实验;攻克复杂场景性能瓶颈(如亿级QPS实验入组数据实时上报),支撑万级并行实验在业务系统的稳定运行; 2、基于大数据引擎的架构优化;主导实验数据生产链路架构升级,实现秒级数据计算,替代传统Spark天级时延;设计高性能高可靠实验数据分析方案,解决百亿量级指标毫秒级查询和数据异动归因; 3、智能化实验引擎开发;集成AI能力实现智能异动归因(自动定位指标波动根因)、实验效果预测(迁移学习模型预判策略收益);构建自动化实验报告系统,输出统计显著性分析及业务决策建议。