字节跳动实时数据开发专家-Data
任职要求
1、具有3年以上实时开发经验,并且具有复杂场景的实时方案设计和开发经验; 2、精通并行计算或者分布式计算原理,熟悉高并发、高稳定性、可线性扩展、海量数据的系统特点和技术方案; 3、深入了解Flink或Spark Streaming,向社区贡献过Patc…
工作职责
1、负责字节跳动多个业务的实时数据建设工作,对长中短期工作目标、工作方法和结果负责; 2、深入理解业务场景,标准化实时解决方案,降低实时开发、运维成本; 3、负责对实时计算作业性能、资源的优化,保障实时任务的稳定性; 4、负责实时新技术调研工作。
1、负责蚂蚁全站数据研发平台Dataphin实时相关体系建设,包括通用+智能(流批一体,Codeless)研发平台,质量保障平台,支撑智能化商业决策和运营,让数据快速释放价值; 2、负责蚂蚁全站数据研发平台Dataphin基础设施相关体系建设,保障全站用户稳定,高效,安全进行数据生产建设; 3、负责蚂蚁集团受控加工平台的应用架构设计和系统实施,通过体系化并具有前瞻性的能力建设,确保研发时即受控保障、事前可灰度观测、事中可观测预警、事后可应急快恢,使得数据三板斧和数据SLA在蚂蚁数据域全面落地。
1、负责核心业务域数据体系的规划和建设,通过数据产品和数据服务等方式,高效支撑业务场景的数据需求 2、深度理解业务,通过对业务策略和痛点的分析,制定系统性端到端的数据解决方案并落地 3、负责数据资产建设、数据质量与稳定性管理,构建共享融通的数据平台,让数据标准更规范、数据获取更高效 4、探索Data for AI以及AI数据产品,利用大模型提升全链路数据应用效率
解决方案开发及沉淀推广 ● 基于阿里云的数据与分析相关的产品服务,开发可复用的技术解决方案; ● 参与重点项目,包括迁移上云、或者在阿里云上新构建数据分析应用的项目,在项目中根据客户需求制定针对性的解决方案,开展技术工作坊(workshops),指导客户进行产品选型,进行关键方案的验证(PoC); ● 从项目实践中提炼最佳实践、参考架构,沉淀并在内部面向一线 SA 团队分享; 内部赋能与外部支持 ● 开展面向多人的培训与分享会,赋能内、外部团队; ● 开展面向一线架构师团队的解决方案培训,开发培训课程,担任讲师,提升架构师在数据分析与数据处理领域的架构设计和解决方案编制能力; ● 在重点项目中,面向客户开展技术工作坊(workshops),加深客户对阿里云数据分析领域产品和技术解决方案的了解和采用; 市场洞察和竞争分析 ● 洞察数据分析与数据处理领域的市场机会,将客户的实际需求和反馈传递给产研团队,为产品技术路线图规划提供真实输入; ● 分析市场上领先的产品与方案,结合实际项目,分析阿里云所面临的挑战,提出新的功能建议,以简化客户采用阿里云产品过程并提升阿里云产品的市场竞争力;