拼多多资深大数据开发平台方向服务端研发工程师/专家
任职要求
1.计算机基础知识扎实,包括操作系统、计算机网络、数据结构、基础算法、数据库等; 2.编程能力扎实,熟练使用Java、SQL语言编程,熟练掌握SpringBoot、Mybatis等框架,有一定的DEBUG及性能优化能力; 3.热衷于并擅长troubleshootin…
工作职责
1.负责大数据开发平台的设计与研发,包括开发IDE、任务调度、监控运维、元数据管理、adhoc查询等; 2.完善平台功能,优化用户使用体验; 3.负责线上问题的排查和解决,持续优化和提高系统能力。
工作职责: 1、参与小红书电商、本地生活用户端核心场景的研发,包括但不限于交易链路/正向履约、稳定性架构、用户增长、交易场域(内容电商/搜索电商/商城)、营销平台、招选投等; 2、构建高可用、易扩展的微服务体系,保障大促稳定,提升工程效率; 3、参与公司交易类新业务从0到1的快速增长过程。
1、负责BI平台服务端架构设计与核心代码编写,支撑海量数据实时分析、可视化交互及高性能查询 2、深入研究AI技术与BI场景的结合点,设计并实现AI智能助理、统一知识库、智能数据洞察、智能舆情等创新功能 3、主导技术难题攻关,解决分布式计算、低延迟响应等技术挑战 4、跟进行业技术趋势,推动大数据与AI技术在游戏业务场景的落地
1、负责企业数据计算平台的后端研发工作,支撑批处理、流处理、实时计算、交互式查询等多场景需求;设计并实现任务调度、资源管理、权限管控、计算作业编排等核心模块; 2、数据处理引擎集成并优化 Flink、Spark、Doris、StarRocks、Paimon 等计算与存储引擎;设计统一作业提交与执行框架,提升平台计算效率与稳定性。 3、提供对外 API/SDK,支持数据研发、指标体系、报表分析、机器学习等上层应用;打造自助式计算服务能力,降低业务方使用门槛; 4、负责大规模数据任务的性能优化与故障排查,确保 SLA;建设监控、告警、审计、任务追踪与成本管理体系; 5、平台架构演进,参与计算平台的架构规划工作,推动计算平台向云原生、湖仓一体化方向演进;调研新技术并推动落地,如 Kubernetes、存算分离、向量化计算、流批一体。
1. 算法工程化支持:负责支持跨境治理和商品治理方向的算法工程化落地,包括算法服务化、模型部署、性能优化、A/B测试与监控体系搭建。 2. 系统开发与维护:基于Java与Python开发高性能、可扩展的算法平台和治理系统,保障算法稳定运行和高可用性。 3. 算法研发协同:与算法研究人员、产品经理紧密协作,推动图像理解、NLP、多模态及大模型等算法从研发到线上应用的全流程闭环。 4. 数据与质量评估:建设和维护治理效果数据采集、评估和监控体系,持续迭代优化模型与策略,驱动业务降本增效。 5. 技术方案创新:关注业界最新算法工程化与MLOps实践,推动内部平台能力升级,提升算法迭代效率。