logo of moonton

沐瞳【中台】资深大数据开发工程师

社招全职3年以上技术岗位地点:上海状态:招聘

任职要求


- 本科及以上学历,计算机、数学、物理等相关专业。
- 3年以上大数据平台开发经验,包括但不限于掌握HadoopSparkHiveFlinkClickhouse大数据技术和框架。
- 熟练使用Java 编程语言,有良好的编程能力和代码质量意识。
- 了解数据仓库、数据湖、ETL流程、数据可视化和分析工具等大数据平台开发相关技术。
- 具备良好的沟通能力和团队合作精神,能够与不同背景的人合作,并能够向业务人员和技术人员解释复杂的技术问题。
- 具备良好的问题解决能力和自我驱动力,能够独立思考和解决问题。
- 有服务器开发经验,全栈开发能力更佳。

工作职责


- 设计和开发大数据平台,包括数据仓库、数据湖、ETL流程、数据可视化和分析工具等。
- 针对不同的业务需求,制定数据处理和存储策略,确保数据的高效和可靠。
- 编写高质量的代码,实现数据的清洗、转换、加载和处理,保证数据的准确性和完整性。
- 与数据分析、业务人员和其他技术团队紧密合作,为他们提供数据支持和指导。
- 不断优化数据平台的性能和可靠性,处理大规模数据时能够有效地调优和优化。
- 掌握最新的大数据技术和发展趋势,不断学习和提高自己的技术水平。
包括英文材料
学历+
大数据+
Hadoop+
Spark+
Hive+
ClickHouse+
Java+
数据仓库+
ETL+
相关职位

logo of moonton
社招5年以上技术岗位

1. 负责游戏项目的离线与实时数据仓库的构建; 2. 负责数据模型的设计,ETL实施,ETL性能优化,ETL数据监控以及相关技术问题的解决; 3. 负责指标体系建设与维护; 4. 深入业务,理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作; 5. 参与大数据应用规划,为数据产品、挖掘团队提供应用指导; 6. 参与数据治理工作,提升数据易用性及数据质量。

更新于 2023-09-06
logo of aliyun
社招诚云科技

1、数据资产管理平台开发与治理 构建企业级数据资产管理平台,构建数据清晰的血缘,支持高效溯源。 建立元数据管理、数据血缘追踪、质量监控与安全合规体系。 2、知识图谱构建与优化 从结构化/非结构化数据中提取实体与关系,构建行业知识图谱(如客户关系图谱)。 通过规则引擎、NLP模型持续优化图谱质量。 3、AI助理系统开发 集成大语言模型(LLM)与垂直知识库,开发智能问答、自然语言查询及自动化报表功能。 设计API/Web接口,支持业务用户通过自然语言调用数据服务(如“查询某产品的销售趋势”)。 搭建模型训练与部署框架,实现AI能力快速迭代。 4、数据安全合规与质量管理 建立数据质量指标(完整性、一致性、准确性),开发自动化检测与修复工具。 实现异常数据实时告警(如延迟、权限越权),并通过邮件/SMS/企业微信通知责任人。 5、平台性能与稳定性保障 优化Spark/Flink任务性能,提升高并发场景下的平台稳定性。 监控系统运行状态,设计容灾机制与自动化运维工具,降低故障率。

更新于 2025-05-28
logo of bytedance
社招A76806

飞书企业应用专注于泛财务领域。我们致力于建设基于大数据,搭建智能化、业财一体的财务中台,为互联网生态业务提供合规可控、效能卓越、业务洞察强的平台化能力,让经营者看清现状、预见未来。以技术中台的形式支撑财务税务,提供一站式产品能力,包括应收应付、发票、计税、付款,以及海量数据的清算、核算、报表、风控、分析。 欢迎对技术有孜孜追求的你,加入我们,一起探索和研究互联网时代的企业应用产品! 1、深度参与业财一体化基础平台业务发展,提供的高效的质量交付; 2、深度参与产品研发项目,协同产品和研发团队高质量交付产品; 3、负责日常项目线下测试与线上质量分析,跟进质量问题、事故、专项优化等; 4、对整体质量进行分析,抽象专项优化点,推动相关方开展建设; 5、负责集成平台的专项建设,使用技术手段解决业务痛点、 难点问题,包括自动化、白盒测试、覆盖率等。

更新于 2024-02-27
logo of didi
社招5年以上技术

1.负责风控三方数据中心OR决策中台系统建设工作,包括需求把控、系统设计、功能开发等; 2.参与金融风控体系的构建工作,包括不限于三方数据中心、决策引擎、模型平台等方面的研发和维护工作; 3.良好的沟通能力,有产品sense,能够胜任产品需求拆解、细化并落地实施; 4.以快速解决业务需求为第一要义,用技术提高生产力,持续优化系统架构;

更新于 2025-07-20