阿里巴巴数据技术及产品部-3D生成重建算法工程师-杭州
任职要求
1、 计算机科学、人工智能、机器人学、计算机图形学或相关领域硕士及以上学历。 2、 扎实的3D几何与计算机视觉基础。有三维重建或 3D 生成相关方向项目经验。 3、 熟悉Transformer、扩散…
工作职责
1、 研发面向仿真的3D生成与重建算法,覆盖单体资产(关节体、可形变物体等)到场景级环境,产出几何合法、物理参数完备、可直接导入物理引擎的高质量3D模型与可交互仿真场景;打通从真实采集数据到可编辑仿真场景的链路; 2、 研发面向仿真训练的高通量渲染管线,包括但不限于3DGS批量渲染优化、物理引擎与渲染的耦合更新机制、以及多环境并行渲染架构,支撑大规模视觉强化学习的实时视觉观测需求; 3、 探索Agentic场景生成等前沿方向,利用驱动场景的自动化构建与迭代; 4、 优化研究Sim2Real闭环相关技术:域随机化、Real-to-Sim重建、合成演示数据生成等,提升具身策略在真实环境中的泛化能力。

负责阿里巴巴多模态数据湖 ALake 体系中 Fluss 流式存储引擎的研发,构建面向实时数仓与流批一体场景的下一代存储底座。 1. Fluss 引擎研发:参与 Fluss 流式存储核心模块的设计与开发,包括行存/列存引擎、数据 Compaction、Checkpoint、故障恢复等 2. 湖仓联动:设计和实现 Fluss 与 Paimon 的数据联动机制,支撑 CDC 数据实时入湖、流批一体消费等场景 3. 引擎集成:推进 Fluss 与 Flink、Spark、StarRocks 等计算引擎的 Connector 开发与性能优化 4. 性能调优:端到端优化数据写入延迟、吞吐、小文件治理,解决线上大规模场景下的稳定性问题 5. 技术方案设计:参与 Fluss 架构演进,输出技术设计文档,推动开源社区建设

1. 建设多源异构数据统一管线:覆盖真机采集数据(跨本体、多传感器)与仿真数据的接入、清洗、转换、质检、存储和分发,实现不同来源数据的标准化汇聚 2. 负责多模态机器人数据的Schema设计与标准化:覆盖图像、深度图、点云、IMU、关节角、轨迹、动作、语义标注、传感器参数等,兼容统一/自有格式规范,支持对接开源数据集 3. 设计并搭建分布式仿真调度系统:支持大规模环境实例跨多GPU/多节点的调度、监控与弹性扩缩 4. 构建数据质量过滤与异常检测模块和建设数据版本管理与血缘追踪体系 5. 搭建数据导出与训练对接服务:按训练需求灵活导出真机+仿真混合数据子集,支持增量更新与数据混合策略(如Sim2Real增广比例调配) 6. 与仿真引擎、算法训练、机器人本体和平台工程团队协作,打通数据从采集/生成到训练、评测、分析和可视化平台的完整链路

1.构建C端AI助手(如千问、悟空、QoderWork)的产品评测体系:围绕对话式AI助手的核心体验,从真实用户场景出发,设计评测维度、构建高质量评测集与评分标准,确保评测结果能真实反映产品的市场竞争力与用户体感。 2.驱动评测体系的产品化与平台化:负责将评测所需要的场景用例、评测流程与结果洞察封装,线上维护评测结果、对比与可视化看板,降低产品与算法团队的评测门槛,支撑快速迭代。 3.Agent与工具调用评测环境搭建:针对AI助手中的搜索联网、插件调用与Agent规划能力,搭建端到端的仿真运行环境与MCP工具层,实现外部工具接口的标准化注册、调用链路追踪与结果校验,确保多步骤任务评测的可复现性。 4.评测Benchmark建设:接入并适配主流开源评测集,同时持续挖掘用户真实Bad Case,沉淀并构建符合国内C端用户习惯的专属业务评测数据集,完成数据解析与评分逻辑对齐。 5.跨团队协同与体验闭环:作为评测体验专家,与产品经理、算法研究团队紧密协作,将产品侧的体验诉求转化为可量化的工程评测方案,并通过评测数据反哺产品迭代方向,以打造最受欢迎的AI应用为目标。
1、和集团内基础大模型团队紧密合作,研发多模态数据理解与处理算子,覆盖图像、视频、音频等多模态数据的识别、理解、质量评估等核心能力,以高质量合成数据驱动集团大模型实现行业领先 2、负责多模态领域专家模型的研发,负责从任务定义、数据构建、模型训练、推理优化、评测迭代到业务落地的全流程闭环,持续提升模型的泛化能力与稳定性。 3、负责全模态理解大模型的研发,持续优化模型从底层感知(时空定位、细粒度识别)到高阶认知(结构化输出、逻辑推理)的核心能力,打造业界sota。 4、探索创新的多模态/全模态大模型训练范式,撰写发表创新论文或技术报告,参与模型开源与社区建设。