钉钉钉钉-语音算法-工程师/专家
任职要求
1. 背景要求: 计算机、电子工程、信号处理、人工智能等相关专业研究生及以上学历,具有 2年以上 语音算法相关从业经验; 2. 技术深度: ● 深厚的深度学习/机器学习功底,熟练掌握 PyTorch; ● 在语音识别、合成、声纹或情绪识别等至少一个领域有深入的研究或成功的工业界落地经验; ● 熟悉常用的语音信号处理算法(如降噪、回声消除、增益控制等)或特征提取技术; 3. 编程能力: 具备扎实的编程基础,熟练掌握 Python / C++,具备良好的…
工作职责
语音是人机交互中最自然、最便捷的模态。随着大模型时代的到来,语音AI的研究正从单一任务向多模态、高自然度交互演进。在阿里巴巴,我们的语音技术已深度植入流媒体、直播互动、智能客服、办公会议、AIoT及数字人等多元场景。我们正在寻找志同道合的伙伴,共同探索语音技术在复杂场景下的极限。在这里,你不仅能触达海量的真实数据,更能亲手打造影响亿万用户的交互体验。一段更具挑战、更有成就感的旅程正待开启!
岗位职责:
1. 核心算法研发: 负责语音信号处理领域的前沿算法研究与落地,包括但不限于语音识别(ASR)、语音合成(TTS)、说话人识别与分离(Speaker Verification/Diarization)、语音增强及端到端语音交互方案;
2. 专项技术突破:
● 声纹与属性识别: 负责声纹识别、语种识别以及情绪识别(Emotion Recognition)的算法优化,提升在真实业务场景下的识别精度与跨域泛化能力;
● 音频内容理解: 基于语义与声学特征,深度挖掘语音中的情感、意图及环境信息,赋能直播审核、内容分析等业务;
● AI-VAD: 研发基于深度学习的高鲁棒性语音活动检测(VAD)算法,解决强噪声、多语者叠加、远场等复杂环境下的起停点检测痛点;
3. 模型工程化落地: 推动算法在云端或端侧的部署优化,在保障性能(精度/鲁棒性)的同时,平衡算力消耗与推理延迟;
4. 技术预研: 跟踪并探索语音领域前沿技术(如大语言模型与语音的结合、Speech-to-Speech原生端到端交互等)。1.负责智能语音交互链路慢思考、大模型推理相关算法的研究和落地; 2.调研和实现大模型前沿算法,基于强化学习,思维链等方式,实践大模型逻辑推理能力在语音交互中落地; 3.承担智能语音链路慢思考相关的交互效果迭代; 4.负责智能语音算法组件的实现、封装、工程对接。与工程协作,完成算法模块的设计、开发、测试和优化工作;

团队介绍: 高德语音技术部,是负责高德全栈语音技术的综合性团队。团队核心技术能力包括:自研TTS基座大模型、端侧模型、多语种、RTC流式语音、语音内容生成、语音识别、多模态模型、模型服务与推理。业务支撑面向高德全部核心场景,包括语音导航、AI领航员、IP语音定制、国际化、AI语音助手、智能外呼、内容生成等。 团队定位是通过前沿语音技术的研究和落地,赋能下一代AI产品创新。 具体职责: 围绕voice agent/speech language model的研究工作,包括但不限于如下事项: 1. 为满足AGI时代"活人感"语音交互的需求,致力于完成包括但不限于以下目标:复杂声学+时空信息的声学理解、通过图灵测试水平的交互节奏 / 交流内容 / 语音输出,并完成所需的技术创新; 2. 多模态对话大模型的研发、语音对话pipeline方案以及端到端方案的交互能力搭建、全双工交互能力搭建,落地到高德多项agent应用场景; 3. 跟进最领先的语音理解/语音生成/语音交互技术,包括但不限于提出新的技术框架、改进现有的算法、持续提升相关技术及业务指标,鼓励撰写论文及申请专利; 4. 探索前沿方向,如更加高效且合理的模型架构、跨模态(文字/语音/视觉)混合训练的最佳实践、基于speech language model的后训练技术、COT Reasoning in streaming full-duplex、proactive interaction,等等。结合全链路各个agent,持续提升voice agent的交互体验; 5. 海量的语音数据的处理构建:定性分析、定量评估、参与设计自动评估框架,研发 scalable 的改进方案,持续提升数据质量。
1.负责大模型语音模态的设计、开发和优化,包括但不限于语音/音频数据清洗、模型设计、训练策略等方面的研究与应用; 2.参与语音识别、语音合成、声音克隆等相关大模型语音模态能力的建设,提高跨模态整体效果。
岗位职责: 该职位通过大模型训练、Agent、RAG、N2SQL、NLP、语音处理等技术创新和突破,构建Agent通用平台、大模型训练平台等工具产品,同时支持对话机器人等垂直应用及智能产品的建设。欢迎敢于接受挑战的候选人加入我们,一起赋能企业客户。我们的研究方向包括但不限于: 1、通用大模型、推理大模型预训练、微调、强化对齐等技术的持续研究创新; 2、多语言大模型、领域大模型的训练技术研究与落地; 3、AI数据清洗、加工、合成、自动标注技术研究与落地; 4、文本机器人、语音机器人、质检机器人等客服域技术的研发与落地; 5、多Agent、RAG、N2SQL、自主决策等技术的研究与落地; 6、入呼大模型机器人、外呼大模型机器人研发经验;熟悉VAD, ASR, TTS等语音相关技术; 以上方向擅长其中1个即可