咪咕AI算法工程师(视频内容理解方向)
任职要求
1. 学历与专业:硕士研究生及以上学历,计算机科学、人工智能、计算机视觉、机器学习等相关专业。 2. 技术背景:扎实的计算机视觉与深度学习理论基础,熟练掌握Python和主流深度学习框架(如PyTorch/TensorFlow)。 3. 深刻理解目标检测、目标跟踪、动作识别、视频事件检测等核心视觉算法原理,具备相关模型(如YOLO系列、CNN-based、Transformer-based视频理解模型等)的研发与调优经验。 4. 熟悉视频处理流程与优化技…
工作职责
作为AI智慧观赛产品团队的核心算法成员,负责驱动体育赛事视频内容理解技术的研发与创新。目标是让系统精准、实时地识别赛事中的核心元素与关键事件,为AI智能解说、多维赛场智瞰等核心功能提供高质量底层数据支撑,最终打造业界领先的AI观赛体验。 1. 核心视觉模型研发:负责体育赛事视频理解核心模型的构建、训练与优化,重点研究实时目标检测与跟踪(球员、球、裁判、场地标识等)、行为动作识别(射门、传球、运球、击球等)、关键事件检测(进球、犯规、得分、暂停等)技术,确保赛事核心信息捕获的准确性与实时性。 2. 多场景适配与鲁棒性优化:针对足、篮、乒等不同赛事的运动特性、场地规则差异,以及光照变化、遮挡、快速运动模糊等复杂场景,优化模型的泛化能力与鲁棒性,保障跨赛事、跨场景的稳定识别效果。 3. 视频语义信息提取:设计并实现赛事结构化数据生成方案,从视频流中提取球员轨迹、攻防转换节奏、战术阵型变化等语义信息,将原始视频数据转化为可被大模型理解的结构化特征与事件标签。 4. 实时性与工程化落地:优化模型推理速度与资源占用,结合TensorRT等推理加速框架,实现视频理解算法的端到端高效部署,满足赛事直播

1、负责PDF/DOC文档OCR相关算法/多模态解析的研发和工程实现,并将算法应用到业务场景中; 2、跟进OCR/多模态前沿技术,包括但不限于图像文字检测、识别,多语种识别,视频文本识别,版面分析,文本属性,语义理解等相关工作,进行技术难点攻关与前瞻研究; 3、通过持续优化人工智能识别算法和机器学习模型,提升光学识别的准确度和效率,提升应用的客户感知; 4、熟悉opencv。熟悉目标检测、跟踪、识别、分割、特征点等常见的任务。熟悉常见图像操作。 5、有PDF/DOC文档识别或者多模态文档经验优先;比如有OCR或者多模态解析经验,解决过财报,报表数字识别,和表格数字识别问题经验优先。
团队介绍:TikTok内容生态算法团队立足于平台海量用户和短视频内容,利用多模态、LLM/MLLM、NLP&CV等技术,负责对各类内容做分析、加工、生成等内容层操作,内容形态包括但不限于短视频、图文、全网热点页面、客服对话等,产出内容理解特征、大模型生成中间页、全网热点发现&理解能力以及智能客服系统。 同时在TikTok供给侧提供面向全平台的创作灵感个性化推荐能力。 在这里,有上百个语种,NLP/LLM等技术面临多语种挑战。 在这里,有海量短视频内容,MLLM及多模态技术有更多应用场景。 平台用户量大,各项业务如本地生活、搜索等都处于高速发展期,有大量实际落地和应用场景。 1、参与TikTok业务中的NLP/CV基础算法相关研发工作,深度理解业务,解决和跟进一线业务问题; 2、与产品运营团队紧密协作,在热点挖掘、本地生活等业务方向持续迭代优化算法效果,达成业务目标; 3、结合业务场景挑战,跟踪前沿领域研究成果,推动技术创新在业务场景的深度应用,包括但不限于热点发现/信息抽取与结构化/多模态/大模型/文本生成/检索与相关性等算法领域。
团队介绍:TikTok内容生态算法团队立足于平台海量用户和短视频内容,利用多模态、LLM/MLLM、NLP&CV等技术,负责对各类内容做分析、加工、生成等内容层操作,内容形态包括但不限于短视频、图文、全网热点页面、客服对话等,产出内容理解特征、大模型生成中间页、全网热点发现&理解能力以及智能客服系统。 同时在TikTok供给侧提供面向全平台的创作灵感个性化推荐能力。 在这里,有上百个语种,NLP/LLM等技术面临多语种挑战。 在这里,有海量短视频内容,MLLM及多模态技术有更多应用场景。 平台用户量大,各项业务如本地生活、搜索等都处于高速发展期,有大量实际落地和应用场景。 1、负责TikTok的内容生态业务推荐算法工作,和产品、运营等团队紧密合作,深度理解TikTok推荐业务发展,共同制定长短期的业务目标; 2、深入参与到机器学习技术研究中,在解决具体问题的同时形成完整系统的方法论,持续提升用户体验; 3、研究方向包含且不局限于:深度学习、图神经网络、多任务学习、Learning to rank、模型压缩和加速、多模态技术等,善于结合业务的实际问题来做好技术的探索和研究; 4、组织推进组内以及跨部门合作项目,帮助团队的进步和新人成长。