logo of aligenie

智能互联千问事业部-高级系统开发工程师-AI爬虫方向

社招全职2年以上技术类-开发地点:杭州状态:招聘

任职要求


1、计算机或相关专业本科及以上学历,2 年以上后端或全栈开发经验,熟练掌握 C++/Java/Go 等至少一种开发语言,具备扎实的数据结构算法基础,深入理解操作系统和计算机网络;
3、具备 Linux 环境下大规模分布式系统的开发与性能调优经验,熟悉 Hadoop、S…
登录查看完整任职要求
微信扫码,1秒登录

工作职责


1、负责 AI 爬虫系统的后端、平台及策略开发,构建自动化的内容发现与下载能力,高效获取网页、图片、音视频、文档等优质资源;
2、面向千亿级数据规模,设计高可用的链接调度系统,在保障 SLA 的前提下实现系统的可扩展性与弹性伸缩,提升资源利用率并降低运维成本;
3、通过 JS 渲染、网络优化、自适应调度等架构级手段,结合定向站点分析,持续提升爬虫抓取效果;
4、负责海量网页数据的处理,包括结构化解析、清洗、去重等核心流程;
5、深入理解大模型、通用搜索及垂直搜索等业务场景,针对不同数据需求提供定制化解决方案,以数据驱动业务发展。
包括英文材料
学历+
C+++
Java+
Go+
数据结构+
算法+
Linux+
还有更多 •••
相关职位

logo of quark
社招2年以上技术类-开发

1. 负责千问&夸克服务端技术体系的系统分析、设计,并主导完成详细设计和编码的任务,确保项目的进度和质量;主导技术难题攻关,持续提升核心系统的高处理性能; 2. 能够在团队中完成Code Review的任务,确保相关代码的有效性和正确性,并能够通过Code Review提供相关性能和稳定性的建议; 3. 理解业务,识别需求,参与架构、系统、分析设计等多领域项目的相关技术的实践、应用和研发。

更新于 2026-04-03北京|杭州|广州
logo of quark
社招2年以上技术类-开发

1、负责云端多机房CPU,GPU计算资源以及存储资源调度运维管理; 2、负责云端AI训练平台以及训练框架的开发以及运维工作; 3、跟进支撑智能业务,整合团队资源,协调外部团队,推动业务上线; 4、探索资源调度前沿技术,包括:前沿调度算法,弹性混部基建,GPU虚拟化等。

更新于 2026-01-21杭州
logo of aligenie
社招2年以上技术类-开发

1、负责云原生容器平台和智能体平台的设计和开发,持续迭代平台能力; 2、参与基础应用开发框架和组件开发,深入参与业务落地,以确保技术的高效集成与实际落地。; 3、保基础平台系统架构的稳定、高效运行,帮助业务优化性能和改善系统稳定性。

更新于 2026-04-06广州
logo of aligenie
社招2年以上技术类-前端

1、负责配合大数据、云原生调度、训推引擎、搜推引擎等团队一起打造卓越的AI基础设施中台,助力AI业务高速迭代; 2、负责前端智能研发方向的关键技术的调研及应用,不断提升团队整体的开发效率。

更新于 2026-04-06广州