logo of quark

夸克千问C端事业群-高级系统开发工程师-AI爬虫方向

社招全职2年以上技术类-开发地点:杭州状态:招聘

任职要求


1、计算机或相关专业本科及以上学历,2 年以上后端或全栈开发经验,熟练掌握 C++/Java/Go 等至少一种开发语言,具备扎实的数据结构算法基础,深入理解操作系统和计算机网络;
3、具备 Linux 环境下大规模分布式系统的开发与性能调优经验,熟悉 Hadoop、S…
登录查看完整任职要求
微信扫码,1秒登录

工作职责


1、负责 AI 爬虫系统的后端、平台及策略开发,构建自动化的内容发现与下载能力,高效获取网页、图片、音视频、文档等优质资源;
2、面向千亿级数据规模,设计高可用的链接调度系统,在保障 SLA 的前提下实现系统的可扩展性与弹性伸缩,提升资源利用率并降低运维成本;
3、通过 JS 渲染、网络优化、自适应调度等架构级手段,结合定向站点分析,持续提升爬虫抓取效果;
4、负责海量网页数据的处理,包括结构化解析、清洗、去重等核心流程;
5、深入理解大模型、通用搜索及垂直搜索等业务场景,针对不同数据需求提供定制化解决方案,以数据驱动业务发展。
包括英文材料
学历+
C+++
Java+
Go+
数据结构+
算法+
Linux+
还有更多 •••
相关职位

logo of quark
社招3年以上技术类-开发

1. 负责智能家居网关、中控屏、AI传感器等设备的嵌入式系统开发 2. 设计、开发和优化嵌入式Linux和RTOS的应用程序 3. 提升产品的性能、稳定性和用户体验,确保产品质量的持续改进 4. 编写嵌入式开发规范,设计模块化、可复用的设备端软件架构

更新于 2026-01-14杭州
logo of quark
社招5年以上技术类-开发

1. 负责开放平台后端核心模块的设计与开发,参与AI模型服务化封装、开放平台接口开发、异步任务调度系统构建; 2. 实现AI服务的高可用、高性能部署方案,支持大规模并发请求; 3. 构建面向个人开发者和企业合作伙伴的软硬件的解决方案; 4. 与算法团队协作,推动算法模型高效集成至平台,推进AI开放平台工程化建设,提升系统的稳定性、可扩展性和可观测性; 5. 把握行业的前瞻技术发展趋势,基于业务场景,结合新技术、新形态,推动技术创新性产品落地。

更新于 2026-04-08深圳|杭州|上海
logo of aligenie
社招5年以上技术类-开发

1. 负责开放平台后端核心模块的设计与开发,参与AI模型服务化封装、开放平台接口开发、异步任务调度系统构建; 2. 实现AI服务的高可用、高性能部署方案,支持大规模并发请求; 3. 构建面向个人开发者和企业合作伙伴的软硬件的解决方案; 4. 与算法团队协作,推动算法模型高效集成至平台,推进AI开放平台工程化建设,提升系统的稳定性、可扩展性和可观测性; 5. 把握行业的前瞻技术发展趋势,基于业务场景,结合新技术、新形态,推动技术创新性产品落地。

更新于 2026-04-08深圳|杭州|上海
logo of quark
社招3年以上技术类-开发

1、负责智能体开发范式的设计、开发及应用,支持智能体在千问App的快速落地; 2、负责智能体的整体技术解决方案,并支持技术研发和效果优化等工作,推动产品持续增长; 3、保障智能体系统架构的稳定、高效运行,帮助业务优化性能和改善系统稳定性。

更新于 2025-12-09北京|杭州|广州