千问千问C端事业群-高级系统开发工程师-AI爬虫方向

1、负责 AI 爬虫系统的后端、平台及策略开发，构建自动化的内容发现与下载能力，高效获取网页、图片、音视频、文档等优质资源； 2、面向千亿级数据规模，设计高可用的链接调度系统，在保障 SLA 的前提下实现系统的可扩展性与弹性伸缩，提升资源利用率并降低运维成本； 3、通过 JS 渲染、网络优化、自适应调度等架构级手段，结合定向站点分析，持续提升爬虫抓取效果； 4、负责海量网页数据的处理，包括结构化解析、清洗、去重等核心流程； 5、深入理解大模型、通用搜索及垂直搜索等业务场景，针对不同数据需求提供定制化解决方案，以数据驱动业务发展。

我们专注于设计和实现高性能、高可扩展性的推荐平台，助力算法和业务发展，如果你熟悉数据结构与算法，对高性能算法服务的实现有所研究，对新技术有极大的好奇心，勇于挑战各种系统架构难题，欢迎加入我们！ 1. 负责商品推荐系统的研发与优化，参与构建高可用，高性能的在线、近线推荐系统，覆盖召回、排序、策略等核心模块； 2. 深入参与业务迭代，理解业务目标，配合产品、算法进行AB实验取得业务结果； 3. 深入理解推荐系统与算法能力，以平台化方式抽象设计通用技术方案支撑业务； 4. 参与推荐系统的稳定性建设，针对业务设计合理的限流、容灾、降级、监控等方案； 5. 探索前沿技术，通过LLM能力提升用户体验与研发效能。

职位描述： 1. 系统开发：主导密码系统核心功能模块的架构设计与代码开发，包括但不限于密码生成、加密解密算法实现、密钥管理系统（KMS）开发、安全协议（如SSL/TLS、IPsec）的集成，确保系统的高安全性、高性能和可扩展性； 2. 技术攻关：针对密码系统开发过程中遇到的复杂技术问题，如密码算法优化、安全漏洞修复等，提供创新性的解决方案，攻克技术难点； 3. 系统维护：负责密码系统日常运维支持，及时处理系统运行过程中的故障、性能瓶颈问题，保障系统稳定运行；对系统进行持续优化和升级，提升系统整体安全防护能力； 4. 协作沟通：与产品、安全、测试等团队紧密协作，参与需求分析、技术评审，确保技术方案符合业务需求和安全标准；指导初级开发人员，提升团队整体技术水平； 5. 安全合规：深入研究密码学相关法律法规和行业标准（如国密算法标准），确保密码系统开发和运行满足合规要求，推动系统通过相关安全认证。

1.参与京东广告系统测试质量体系的建设，健全测试方法，完善测试环境、测试规范、监控体系、报警体系、问题排查等，通过快速有效的方法解决测试过程中的各种复杂问题及减少线上问题，提高测试效率； 2.参与开发与维护自动化测试框架与脚本，搭建与维护持续集成、持续交付流水线，实现广告系统的自动化测试，提高自动化case的覆盖率，并能引入新的技术，应用到广告系统，提高测试质量和测试效率； 3.参与产品需求和架构设计评审，关注产品设计与架构的合理性、可测性，把控风险，给出测试方案，规划上线节奏； 4.参与测试过程和结果的度量管理，通过建立指标体系、度量模型，评价测试活动的质量，促进测试过程的持续改进； 5. 与广告系统功能测试、回归测试、兼容性测试等业务测试标准的制定及审核，促使测试更规范；