京东虚拟化研发工程师
任职要求
1. 教育背景 学历要求:本科及以上学历,计算机科学、软件工程等相关专业优先; 2. 工作经验 工作经验:5-10年相关工作经验,具备虚拟化技术研发经验者优先; 3. 能力要求: 技术能力:热爱编程,具备深厚的编程功底,熟悉数据结构;熟悉虚拟化基本原理,如内存、中断、CPU;熟悉IO虚拟化技术,如VirtIO、VFIO、vDPA,了解Dpdk;熟悉Linux内核,有相关子系统研发和排障经验;熟悉X86/Arm体系结构,包括CPU、PCI、中断、Bios等;参与KVM/Xen,QEMU,Libvirt相关开源社区并有贡献者优先;对Kata Containers,Firecracke…
工作职责
1. 负责计算统一虚拟化架构的技术研发工作,支持包括裸金属、云主机、安全容器和函数计算在内的多种计算形式,确保技术方案的先进性与实用性; 2. 通过技术手段持续提升云主机的质量与稳定性,降低故障率,确保服务的高可用性与用户体验; 3. 通过优化资源调度与管理技术,提升节点资源利用率,降低云主机成本,实现成本效益最大化; 4. 参与开源社区的贡献与交流,如KVM/Xen、QEMU、Libvirt等,推动技术的进步与创新,提升团队在行业内的影响力; 5. 研究并应用最新的虚拟化技术,如Kata Containers、Firecracker、Cloud-Hypervisor、Rust-VMM等,保持技术的前沿性与竞争力。
大模型具备很强的泛化及理解世界能力,在小红书内的众多生产场景遍地开花,大模型的训练和部署已成为许多算法工程师的日常。在多团队、多业务频繁使用的大规模GPU集群上,如何能够通过高效的GPU调度策略,使大家不仅能丝滑地完成训练及部署任务,同时也能充分激发大规模GPU集群的效能,是行业公认的关键挑战。在这里,你可以聚焦LLM场景,接触到超大规模GPU集群,并使用真实负载数据进行深入分析及技术探索。欢迎加入我们,一起探索领先技术改变世界! 工作职责: 1、负责万卡规模GPU集群效能分析及优化,通过调度策略优化、在离线混部、集群调度、GPU虚拟化、故障快速恢复、存储&网络加速等手段,提升大规模GPU集群的整体使用效率。 2、负责构建面向大模型训练、微调、推理、部署全流程LLMOps,与下游云原生平台深度融合,支撑大模型在公司内各业务生产链路稳定高效地落地。 3、持续关注业界最新的GPU资源调度相关技术动态,探索建设业界领先的资源调度策略及方法,构建下一代大规模AI资源调度系统。
1. 负责实现底层接口的封装,为应用层提供高效的API; 2. 负责实现跨域通信接口设计和实现,基于socket,共享内存等技术; 3. 负责对当前软件代码调优,降低应用软件的硬件占用率; 4. 负责应用空间调试工具和测试工具的开发;
1. 负责云网络的虚拟化网元底座NFV平台的数据面技术方案,包括基于需求进行技术可行性分析,技术方案选型、功能设计以及技术架构设计等工作 ; 2. 负责云网络的虚拟化网元底座NFV平台的数据面开发,包括需求代码开发、代码Review、测试及上线发布; 3. 负责云网络的虚拟化网元底座NFV平台的稳定性能力建设以及性能优化,包括线上问题处理、问题诊断等,确保系统的安全可靠,提升产品稳定性和性能; 4. 参与云网络虚拟化网元产品的技术预研以及技术规划,跟踪和了解最新的产品技术趋势。