米哈游LLM Pretrain Data研究员
社招全职程序&技术类地点：上海 | 北京状态：招聘♡ 收藏
工作描述
任职要求 1、精通大规模数据处理框架，如Apache Spark或Ray。 2、扎实的Python编程能力，熟悉分布式计算。 3、数据sense强，能够分析并处理不同代码和文本语料中的边界情况。 加分项 1、…
登录查看完整工作描述
微信扫码，1秒登录
包括英文材料
Apache+
https://www.apache.org/
The Apache® Software Foundation (ASF) provides software for the public good, guided by community over code.
Spark+
[英文] Learning Spark Book
https://pages.databricks.com/rs/094-YMS-629/images/LearningSpark2.0.pdf
This new edition has been updated to reflect Apache Spark’s evolution through Spark 2.x and Spark 3.0, including its expanded ecosystem of built-in and external data sources, machine learning, and streaming technologies with which Spark is tightly integrated.
Ray+
https://github.com/ray-project/ray
Ray consists of a core distributed runtime and a set of AI Libraries for accelerating ML workloads.
https://www.youtube.com/watch?v=FhXfEXUUQp0
In this video, I'll teach you everything you need to know about Apache Ray!
https://www.youtube.com/watch?v=fMiAyj2kgac
Using powerful machine learning algorithms is easy using Ray.io and Python.
https://www.youtube.com/watch?v=q_aTbb7XeL4
Parallel and Distributed computing sounds scary until you try this fantastic Python library.
Python+
https://liaoxuefeng.com/books/python/introduction/index.html
中文，免费，零起点，完整示例，基于最新的Python 3版本。
https://www.learnpython.org/
a free interactive Python tutorial for people who want to learn Python, fast.
https://www.youtube.com/watch?v=K5KVEU3aaeQ
Master Python from scratch 🚀 No fluff—just clear, practical coding skills to kickstart your journey!
https://www.youtube.com/watch?v=rfscVS0vtbw
This course will give you a full introduction into all of the core concepts in python.
还有更多 •••
相关职位
校招程序&技术类
1、精通大规模数据处理框架，如Apache Spark或Ray。 2、扎实的Python编程能力，熟悉分布式计算概念。 3、高度重视数据质量，能够分析并处理不同代码和文本语料中的边界情况。 加分项
上海
实习程序&技术类
1、计算机科学或相关技术领域的硕士或博士在读。 2、具备LLM训练及训练数据整理的实际经验。 加分项 1、熟悉大规模数据处理框架，如Apache Spark或Ray。 2、熟悉LLM推理框架，如vL
上海|北京
校招程序&技术类
1. 计算机科学、人工智能或相关领域的硕士或博士 2. 在自然语言处理、大语言模型研究或机器学习领域中具有相关研究经验 3. 具备扎实的代码与算法基础，熟练掌握PyTorch等深度学习框架 4. 具备
上海|北京
实习程序&技术类
1. 计算机科学、人工智能或相关领域的在读硕士或博士 2. 在自然语言处理、大语言模型研究或机器学习领域中具有相关研究经验 3. 具备扎实的代码与算法基础，熟练掌握PyTorch等深度学习框架 4.
上海|北京