平安科技大数据平台开发工程师
社招全职3年以上计算机网络技术类地点：深圳状态：招聘
任职要求
1. 计算机或相关专业，3年以上大数据相关开发经验； 2. 熟悉linux/UNIX shell、熟悉(python/shell)任意一种脚本语言、熟悉Java/Scala/C++任意一种开发语言； 3. 熟悉大数据基础平台技术的原理…
登录查看完整任职要求
微信扫码，1秒登录
工作职责
1. 负责或参与大数据平台的架构设计以及基础组件的调优、改造、升级； 2. 结合客户需求，负责和参与大数据产品的设计与研发； 3. 负责数据平台新技术的研究及应用落地。
包括英文材料
大数据+
https://www.youtube.com/watch?v=bAyrObl7TYE
https://www.youtube.com/watch?v=H4bf_uuMC-g
With all this talk of Big Data, we got Rebecca Tickle to explain just what makes data into Big Data.
Linux+
https://ryanstutorials.net/linuxtutorial/
Ok, so you want to learn how to use the Bash command line interface (terminal) on Unix/Linux.
https://ubuntu.com/tutorials/command-line-for-beginners
The Linux command line is a text interface to your computer.
https://www.youtube.com/watch?v=6WatcfENsOU
In this Linux crash course, you will learn the fundamental skills and tools you need to become a proficient Linux system administrator.
https://www.youtube.com/watch?v=v392lEyM29A
Never fear the command line again, make it fear you.
https://www.youtube.com/watch?v=ZtqBQ68cfJc
Unix+
[英文] The UNIX® Standard
https://www.opengroup.org/membership/forums/platform/unix
https://www.youtube.com/watch?v=IrDUcdpPmdI
UNIX is an operating system which was first developed in the 1970s, and has been under constant development ever since.
Bash+
[英文] The Bash Guide
https://guide.bash.academy/
A quality-driven guide through the shell's many features.
https://www.youtube.com/watch?v=tK9Oc6AEnR4
Understanding how to use bash scripting will enhance your productivity by automating tasks, streamlining processes, and making your workflow more efficient.
Python+
https://liaoxuefeng.com/books/python/introduction/index.html
中文，免费，零起点，完整示例，基于最新的Python 3版本。
https://www.learnpython.org/
a free interactive Python tutorial for people who want to learn Python, fast.
https://www.youtube.com/watch?v=K5KVEU3aaeQ
Master Python from scratch 🚀 No fluff—just clear, practical coding skills to kickstart your journey!
https://www.youtube.com/watch?v=rfscVS0vtbw
This course will give you a full introduction into all of the core concepts in python.
脚本+
[英文] Scripting language
https://en.wikipedia.org/wiki/Scripting_language
https://zhuanlan.zhihu.com/p/571097954
一个脚本通常是解释执行而非编译。脚本语言通常都有简单、易学、易用的特性，目的就是希望能让程序员快速完成程序的编写工作。
还有更多 •••
相关职位
社招5年以上国际业务开发
1、负责海外大数据平台的架构优化与解决方案制定。 2、对大数据服务进行性能优化，确保集群的高效与稳定运行，提升系统稳定性与可扩展性 3、优化大数据相关的数据治理、数据传输、数据建模、数据统计等问题 4、承接实时/离线的大数据处理流程开发，满足平台内各种数据业务需求 5、负责制定技术方案并组织编写技术文档和用户手册等
更新于 2025-03-18上海
社招4年以上软硬件服务-Sa
1、参与餐饮SaaS数据平台的整体架构建设工作，包括但不限于在线多维分析引擎、数据存储引擎、实时计算引擎、平台数据治理、数据服务、数据质量、数据产品等能力设计与研发等； 2、研究美团餐饮SaaS业务的数据特点，探索带来成本大幅优化的计算、存储方案，构建下一代智能报表系统的底层基础能力与产品通用解决方案； 3、理解数据湖、大数据分析引擎或数据库引擎工作原理，熟悉Parquet、ORC、Arrow等列存储技术方案，理解Doris、ClickHouse、Hive、Presto等至少一种分析引擎的工作原理，熟悉实时计算系统Flink、Storm、Spark至少一种计算框架的工作原理； 4、精通OLAP SQL优化与业务逻辑编排，对BI分析引擎有理解者优先
更新于 2025-04-17北京
社招1年以上后端开发
小红书基础设施网络平台致力于实现网络监管控的平台化，自动化，智能化。建设多场景、高可用、高性能可观测系统。覆盖设备基础监控，流量分析，云网络，拨测，内网质量等多种场景。
北京|上海|杭州
社招3年以上技术团队开发
1.负责实时计算平台的开发与设计； 2.负责实时/准实时湖仓的开发与设计； 3.负责Flink内核以及湖仓生态的开发与设计；
更新于 2025-05-08上海