工作内容:
1. 负责公司大数据平台的规划和建设；
2. 负责大数据平台组件的运维和调优；
3. 负责大数据平台问题排查，定位问题原因并解决；
4. 负责基于大数据平台的二次开发或管理软件的研发等；

岗位要求:
1. 熟悉Hadoop生态，对HDFS, YARN, HBase,Spark,Flink等有深入了解，熟悉原理，并有实际开发运维经验；
2. 掌握Java或Scala编程语言，熟悉JVM原理，并发，多线程等；
3. 熟悉Linux命令，掌握Shell编程；
4. 阅读过HBase，Flink等源码，有社区经验的加分；
5. 了解数据湖技术，对hudi,iceberg,paimon等有经验者加分；