主要职责:
1.负责公有云serverless spark/sql的设计架构和开发工作
2.负责saas级别统一元数据服务,数据发现和数据治理服务的开发架构工作
3.负责数据湖 数据入湖模块的设计和开发工作
任职要求:
1.精通大数据计算、存储、tableformat、元数据方向中的一个或多个领域.对spark/flink/presto/alluxio,iceberg/hudi,hive metastore/a6n/metacat 其中一个或者多个开源项目有深度理解
2.熟悉cloud native相关技术,k8s,etcd,contour等
3.熟悉大数据serverless相关技术
4.精通java,熟悉spring cloud