目录
一、大数据组件版本信息
二、数据湖仓架构
三、数据湖仓组件部署规划
四、编译hudi
一、大数据组件版本信息
- hudi-0.14.1
- zookeeper-3.5.7
- seatunnel-2.3.4
- kafka_2.12-3.5.2
- hadoop-3.3.5
- mysql-5.7.28
- apache-hive-3.1.3
- spark-3.3.1
- flink-1.17.2
- apache-dolphinscheduler-3.1.9
二、数据湖仓架构
三、数据湖仓组件部署规划
node106 | node107 | node108 | node109 | node110 |
ZK | ZK | ZK | ||
seatunnel | seatunnel | seatunnel | ||
kafka | kafka | kafka | ||
RM | RM | |||
NM | NM | NM | ||
NN | NN | |||
DN | DN | DN | ||
JN | JN | |||