Data Lake- und Warehouse-Integration (1) Kompilieren Sie hudi_developdoc

Data Lake- und Warehouse-Integration (1) Hudi kompilieren

2024-07-12

Inhaltsverzeichnis

1. Informationen zur Version der Big-Data-Komponente

2. Data-Lake-Warehouse-Architektur

3. Planung der Bereitstellung von Data Lake Warehouse-Komponenten

4. Kompilieren Sie Hudi

1. Informationen zur Version der Big-Data-Komponente

hudi-0.14.1
zookeeper-3.5.7
Seetunnel-2.3.4
kafka_2.12-3.5.2
hadoop-3.3.5
mysql-5.7.28
Apache-Hive-3.1.3
Funke-3.3.1
flink-1.17.2
Apache-DolphinScheduler-3.1.9

2. Data-Lake-Warehouse-Architektur

3. Planung der Bereitstellung von Data Lake Warehouse-Komponenten

Knoten106	Knoten107	Knoten108	Knoten109	Knoten110
ZK	ZK	ZK
Seetunnel	Seetunnel	Seetunnel
Kafka	Kafka	Kafka
RM	RM
		NM	NM	NM
NN	NN
		DN	DN	DN
JN	JN

Persönliches Profil

Er widmet sich seit mehr als 30 Jahren der Technologieforschung und beherrscht verschiedene Sprachen wie Java, Linux, Javascript, PHP, CSS usw. Er hat viele Beiträge im Open-Source-Bereich geleistet Entwicklerdokumentationsstation, um einige Themen in der Technologieentwicklung als zukünftige Referenz zu teilen

meine Kontaktdaten

Post[email protected]