Compartir tecnología

Integración de almacén y lago de datos (1) Compilar hudi

2024-07-12

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina


1. Información de la versión del componente de big data

  • hudi-0.14.1
  • cuidador del zoológico-3.5.7
  • Túnel de asiento-2.3.4
  • Kafka_2.12-3.5.2
  • hadoop-3.3.5
  • MySQL-5.7.28
  • Apache Hive 3.1.3
  • chispa-3.3.1
  • enlace-1.17.2
  • Programador Apache Dolphins 3.1.9

2. Arquitectura del almacén del lago de datos

3. Planificación de la implementación de componentes del almacén del lago de datos

nodo106 nodo107 nodo108 nodo109 nodo110

ZK

ZK

ZK

Túnel de asiento

Túnel de asiento

Túnel de asiento

Kafka

Kafka

Kafka

RM

RM

Nuevo Méjico

Nuevo Méjico

Nuevo Méjico

Enero

Enero

No.

No.

No.

Enero

Enero