技術共有

データレイクとウェアハウスの統合 (1) hudi のコンパイル

2024-07-12

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina


1.ビッグデータコンポーネントのバージョン情報

  • hudi-0.14.1
  • 動物園飼育係-3.5.7
  • シートンネル-2.3.4
  • カフカ_2.12-3.5.2
  • ハドゥープ3.3.5
  • MySQL 5.7.28 より
  • アパッチハイブ3.1.3
  • スパーク-3.3.1
  • フリンク-1.17.2
  • apache-dolphinscheduler-3.1.9

2. データレイクウェアハウスアーキテクチャ

3. データ レイク ウェアハウス コンポーネントの展開計画

ノード106 ノード107 ノード108 ノード109 ノード110

ゼック

ゼック

ゼック

シートンネル

シートンネル

シートンネル

カフカ

カフカ

カフカ

RM

RM

ニューメキシコ

ニューメキシコ

ニューメキシコ

NN

NN

DN

DN

DN

JN

JN