統合
バッチ統合モジュールはAEデータ開発プラットフォームの中核コンポーネントで、データのインポートとエクスポートを担います。
外部データをプラットフォームに取り込む必要がある場合は、バッチ統合モジュールですばやくインポートできます。また、データアプリケーションを支えるために自社構築のレイクハウスへデータをエクスポートする必要がある場合も、バッチ統合モジュールで効率的に行えます。
データソースと統合プランを作成する手順は次のとおりです:
1. 「バッチ統合」>「データソース」に移動し、右上の「+ データソース」をクリックします。
2. データソースタイプ(MySQLなど)を選択し、右上の「次のステップ」をクリックします。
3. データソース名と接続情報を入力し、右上の「完了」をクリックします。
4. 左側の「オフライン同期」をクリックし、右上の「+ 統合プラン」をクリックします。
5. 「統合プランの作成」ページでデータソースとデータの流向を選択し、「解析フィールド」をクリックしてフィールド照合を設定します。基本情報を入力したら、右上の「保存」をクリックします。
データインポートの流れ
1.データの準備
インポートする外部データの準備ができていることを確認し、その保存場所(OSSなど)を確認します。
2.データソースの作成
「データソース」モジュールで、外部データのストレージタイプ(OSSなど)に応じて対応するデータソースを作成します。
3.オフライン同期プランの設定
- 「オフライン同期」モジュールに移動し、オフライン同期の統合プランを新規作成します。
- 外部データをデータソースとして設定し、ワークスペース内の目標データテーブルを書き込み先として指定します。
4.データインポートの実行
-
単発インポート:統合プランの詳細ページで手動実行します。
-
定期インポート:
- 統合プランをタスクフローにマウントします。
- タスクフローの定期スケジューリング施策を設定すると、統合プランがタスクフローとともに自動で実行されます。
データエクスポートの流れ
1.エクスポートするデータの準備
エクスポートする必要があるスペースのデータ(プリセット倉庫のデータ)の準備ができていることを確認します。
2.目標データソースの作成
「データソース」モジュールで、目標ストレージのタイプ(MySQLなど)に応じて対応するデータソースを作成します。
3.オフライン同期プランの設定
- 「オフライン同期」モジュールに移動し、新しいオフライン同期タスクを作成します
- データソース:エクスポートするスペースのデータ(プリセット倉庫)を選択します
- 書き込み先:目標データソース内の対応するテーブルを指定します
4.データエクスポートの実行
-
即時エクスポート:プランの詳細ページで手動実行します。
-
定期エクスポート:
- 統合プランをタスクフローにマウントします。
- タスクフローの定期スケジューリング施策を設定すると、統合プランがタスクフローとともに自動で実行されます。

