Talend Management ConsoleとDynamic Engineについて

Dynamic Engineとは

Dynamic Engineインスタンスは、Talend Management Consoleで作成された論理エンティティと、Kubernetesクラスターでプロビジョニングされた物理エンティティで構成されます。物理エンティティは、割り当てられたDynamic Engine環境ネームスペースでポッドのセットとして動作し、Talendタスクの実行に必要なサービスをすべて統合します。Talend Management ConsoleとそのAPIサービスは、ユーザー、タスク、Dynamic Engineをはじめとする関連のエコシステムを管理します。

Dynamic Engine と Talend Remote Engineの相違点

従来のTalend Remote Engineは、オンプレミスのインフラストラクチャーやプライベートクラウドの仮想マシンにデプロイされた分離環境を提供します。これらの環境は、インフラストラクチャーが比較的静的で、自動スケーリングの必要性が最小限である従来のデプロイメントに適しています。ただしこのような環境では、特にスケーリングやタスクの分配に手作業が必要になることが多いため、リソース管理が複雑化する可能性があります。

対照的に、Dynamic Engineは自動化とコンテナー管理にKubernetesを活用し、データ処理により現代的で柔軟なアプローチを提供します。このソリューションでは、インフラ管理の多くをKubernetesにオフロードすることで運用のオーバーヘッドを削減し、最小限の手作業でパフォーマンスを最適化できます。Dynamic Engineはさらに、データ主権と厳格な規制要件へのコンプライアンスが保証されるSaaSデプロイメントモデルをサポートしています。将来的にDynamic EngineはTalend Cloudサービス全体でさらに緊密な統合を進め、単一かつ統一されたフレームワークで処理業務を簡素化するよう位置付けられています。

Dynamic Engineインスタンスは、関連するDynamic Engine環境にデプロイされたサービスを使用してタスクを実行します。プロセスを簡素化し、効率性を高めるようにデザインされており、各 Dynamic Engine 環境には 18,000 個のエンジン トークンが必要です。エンジン トークンの詳細については、「 実行エンジン」を参照してください。

Talend Management Consoleによる管理

前述のとおり、Talend Management Consoleは、APIサービスと共にDynamic Engineインスタンスと環境をシームレスに管理します。Talend Management Consoleを使用すれば、Dynamic Engineインスタンスとその環境のライフサイクルをリアルタイムで簡単にデプロイ、監視、管理でき、Kubernetesの自動化とスケーラビリティ機能を活用してさまざまなワークロードの需要に効率的に対応できるようになります。

Dynamic Engineのアーキテクチャー

次の図は、Dynamic Engineソリューションのアーキテクチャーの説明です。