Versions des distributions de plateformes Cloud Big Data supportées pour les Jobs Talend

Distributions Cloud Hadoop

Talend supporte les plateformes Cloud suivantes pour le Big Data. Cliquez sur votre plateforme Cloud pour consulter les informations relatives au support du Big Data.

Les anciennes versions des plateformes Big Data supportées ne sont plus supportées par leurs vendeurs. Talend ne supporte plus une version une fois que celle-ci atteint sa date de fin de support prévue par le vendeur.

Talend et sa communauté vous fournissent la possibilité de continuer à utiliser une version qu'un vendeur ne supporte plus, dans les produits Talend. Ainsi, cette version peut être listée dans les tables suivantes et disponible dans les produits, mais Talend ne fournit plus de support pour cette version.

Talend supporte les versions mineures des versions des plateformes listées dans les tableaux suivants.

Amazon EMR
Version d'Amazon EMR	Frameworks supportés	Éléments Hadoop supportés dans Spark Batch	Éléments Hadoop supportés dans Spark Streaming	Éléments Hadoop supportés dans Standard
v4.5.0 (Hadoop 2.7.2)	Standard Spark v1.6 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v4.6.0 (Hadoop 2.7.2)	Standard Spark v1.6 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v5.0.0 (Hadoop 2.7.2)	Standard Spark v2.0 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v5.5.0 (Hadoop 2.7.3)	Standard Spark v2.1 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v5.8.0 (Hadoop 2.7.3)	Standard Spark v2.2 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
EMR 5.15.0 (Hadoop 2.8.3)	Standard Spark v2.3 (dépréciée)	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v5.29.0 (Hadoop 2.8.5)	Standard Spark v2.4	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop
v6.2.0 (Hadoop 3.2.1)	Standard Spark v3.0	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive	HBase HDFS HCatalog Hive Sqoop

Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.5.0, 4.6.0, 4.9.2, 5.11.0, 5.15.0 et 5.29.0.

Cloudera Altus sur AWS pour Big Data
Version de Cloudera	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
CDH5.11 (dépréciée)	Spark v2.1 (dépréciée)	S3 Redshift DynamoDB	S3 Kinesis Redshift DynamoDB

Cloudera Altus sur Azure pour Big Data
Version de Cloudera	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
CDH5.11 (dépréciée)	Spark v2.1 (dépréciée)	ADLS Gen1 Stockage Blob Azure HDFS	ADLS Gen1 Stockage Blob Azure HDFS

Databricks sur AWS pour Big Data
Version de Databricks sur AWS	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
3.5 LTS (dépréciée)	Standard Spark v2.2 (dépréciée)	Hive S3 DynamoDB	Hive S3 DynamoDB Kinesis	DBFS
5.5 LTS	Standard Spark v2.4	Hive S3 DynamoDB Snowflake MongoDB Composants TDM en version bêta tDataprepRun	Hive S3 DynamoDB Kinesis Snowflake MongoDB Composants TDM en version bêta tDataprepRun	DBFS
6.4	Standard Spark v2.4.5	Stockage Blob Azure ADLS Gen2 Snowflake DeltaLake	Stockage Blob Azure ADLS Gen2	DBFS
7.3 LTS	Standard Spark v3.0.1	Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Stockage Blob Azure	Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Kinesis Stockage Blob Azure	DBFS

Databricks sur Azure pour Big Data
Version de Databricks sur Azure	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
3.5 LTS (dépréciée)	Standard Spark v2.2 (dépréciée)	Hive Stockage Blob Azure ADLS Gen1	Hive Stockage Blob Azure ADLS Gen1	DBFS
5.5 LTS	Standard Spark v2.4	Hive Stockage Blob Azure ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB Composants TDM en version bêta tDataprepRun	Hive Stockage Blob Azure ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB Composants TDM en version bêta tDataprepRun	DBFS
6.4	Standard Spark v2.4.5	Stockage Blob Azure ADLS Gen2 Snowflake DeltaLake	Stockage Blob Azure ADLS Gen2	DBFS
7.3 LTS	Standard Spark v3.0.1	Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Stockage Blob Azure	Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Stockage Blob Azure	DBFS

Google Dataproc pour Big Data
Version Google Dataproc	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
v1.1 (dépréciée)	Standard Spark v2.0 (dépréciée)	Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON	Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON Google PubSub	Hive
v1.4 (dépréciée)	Standard Spark v2.4	Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON	Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON Google PubSub	Hive

Microsoft HDInsight pour Big Data
Version de Microsoft HDInsight	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
3.4 (dépréciée)	Spark v1.6 (dépréciée)	Hive	Hive	-
3.6 (dépréciée)	Spark v2.1 (dépréciée)	Hive	Hive	-
4.0	Spark v2.3 (dépréciée) et v2.4	ADLS Gen2 Stockage Blob Azure Hive	ADLS Gen2 Stockage Blob Azure Hive	ADLS Gen2 Stockage Blob Azure Hive

Qubole sur AWS pour Big Data
Version de Qubole	Frameworks supportés	Éléments supportés dans Spark Batch	Éléments supportés dans Spark Streaming	Éléments supportés dans Standard
Qubole Spark 2 (dépréciée)	Standard Spark v2.2 (dépréciée)	Redshift S3 DynamoDB	Redshift S3 DynamoDB Kinesis	S3 Hive

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.

Laissez vos commentaires ici