Créer un Job Spark Batch

Un Job Talend pour Apache Spark Batch vous permet d'accéder aux et d'utiliser les composants Spark du Talend afin de concevoir graphiquement des programmes Apache Spark pour lire, transformer ou écrire des données.

Avant de commencer

Vous avez démarré votre Studio Talend et ouvert la perspective Integration .

Procédure

Dans la vue Repository, développez le nœud Job Designs, cliquez-droit sur le nœud Big Data Batch et sélectionnez Create folder dans le menu contextuel.
Dans l'assistant New Folder, nommez le dossier de Jobs getting_started, puis cliquez sur Finish pour créer le dossier.
Cliquez-droit sur le dossier getting_started et sélectionnez à nouveau Create folder.
Dans l'assistant New Folder, nommez le nouveau dossier spark et cliquez sur Finish pour le créer.
Cliquez-droit sur le dossier spark et sélectionnez Create Big Data Batch Job.
Dans l'assistant New Big Data Batch Job, sélectionnez Spark dans la liste déroulante Framework.
Saisissez un nom pour ce Job Spark Batch et toute autre information utile.

Par exemple, saisissez aggregate_movie_director_spark dans le champ Name.

Résultats

Le composant Spark Batch Palette est désormais disponible dans le Studio. Vous pouvez commencer à concevoir le Job en utilisant cette Palette et le nœud Metadata dans le Repository.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.

Laissez vos commentaires ici