Passer d'un mode à l'autre, d'une distribution à l'autre ou d'un environnement à l'autre avec Spark Universal
Le mécanisme Spark Universal vous permet de passer rapidement et facilement d'un mode Spark à un autre, d'une distribution Spark à une autre et d'un environnement Spark à un autre, en modifiant le fichier JAR de configuration Hadoop, tout en conservant la configuration du Job. L'opération de passage d'un élément à un autre peut s'effectuer :
- en mode Spark mode : vous pouvez passer du mode Local au mode Yarn cluster pour tester d'abord votre Job sur votre machine locale, avant de l'envoyer sur un cluster.
- sur la Distribution : vous pouvez passer d'une distribution Big Data disponible à une autre pour une version Spark donnée.
- sur l'environnement (Environment) : vous pouvez passer d'un environnement à l'autre parmi les environnements suivants : développement, intégration et production.