Nous sommes ravis d'annoncer que les EMR haute disponibilité sur les clusters EC2 sont désormais également disponibles avec la configuration des flottes d'instances. Le cluster EMR de votre flotte d'instances à haute disponibilité disposera de trois nœuds principaux à la demande et prendra en charge les applications Hadoop telles que YARN Resource Manager, HDFS Name Node et Spark. En cas de panne d'un nœud principal ou de processus critiques tels que Yarn Resource Manager et NameNode, EMR bascule vers l'un des nœuds principaux restants du cluster.
Amazon EMR est une plateforme cloud Big Data pour le traitement des données, l'analyse interactive et l'apprentissage automatique utilisant des frameworks open source tels qu'Apache Spark, Presto et Trino et Apache Flink. Grâce à la prise en charge de plusieurs nœuds principaux, EMR élimine la possibilité d'un point de défaillance unique pour votre cluster. Cela améliore la tolérance aux pannes et permet un fonctionnement ininterrompu de votre cluster. Avec ce lancement, vous bénéficiez d'une diversité d'instances améliorée dans la configuration des flottes d'instances avec vos clusters EMR à haute disponibilité.
Les clients peuvent désormais lancer des clusters de flotte d'instances à haute disponibilité avec les versions Amazon EMR 5.36.1, 6.8.1, 6.9.1, 6.10.1, 6.11.1, 6.12 et supérieures. Cette fonctionnalité est disponible dans toutes les régions où Amazon EMR sur EC2 est disponible. Pour en savoir plus sur les applications prises en charge et leur processus de basculement, consultez notre documentation. Pour lancer un EMR haute disponibilité sur le cluster EC2, visitez la page Planifier et configurer les nœuds principaux.
Vous pouvez lire l’article original (en Angais) sur le blogaws.amazon.com