Pilotage des clusters EMR avec AWS CLI : du déploiement à l’automatisation
Amazon EMR (Elastic MapReduce) est un service géré facilitant l’exécution de frameworks Big Data tels que Spark, Hadoop, Hive ou Presto. L’AWS CLI offre une interface en ligne de commande complète pour orchestrer l’ensemble du cycle de vie des clusters, depuis leur création jusqu’à leur terminaison, en passantt par la configuration et la superv ...
Publié le 30 août à 15h25
Intégration d'Apache DolphinScheduler avec EMR et Redshift d'AWS
L'architecture repose sur un lac de données S3 central entouré de composants complémentaires : bases de données, EMR pour Hadoop, entrepôts de données, et outils d'analyse. Cette structure permet une circulation fluide des données entre les différents services.
Composants Clés
Amazon EMR : Service managé pour l'exécution de frameworks Big Data ...
Publié le 26 juillet à 14h31