Last updated
Learn & practice AWS Hacking:HackTricks Training AWS Red Team Expert (ARTE) Learn & practice GCP Hacking: HackTricks Training GCP Red Team Expert (GRTE)
Le service Elastic MapReduce (EMR) d'AWS, à partir de la version 4.8.0, a introduit une fonctionnalité de configuration de sécurité qui améliore la protection des données en permettant aux utilisateurs de spécifier des paramètres de cryptage pour les données au repos et en transit au sein des clusters EMR, qui sont des groupes évolutifs d'instances EC2 conçus pour traiter des frameworks de big data comme Apache Hadoop et Spark.
Les caractéristiques clés incluent :
Chiffrement par défaut du cluster : Par défaut, les données au repos dans un cluster ne sont pas chiffrées. Cependant, l'activation du chiffrement permet d'accéder à plusieurs fonctionnalités :
Configuration unifiée des clés Linux : Chiffre les volumes de cluster EBS. Les utilisateurs peuvent opter pour le service de gestion des clés AWS (KMS) ou un fournisseur de clés personnalisé.
Chiffrement HDFS open-source : Offre deux options de chiffrement pour Hadoop :
RPC Hadoop sécurisé (Remote Procedure Call), défini sur la confidentialité, utilisant le Simple Authentication Security Layer.
Le chiffrement de transfert de blocs HDFS, défini sur vrai, utilise l'algorithme AES-256.
Chiffrement en transit : Se concentre sur la sécurisation des données lors du transfert. Les options incluent :
Transport Layer Security (TLS) open source : Le chiffrement peut être activé en choisissant un fournisseur de certificats :
PEM : Nécessite la création manuelle et l'assemblage de certificats PEM dans un fichier zip, référencé depuis un bucket S3.
Personnalisé : Implique l'ajout d'une classe Java personnalisée en tant que fournisseur de certificats qui fournit des artefacts de chiffrement.
Une fois qu'un fournisseur de certificats TLS est intégré dans la configuration de sécurité, les fonctionnalités de chiffrement spécifiques à l'application suivantes peuvent être activées, variant en fonction de la version EMR :
Hadoop :
Peut réduire le mélange chiffré en utilisant TLS.
RPC Hadoop sécurisé avec Simple Authentication Security Layer et transfert de blocs HDFS avec AES-256 sont activés avec le chiffrement au repos.
Presto (version EMR 5.6.0+) :
La communication interne entre les nœuds Presto est sécurisée à l'aide de SSL et TLS.
Tez Shuffle Handler :
Utilise TLS pour le chiffrement.
Spark :
Utilise TLS pour le protocole Akka.
Utilise Simple Authentication Security Layer et 3DES pour le service de transfert de blocs.
Le service de mélange externe est sécurisé avec le Simple Authentication Security Layer.
Ces fonctionnalités améliorent collectivement la posture de sécurité des clusters EMR, en particulier en ce qui concerne la protection des données pendant les phases de stockage et de transmission.
Apprenez et pratiquez le hacking AWS :HackTricks Training AWS Red Team Expert (ARTE) Apprenez et pratiquez le hacking GCP : HackTricks Training GCP Red Team Expert (GRTE)
