Amazon EMR

Amazon EMR est la plateforme de mégadonnées infonuagique chef de file du secteur pour le traitement de grandes quantités de données à l'aide d'outils open source tels qu'Apache Spark, Apache Hive, Apache HBase, Apache Flink, Apache Hudi et Presto. Avec Amazon EMR, vous pouvez exécuter une analyse à l'échelle du pétaoctet pour moins de la moitié du coût des solutions sur site traditionnelles et plus de 3 fois plus rapidement qu'Apache Spark standard. Pour les tâches de courte durée, vous pouvez démarrer et arrêter des unités d'allocation et payer à la seconde pour les instances utilisées. Pour les charges de travail de longue durée, vous pouvez créer des unités d'allocations hautement disponibles évoluant automatiquement pour répondre à la demande.

Vous pouvez créer une ou plusieurs instances des unités d'allocation Amazon EMR dans une zone d'atterrissage multi-comptes AMS ou dans des comptes de zone d'atterrissage à compte unique pour prendre en charge les unités d'allocation Amazon EMR temporaires et persistants. Vous pouvez également activer l'authentification Kerberos pour permettre l'authentification des utilisateurs à partir du domaine Active Directory sur site.

Vous pouvez exploiter plusieurs magasins de données avec les unités d'allocation Amazon EMR pour prendre en charge les outils et bibliothèques Hadoop spécifiques à un cas d'utilisation. Les unités d'allocation Amazon EMR peuvent être créés à l'aide d'instances OnDemand ou Spot et configurer la mise à l'échelle automatique pour gérer la capacité et réduire les coûts.

Les fichiers journaux de l'unité d'allocation peuvent être archivés dans un compartiment Amazon S3 pour la journalisation et le débogage. Vous pouvez également accéder aux interfaces Web hébergées dans l'unité d'allocation Amazon EMR pour prendre en charge les exigences d'administration Hadoop ou les expériences de carnet de notes pour les clients.