Publié le: Nov 22, 2022
HAQM EMR sans serveur annonce la prise en charge de la lecture et de l'écriture de données dans HAQM DynamoDB avec vos flux de travail Spark et Hive. Vous pouvez désormais exporter, importer, interroger et joindre des tables dans HAQM DynamoDB directement à partir de vos applications EMR sans serveur Spark et/ou Hive. HAQM DynamoDB est une base de données NoSQL entièrement gérée qui répond aux exigences de latence et de débit des applications les plus exigeantes en offrant une latence de l'ordre de quelques millisecondes et des performances prévisibles avec une capacité de mise à l'échelle transparente du débit et du stockage.
Les utilisateurs d'AWS ont souvent besoin de traiter les données stockées dans HAQM DynamoDB de manière efficace et à grande échelle pour des analyses en aval. L'équipe d'HAQM EMR a créé et mis en open source emr-dynamodb-connector pour aider les clients à simplifier l'accès et la configuration d'HAQM DynamoDB à l'aide de leurs applications Apache Spark et Apache Hive. Ce connecteur permet de multiples cas d'utilisation d'analytique, notamment le traitement efficace des données dans HAQM DynamoDB ou la jonction de tables dans HAQM DynamoDB avec des tables externes dans HAQM S3, HAQM RDS ou d'autres magasins de données auxquels HAQM EMR sans serveur peut accéder. Avec la version 6.9 d'HAQM EMR, vous pouvez bénéficier de tous les avantages du connecteur HAQM DynamoDB avec vos applications HAQM EMR sans serveur. Vous pouvez utiliser les tables HAQM DynamoDB à la fois pour l'accès interrégional et l'accès intercompte.
Nous sommes également ravis de vous indiquer que EMR sans serveur prend en charge l'accès à des compartiments HAQM S3 spécifiques à partir d'autres comptes AWS pour traiter les données de vos applications Spark et Hive. Les clients AWS utilisent plusieurs comptes AWS pour mieux séparer les différents projets ou secteurs d'activité. Les capacités intercomptes simplifient la sécurisation et la gestion des lacs de données distribués sur plusieurs comptes grâce à une approche centralisée. Avec l'accès intercompte à HAQM S3, vous pouvez utiliser votre application EMR sans serveur Spark ou Hive dans un compte AWS et accéder aux données stockées dans des compartiments spécifiques à partir d'autres comptes AWS pour les traiter.
Ces fonctionnalités sont désormais disponibles dans toutes les régions EMR sans serveur. Pour en savoir plus, reportez-vous à la documentation HAQM EMR sans serveur.