Publicado: May 11, 2021
A partir de hoje, o HAQM EMR no HAQM EKS está disponível nas regiões UE (Paris e Estocolmo).
O HAQM EMR on EKS permite que os clientes automatizem o provisionamento e o gerenciamento de estruturas de big data de código aberto no HAQM EKS. Com o EMR no EKS, os clientes agora podem executar aplicativos Spark junto com outros tipos de aplicativos no mesmo cluster do EKS para melhorar a utilização de recursos e simplificar o gerenciamento de infraestrutura. Os clientes podem implantar aplicativos EMR no mesmo cluster EKS que outros tipos de aplicativos, possibilitando o compartilhar recursos e a padronização em uma única solução para operar e gerenciar todos os seus aplicativos. Os clientes têm acesso aos mesmos recursos do EMR no EKS usados atualmente no HAQM EC2, como acesso ao tempo de execução otimizado para o desempenho mais recente do Spark, o EMR Studio (demonstração) para desenvolvimento de aplicativos e uma interface persistente do Spark para depuração.
Para começar, registre seu cluster do EKS com HAQM EMR. Em seguida, defina seu trabalho, incluindo a versão de lançamento de EMR, parâmetros do Spark e dependências das aplicações. O HAQM EMR no HAQM EKS agendará os pods, contêineres e recursos em seu cluster do HAQM EKS. É possível configurar seu trabalho para ser executado em instâncias do HAQM EC2 ou HAQM Fargate se quiser ter uma experiência sem servidor. Você pode criar fluxos de trabalho com o HAQM Managed Workflows para Apache Airflow e analisar a saída com logs de trabalho armazenados no HAQM S3 ou no HAQM CloudWatch.
Para obter mais informações sobre o HAQM EMR on EKS, acesse o Blog de lançamento do documentação do HAQM on EKS, consulte a documentação do HAQM EMR on EKS ou assista à nossa deep-dive tech talk sobre o HAQM EMR on EKS.