Big Data Administrator - 10530725

Descrição:

2x a week to São Carlos Habilidades: Experiência com o ecossistema AWS EMR e Hadoop. Sólida experiência em administração Linux e programação de scripts (Bash, Python).

- Familiaridade com serviços da AWS como S3, EC2, IAM e CloudWatch.

- Experiência com Terraform, CloudFormation e outras ferramentas DevOps.

- Certificações AWS (Arquiteto de Soluções, Big Data, Engenheiro de Dados).- Experiência com EMR Serverless, Docker ou Kubernetes.



1. Administração de Cluster EMR:

- Provisionar, configurar e gerenciar clusters do Amazon EMR.



- Otimizar dimensionamento, escalonamento automático e desempenho.



- Gerenciar componentes do Hadoop, incluindo HDFS, YARN, Hive e Spark.



2. Operações da Plataforma de Big Data:

- Instalar, configurar e atualizar ferramentas de big data.



- Monitorar a integridade do cluster e solucionar problemas.