Empresa de Tecnologia Contrata:

Engenheiro de Dados AWS - Pleno

Perfil:

Desenvolver, construir, testar e manter a arquitetura de dados e fluxos de processamento da companhia;

Prezar pela aquisição de dados, dando capacidade à organização de ingerir dados e possivelmente desenvolvendo integrações;

Alinhar e desenvolver requisitos de arquitetura e fluxos de processamento com diversos Steakholders;

Identificar formas de melhorar a robustez, eficiência, qualidade e custos da arquitetura de dados;

Garantir níveis altíssimos de confiabilidade e escala do negócio, entendendo as tendências dos dados como volume e características, endereçando os pontos de ineficiência e incapacidade de escala;

Automatizar, simplificar e abstrair processos de dados, tornando o recurso humano que tem interface com os dados cada vez mais eficiente na organização;

Conhecimentos técnicos:

Apache Spark;

Python;

Java (Desejável).

AWS (Elastic Beanstalk, SQS, RDS, Lambda Functions, EC2, EMR, S3, SNS).

Docker e Docker-Compose;

Data Lakes e Data Warehouses (s3, Google BigQuery).

Conceitos de ETL e ELT;

Governança e catalogação de dados (amundsen, etc).

SQL;

Arquitetura de processamento de dados (filas, jobs, workers, funções, etc);

Ferramentas de deploy e automatização;

Características de fluxo de execução: paralelos, concorrentes, distribuídos;

Bancos de dados relacionais e não relacionais (Postgres, MongoDB, Elasticsearch, DynamoDB, etc).

Modelagem de dados Soft skills;

Contratação CLT

Atuação 100% Remota