CARGO:

CIDADE - ESTADO:



Data engineer (banco de talentos)
Há 16 dias
a678945

Receba notificações de novas vagas de Talentos em BELO HORIZONTE-MG no seu e-mail.

  

Vaga: 1
Local de trabalho:
BELO HORIZONTE - MG (1 vaga)

Descrição:

Requisitos e Qualificações


  • Experiência com a implementação do Data Lakehouse;
  • Arquiteturas de Big Data não limitadas a LAMBDA e/ou KAPPA;
  • Soluções em nuvem para plataforma de dados, Modern Data Warehouse e Visualization Advanced Analytics;
  •  Conhecimento de orquestração de dados (Azure Data Factory Pipelines ou Apache Airflow DAGs);
  • Conhecimento de tecnologias de ingestão de dados, como Azure Data Factory Dataflows ou Azure Synapse Pipelines;
  • Conhecimento de tecnologias de transformação de dados, como o Apache Spark (Databricks ou Synapse Notebooks);
  • Experiência com soluções baseadas em bancos de dados relacionais, incluindo produtos como Azure SQL, MySQL...
  • Experiência com ferramentas de visualização de dados, como o Power BI.



Habilidades que farão você se destacar



  • Conhecimento de tecnologias de streaming de dados, como o Apache Kafka;
  • Modelo ARM para IaC, Shell Script, CI/CD usando YAML
  • Experiência com implementação de DataOps;
  • Experiência com implementação de Spark e Kafka usando Kubernetes;

Somos movidos por grandes desafios, por isso precisamos de pessoas que amam aprender e se desenvolver.


Aqui você terá a oportunidade de atuar em projetos desafiadores, trabalhando de qualquer lugar do mundo em diversos clientes e segmentos.


Nós buscamos pessoas que queiram mudar o mundo através dos dados, se você se identifica com nosso desejo, e se encaixa nas características abaixo, é só clicar no botão para se inscrever e tão logo surgindo uma oportunidade entraremos em contato com você



  • Implementar pipelines de carga utilizando ferramentas como Azure Data Factory, Databricks, Airflow, AWS Glue, etc para que os dados do cliente possam entrar no armazenamento cloud.
  • Implementar scripts de extração e/ou transformação de dados utilizando linguagem Python, SQL;
  • Implementar arquiteturas em ambiente cloud Azure, AWS, Onprimess, etc para que a estrutura de carga seja armazenada e utilizada;
  • Estruturar arquiteturas em ambiente cloud criando grupos de segurança e demais configurações, restrições de acesso bem como a realização de esteiras de teste para identificação de possíveis contratempos que podem ocorrer no futuro do projeto;
  • Implementar estruturas de releases CI/CD para que as etapas de implantação possam acontecer de forma correta e segura;
  • Conexão de GIT com ferramentas de desenvolvimento (Azure Data Factory; Databricks; Azure Synapse, AWS CodeDeploy, etc);
  • Participar de reuniões de levantamento de requisitos para novas demandas para entendimento de novas entregas;
  • Desenhar métodos e fluxos de carga para apresentação junto ao cliente para que dúvidas sobre regras de negócio sejam sanadas;
  • Monitorar disparos de carga diários olhando no monitoramento de disparo de carga;
  • Documentar processos de carga para preservar as boas práticas e respeitar os padrões de desenvolvimento anteriormente aplicados;
  • Mapear fluxos de cargas para que no momento da migração de infraestrutura os ambientes sejam equivalentes e gerem os mesmos resultados;
  • Participação de ritos/dailys com o time e cliente levando as atualizações sobre o projeto que estão sob sua responsabilidade;
  • Monitorar custos de ambiente cloud para evitar gastos desnecessário ou localizar complicações com
  • Apoiar os colegas de equipe/empresa em outras demandas com o agendamento para análises de processo de desenvolvimento ou entendimento sobre o funcionamento de uma determinada ferramenta ou desenvolvimento de arquitetura;
  • Colaborar com o cliente em tarefas que necessitem um nível maior de conhecimento técnico para que todas as dúvidas deste sejam esclarecidas e/ou sempre que algum impedimento se-ja percebido;
  • Analisar e buscar sempre a melhor solução de engenharia de dados, garantindo que as melhores práticas de desenvolvimento estejam sendo seguidas;
  • Documentar processos de teste de desenvolvimento sempre que uma nova demanda é entregue.

Caso não possua os requisitos necessários para essa posição, não se preocupe, temos um banco de vagas geral, onde você pode se candidatar.

X
Receba notificações de novas vagas de Talentos em BELO HORIZONTE-MG
>