Experiência em desenvolvimento na ferramenta ETL Talend Big Data Edition, Hadoop ou BODS

Experiência prática em design de ETL, mapeamento de fontes, desenvolvimento de códigos ETLs e ajuste de desempenho

Experiência com automação de infraestrutura, automação de compilação e automação de implantação.

Experiência em trabalhar com GIT, SVN ou Azure Dev OPS.

Experiência em conexão com fontes heterogêneas, incluindo SAP ECC, Hadoop, Hive, Amazon, Azure, Salesforce, SAP, entre outros

Bom entendimento de HDInsight, Databricks, Microsoft SQL Servers, bem como bancos de dados RDBMS e bancos de dados No-SQL.

Experiência com desenvolvimento em Spark, Hive QL e Python

Conhecimento de DW e dimensões que mudam lentamente, extrações de fluxo de dados ABAP, star schema, snowflake, OLTP e OLAP.

Experiência prática em plataformas em nuvem, especialmente Microsoft Azure, Amazon Web Services (AWS)e/ou Google Cloud Platform (GCP)

Inglês avançado

Atuar no design e desenvolvimento de Jobs ETL em ambientes de big data para processar petabytes de dados

Criar estruturas ou trabalhos reutilizáveis que possam ser usados em diferentes projetos

Desenvolver código para automatizar trabalhos usando serviços em real-time e codificação parametrizados para remover dependências

Gerenciar transformações de serviços de dados e Data Quality usando SQL: analisando dados redundantes e inconsistentes

Melhoria contínua e testes de desempenho: documenta questões relacionadas ao ETL e executa Análise de Causa Raiz, identificando oportunidades de otimização de melhoria de performance.