10698 - Engenheiro de dados Senior
Este é um cargo remoto. Oportunidade: Engenheiro de Dados Sênior Requisitos:
- Imprescindível experiência em Fabric.
- Domínio de:
- Modelagem de Dados (relacional e dimensional) - SQL (performance, tuning e otimização de queries)
- Experiência com ambientes em nuvem:
- Azure / Microsoft Fabric (Lakehouse, Warehouse, Modelo Semântico) - AWS (Glue, Lambda, S3)
- Desenvolvimento de pipelines com:
- Python - Manipulação de dados em JSON e formatos semi-estruturados
- Experiência com ingestão e organização de dados em Data Lake:
- Camadas: Landing Zone / Raw / Trusted - Conhecimento em infraestrutura como código: Terraform
- Conhecimento em Power BI (modelagem semântica e performance)
Desejáveis:
- Experiência sólida com ODI para construção de processos de carga no Teradata:
- Camadas: Stage, Relacional, Dimensional e Views
- Experiência com Purview (governança, catálogo e lineage)
- Conhecimento em GCP (BigQuery, Dataflow ou similares)
- Experiência com arquiteturas modernas:
- Lakehouse (Delta, Parquet, Iceberg)
- Experiência com:
- Orquestração de pipelines (Airflow, Glue Workflows, Fabric Pipelines) - Versionamento (Git) - Práticas de DataOps / CI-CD
- Conhecimento em:
- Monitoramento e observabilidade de pipelines o FinOps (gestão de custos em cloud)
- Perfil analítico com visão sistêmica (end-to-end) dos dados
- Senso de dono, autonomia e responsabilidade na execução
Responsabilidades principais:
- Realizar análises junto às áreas demandantes:
- Entender processos de negócio - Mapear fluxo de dados ponta a ponta
- Participar da definição da solução técnica:
- Arquitetura de ingestão, transformação e consumo de dados - Escolha das tecnologias mais adequadas
- Desenhar e evoluir modelos de dados:
- Estruturas dimensionais e analíticas - Camadas de dados (DW e Data Lake)
- Desenvolver e manter pipelines de dados:
- ODI (Teradata) - AWS (Glue, Lambda) o Fabric (pipelines modernos)
- Garantir: o Qualidade, confiabilidade e integridade dos dados
- Performance e otimização dos processos - Governança e rastreabilidade (lineage)
- Atuar na integração entre ambientes: o On-premise (Teradata) e Cloud (AWS / Fabric / GCP)
- Apoiar times de BI e Analytics: Disponibilização de dados para consumo (Power BI, modelos semânticos)
- Contribuir com boas práticas e evolução da plataforma de dados:
- Padronização - Melhoria contínua - Suporte técnico a times menos experientes Modelo de atuação: Remoto