Responsabilidades e atribuições
Procuramos um(a) Engenheiro(a) de Dados para assumir 100% da sustentação, evolução e governança do nosso Data Lake no Google Cloud / BigQuery
Você será o especialista responsável por toda a esteira de dados de ponta a ponta: desde a ingestão das fontes originais (MySQL, APIs e arquivos) para a Camada Bronze , higienização e integração na Camada Prata , até a modelagem dimensional da Camada Ouro e disponibilização de relatórios no Power BI
Principais Responsabilidades - Inovação e Ingestão (Camada Bronze): Desenvolver, monitorar e otimizar rotinas de ingestão via Python (APIs/extratares) e integrações nativas do BigQuery (Datastream, BQ Federated Queries / Cloud Storage / MySQL). - Tratamento e Qualidade (Camada Prata): Criar regras de higienização, padronização e garantia de integridade de dados na Prata. - Modelagem e Performance (Camada Ouro): Estruturar tabelas Fato e Dimensão (Star Schema / Kimball) otimizadas para consumo de BI, aplicando técnicas de particionamento e clusterização. - Versionamento e Sustentação: Assumir e manter os repositórios de código no GitHub , garantindo rastreabilidade, documentação e boas práticas de implantação. - Consumo e BI: Estruturar e otimizar conexões do Power BI com o BigQuery, desenvolvendo modelos de dados e DAX performáticos
Requisitos Obrigatórios (Hard Skills) - Google BigQuery / GCP: Domínio em SQL analítico avançado, particionamento, clusterização, conectores nativos e gerenciamento de custos de consulta. - Python para Dados: Experiência com automação de scripts de extratação/ingestão, integração com APIs REST e manipulação de payloads JSON/DataFrames. - Bancos de Dados Origem: Experiência em extração e consultas de bancos relacionais, como MySQL . - Arquitetura Medallion & Data Warehousing: Experiência prática construindo pipelines completos (Bronze, Prata e Ouro) e modelagem dimensional. - Controle de Versão: Domínio no uso do Git / GitHub para versionamento de projetos e scripts. - Power BI: Experiência na criação de dashboards, modelagem de dados e publicação de relatórios
Diferenciais (Será um plus) - Conhecimento em Cloud Storage e permissões IAM no Google Cloud Platform. - Experiência com dbt (data build tool) ou orquestradores de fluxo (Cloud Composer, Airflow, Prefect). - Conhecimento em rotinas de CDC (Change Data Capture) do MySQL para o BigQuery
Perfil Comportamental (Soft Skills) - Autonomia e Visão End-to-End: Capacidade de diagnosticar falhas na ingestão até o relatório final sem necessitar de microgerenciamento. - Perfil Resolutivo: Habilidade para assumir código herdado de terceiros, reorganizar repositórios e documentar o ambiente. - Comunicação Executiva: Facilidade para entender demandas do negócio e traduzir em pipelines de dados eficientes
Modelo de Contratação: PJ (Pessoa Jurídica) Regime: Remoto / Híbrido
