Pessoa Consultora Data Engineer
FSB Holding · BR ·
- Work mode
- Remote
- Category
- Data engineering
FSB Holding · BR ·
Jusbrasil · Remoto
Experian · São Paulo, br
CONEXA · Rio de Janeiro, Rio de Janeiro, Brasil
Jusbrasil · Brasil
Data Engineer consultant at FSB Building and evolving data pipelines, transformations, and physical models across Bronze/Silver/Gold layers, plus data quality, cataloging, lineage, and cloud cost/performance optimization. Core stack includes SQL, Python, orchestration (Airflow/Dagster), dbt, and cloud, in a hybrid São Paulo setup.
Na FSB Holding, sua excelência faz a nossa reputação. E vice-versa.
Buscamos uma Pessoa Consultora Data Engineer para atuar na construção e evolução de pipelines, transformações e modelos de dados, contribuindo para uma plataforma cada vez mais confiável, escalável e eficiente.
Essa pessoa terá atuação próxima às diferentes etapas da jornada dos dados — da ingestão e transformação à qualidade, documentação, monitoramento e otimização — utilizando tecnologias de engenharia de dados e cloud.
Desenvolver e manter pipelines de ingestão batch e streaming das fontes corporativas (ERPs como Protheus, sistemas como Fluig, APIs e arquivos) para a camada Bronze.
Construir transformações e modelagem física de dados nas camadas Silver e Gold, aplicando regras de qualidade, deduplicação e padronização.
Implementar e monitorar testes de qualidade de dados alinhados às cinco dimensões do Farol de Qualidade (Completude, Acurácia, Consistência, Tempestividade e Unicidade), garantindo cumprimento de SLAs.
Instrumentar métricas e observabilidade dos pipelines (execução, falhas, latência) e configurar alertas.
Catalogar tabelas e datasets no catálogo de dados corporativo, documentando linhagem e metadados.
Colaborar com Analytics Engineers e áreas de negócio para garantir dados confiáveis e disponíveis para consumo analítico.
Otimizar performance, custo e ciclo de vida dos dados (particionamento, retenção, arquivamento) em ambiente de nuvem (GCP).
Participar dos rituais ágeis do time (planning, dailies, retros) e contribuir para a evolução das práticas de engenharia de dados.
Construção de pipelines de ingestão batch e streaming a partir de fontes corporativas (ERP, BPM, ferramentas corporativas, APIs, planilhas, arquivos).
Experiência com GCP: BigQuery, Cloud Storage, Dataflow, Pub/Sub e/ou Cloud Composer (Airflow gerenciado).
Construção física das camadas Bronze, Silver e Gold como tabelas materializadas (não views), com deduplicação, padronização e regras de negócio.
Modelagem de dados dimensional e/ou normalizada, com versionamento de código (Git).
Implementação de testes de qualidade alinhados às cinco dimensões de Qualidade.
Definição e cumprimento de SLAs de disponibilidade e atualização dos dados entregues, com ferramentas como Great Expectations, dbt tests, Soda ou Pandera.
Monitoramento de pipelines (métricas de execução, falhas, latência) e configuração de alertas.
Documentação de métricas operacionais dos pipelines para o time de engenharia e stakeholders.
Otimização de custo dos pipelines e do armazenamento em nuvem (FinOps).
Gestão do ciclo de vida dos dados: particionamento, retenção e arquivamento.
Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.
Experiência sólida com SQL e ao menos uma linguagem de programação para engenharia de dados, preferencialmente Python.
Conhecimento de orquestração de pipelines (Airflow, Dagster ou similar).
Desejável: conhecimento de dbt, esteiras de CI/CD para dados (DataOps) e conceitos de governança de dados (catálogo, LGPD).
Forte capacidade de alinhamento com stakeholders de diferentes áreas e níveis, técnicos e de negócio.
Autogerenciável, com senso de priorização e organização para lidar com múltiplas demandas simultâneas.
Vivência prática em metodologias ágeis (Scrum, Kanban ou modelo híbrido).
Perfil dinâmico e adaptável a mudanças de prioridade e contexto.
Forte capacidade de resolução de problemas, com raciocínio estruturado e orientado a dados.
Comunicação clara, colaboração e proatividade no dia a dia com o time e com outras áreas.
Experiência prévia em ambientes de holding ou grupos com múltiplas marcas.
Conhecimento de frameworks de governança como DAMA-DMBOK.
Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.
100% remoto.
Esta é uma vaga também para Pessoas com Deficiência (PCD).
Nº do Fluig: 1247643
Lina Open X