Job Description
Estamos buscando uma pessoa Engenheira de Dados para atuar na construção e otimização das nossas pipelines de dados. Você será responsável por garantir que o fluxo de informações seja confiável, escalável e que os dados estejam prontos para o consumo de BI e Inteligência Artificial. O foco será total no ecossistema Google Cloud, transformando dados brutos em ativos de negócio.
Principais Responsabilidades
- Desenvolver e manter pipelines de ETL/ELT (Batch e Streaming) utilizando o ecossistema GCP.
- Modelagem de dados: Desenvolver e otimizar tabelas no BigQuery, garantindo performance e controle de custos (particionamento e clusterização).
- Orquestração de fluxos: Criar e monitorar workflows complexos utilizando Cloud Composer (Airflow).
- Integração de fontes: Consumir dados de APIs, bancos relacionais e sistemas legados para alimentar o Data Lake/Lakehouse.
- Garantir a q...