Engenheiro(a) de dados GCP- Pleno

CWI Software

Brazil

Description

Responsabilidades:

• Implementar pipelines de dados eficientes e escaláveis, adequados a diferentes cenários de negócio (Data Lake, Data Warehouse, Data Mart).

• Criar e manter pipelines de ingestão e transformação de dados em ambientes GCP (BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage).

• Atuar junto a áreas de negócio para traduzir requisitos em modelos de dados claros e consistentes.

• Assegurar qualidade, governança, segurança e compliance em todo o ciclo de vida dos dados.

• Monitorar e otimizar custos e performance em nuvem.

Desenvolver dvry utilizando ferramenta DBT

Requisitos:

• Experiência em modelagem de dados (conceitual, lógica e física), especialmente em ambientes analíticos.

• Conhecimento profundo em SQL e boas práticas de design para Data Warehouse/BigQuery e Modelagem de dados

• Experiência com linguagens como Python e Spark para processamento de dados.

• Domínio do ecossistema GCP (BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage, Composer).

• Vivência em práticas de CI/CD, versionamento e automação de pipelines.

• Conhecimento de arquiteturas modernas de dados (data mesh, lakehouse, streaming).

Diferenciais importantes:

• Airflow

• DBT