Estamos em busca de Data Engineers Plenos para se juntarem à nossa equipe de dados. Se você é apaixonado por construir pipelines de dados robustos, escaláveis e eficientes, e tem uma expertise sólida com o ecossistema do Google Cloud Platform (GCP), essa vaga é para você! 🚀💜
Data Engineer Pleno
São Paulo, SP
Requisitos
Experiência
- Data Engineer experience 2+ years
- Versionamento de código, CI/CD e testes de pipelines de dados
Habilidades
- Python
- SQL
- GCP services
- Dataflow
- Dataproc
- Cloud Functions
- BigQuery
- Cloud Storage
- Cloud Pub/Sub
- Cloud Composer
- Apache Airflow
- Data warehouse
- Data lake
- Modelagem de dados (Kimball)
Responsabilidades
- Projetar, construir e manter pipelines de dados ETL/ELT para ingestão de dados de diversas fontes.
- Atuar de forma autônoma no desenvolvimento de pipelines e otimização de processos.
- Desenvolver soluções de processamento de dados em larga escala usando tecnologias como Dataflow, Dataproc e Cloud Functions.
- Otimizar e gerenciar nossos data warehouses e data lakes, incluindo o BigQuery.
- Implementar boas práticas de engenharia de dados, incluindo monitoramento, alertas e governança de dados.
- Colaborar com times de Data Scientists, Analytics Engineers e Analistas de Negócio para entender as necessidades e fornecer as soluções de dados necessárias.
- Participar de revisões de código e contribuir para a melhoria contínua dos nossos processos e arquiteturas.
Tecnologias
DataflowDataprocCloud FunctionsBigQueryCloud StorageCloud Pub/SubCloud ComposerApache AirflowLooker StudioVertex AIGoogle AgentspaceTerraform
See if your resume is ready for this job
See how our AI can optimize your resume and improve your chances for this role.