O Itaú, banco líder na América Latina, busca um Engenheiro de Dados Sênior para projetar e desenvolver pipelines de dados em larga escala usando Apache Spark e PySpark, construir soluções de ingestão, transformação e exposição de dados em arquitetura distribuída baseada na plataforma AWS, apoiar decisões técnicas e implementar práticas de CI/CD. O cargo é híbrido e oferece benefícios como vale-transporte, alimentação, plano médico, odontológico, seguro de vida, PLR, previdência privada, descontos em produtos financeiros, licença maternidade e paternidade estendida, auxílio creche, incentivo a estudos, Wellhub ou TotalPass, acesso a clubes de lazer, entre outras vantagens.
Analista de Engenharia de Dados Sênior en Itaú Unibanco
Híbrido - São Paulo, São Paulo, Brasil
Más vacantes en Itaú UnibancoRequisitos
Habilidades
- Apache Spark
- PySpark
- AWS stack (S3, Glue, Athena, Redshift, Lake Formation, Lambda)
- modelagem de dados para lakes e warehouses
- Airflow, Step Functions
- SQL
- Python
- monitoramento e observabilidade de pipelines
Responsabilidades
- Projetar e desenvolver pipelines de dados em larga escala, com uso extensivo de Apache Spark e PySpark, otimizando performance, custo e robustez.
- Construir soluções de ingestão, transformação e exposição de dados em arquitetura distribuída, com forte uso de serviços AWS: S3, Glue, Athena, Redshift, Lambda, Step Functions, EMR, Lake Formation.
- Atuar na criação e evolução de data products governados, interoperáveis e prontos para consumo no modelo de data mesh.
- Apoiar decisões técnicas, revisões de arquitetura e disseminação de boas práticas entre squads.
- Implantar práticas robustas de CI/CD para pipelines de dados, com controle de versionamento e automação de infraestrutura como código (IaC), utilizando Terraform.
- Trabalhar em estreita parceria com engenheiros de analytics, squads de negócio e times de governança.
Tecnologias
Apache SparkPySparkAWS S3AWS GlueAWS AthenaAWS RedshiftAWS Lake FormationAWS LambdaAirflowStep FunctionsTerraform
Descubre si tu currículum está listo para esta vacante
Mira cómo nuestra IA puede optimizar tu currículum y aumentar tus chances en este puesto.