Engenheiro(a) de Dados Pleno at Matera

Brasil

Apply
More jobs at Matera

Engenheiro(a) de Dados Pleno na Matera, responsável por transformar dados do core bancário em decisões estratégicas para o mercado financeiro. O profissional desenvolverá e otimizará pipelines de dados (ETL/ELT) robustos e escaláveis com Python e PySpark, construirá integrações via APIs REST, gerenciará o ciclo de vida das aplicações com Docker e Kubernetes, colaborará com cientistas de dados no desenvolvimento de infraestrutura para IA e buscará constantemente soluções inovadoras para desafios de negócio.

Requisitos

Educação

  • Superior completo em Tecnologia da Informação
  • Superior completo em Engenharia da Computação
  • Superior completo em Ciência da Computação
  • Superior completo em Análise de Sistemas

Experiência

  • Sólida experiência com SQL
  • Proficiência em Python
  • Experiência com PySpark
  • Experiência com APIs REST
  • Experiência com Cloud services (AWS, Azure, GCP)
  • Experiência com Docker e Kubernetes

Habilidades

  • Python
  • PySpark
  • SQL
  • REST APIs
  • Docker
  • Kubernetes
  • GIT
  • AWS
  • Azure
  • GCP
  • S3
  • Glue
  • BigQuery
  • Databricks
  • Kafka
  • FastAPI
  • CI/CD
  • Langfuse
  • IA

Idiomas

  • Portuguese

Responsabilidades

  • Desenvolver e otimizar pipelines de dados (ETL/ELT) robustos e escaláveis com Python e PySpark, garantindo a qualidade, integridade e disponibilidade dos dados
  • Construir e manter integrações via APIs REST para conectar plataformas a diversas fontes de dados internas e externas
  • Gerenciar o ciclo de vida de aplicações utilizando Docker e Kubernetes, realizando deploy e monitoramento dos pipelines e serviços
  • Colaborar diretamente com Cientistas de Dados na construção da infraestrutura de dados para agentes de IA, desenvolvendo rotinas que alimentam e processam informações para soluções de inteligência artificial
  • Atuar com autonomia e proatividade, questionando o "porquê" e propondo soluções inovadoras para desafios de negócio
  • Desenvolver bases para a próxima geração de soluções financeiras inteligentes

Tecnologias

PythonPySparkSQLREST APIsDockerKubernetesGITAWSAzureGCPS3GlueBigQueryDatabricksKafkaFastAPICI/CDLangfuseIA

Share job

See if your resume is ready for this job

See how our AI can optimize your resume and improve your chances for this role.