Vaga 100% remota na Sensedia, líder em soluções de API Management no Brasil e no mundo. O profissional será responsável por ingestão, transformação e disponibilização de dados em ecossistema Big Data, incluindo a implementação e alteração de pipelines, modelagem de dados e processos ETL. O cargo exige experiência com Pyspark, Python, SQL, processamento batch e stream, Azure Cloud, Databricks, Storage Account, CosmosDB (MongoDB), Data Factory e Azure DevOps, além de habilidades em análise de requisitos e tratamento de dados estruturados e semi-estruturados. Competências diferenciais incluem projetos de stream de dados, Kafka Confluent, otimização de performance de pipelines e mentoria de equipe, bem como proficiência em Inglês Técnico.
Especialista de Dados at Sensedia
Requisitos
Experiência
- Experiência em Pyspark, Python e SQL
- Experiência em leitura e escrita de formatos de dados Big Data
- Atuação em plataforma cloud Azure
- Experiência em Databricks, Storage Account, CosmosDB (MongoDB), Data Factory e Azure DevOps
- Experiência na ingestão, manipulação e tratamento de dados estruturados e semi‑estruturados
Habilidades
- Implementação e alteração de pipelines de dados
- Criação de modelagem de dados
- ETL (Extração, Transformação e Carga)
- Processamento batch e stream
- Análise de requisitos de negócio e técnicos
- Otimização de performance de pipelines
Idiomas
- Inglês Técnico
Responsabilidades
- Implementar e alterar pipelines de dados
- Criar modelagem de dados
- Extrair, transformar e carregar (ETL) dados de diferentes origens e formatos
Tecnologias
PysparkPythonSQLAzureDatabricksStorage AccountCosmosDB (MongoDB)Data FactoryAzure DevOpsKafka Confluent
See if your resume is ready for this job
See how our AI can optimize your resume and improve your chances for this role.