Vaga 100% remota na Sensedia, líder em soluções de API Management no Brasil e no mundo. O profissional será responsável por ingestão, transformação e disponibilização de dados em ecossistema Big Data, incluindo a implementação e alteração de pipelines, modelagem de dados e processos ETL. O cargo exige experiência com Pyspark, Python, SQL, processamento batch e stream, Azure Cloud, Databricks, Storage Account, CosmosDB (MongoDB), Data Factory e Azure DevOps, além de habilidades em análise de requisitos e tratamento de dados estruturados e semi-estruturados. Competências diferenciais incluem projetos de stream de dados, Kafka Confluent, otimização de performance de pipelines e mentoria de equipe, bem como proficiência em Inglês Técnico.
Especialista de Dados en Sensedia
Más vacantes en SensediaRequisitos
Experiência
- Experiência em Pyspark, Python e SQL
- Experiência em leitura e escrita de formatos de dados Big Data
- Atuação em plataforma cloud Azure
- Experiência em Databricks, Storage Account, CosmosDB (MongoDB), Data Factory e Azure DevOps
- Experiência na ingestão, manipulação e tratamento de dados estruturados e semi‑estruturados
Habilidades
- Implementação e alteração de pipelines de dados
- Criação de modelagem de dados
- ETL (Extração, Transformação e Carga)
- Processamento batch e stream
- Análise de requisitos de negócio e técnicos
- Otimização de performance de pipelines
Idiomas
- Inglês Técnico
Responsabilidades
- Implementar e alterar pipelines de dados
- Criar modelagem de dados
- Extrair, transformar e carregar (ETL) dados de diferentes origens e formatos
Tecnologias
PysparkPythonSQLAzureDatabricksStorage AccountCosmosDB (MongoDB)Data FactoryAzure DevOpsKafka Confluent
Descubre si tu currículum está listo para esta vacante
Mira cómo nuestra IA puede optimizar tu currículum y aumentar tus chances en este puesto.