פורסמה לפני שבועיים
Data Engineer (Databricks) | SR (Remote)
- מרחוק
- משרה מלאה
- Airflow
- AWS
- Azure
- BigQuery
תיאור המשרה
- Atuar na definição e evolução de arquiteturas de dados utilizando Databricks, garantindo a otimização de pipelines, a eficiência do processamento e a resolução de problemas técnicos de alta complexidade.
- Contrução e manutenção de pipelines de dados escaláveis e confiáveis, utilizando tecnologias modernas de processamento distribuído para garantir a ingestão, transformação e disponibilização de dados com qualidade e performance.
- Trabalhar com Apache Spark, Airflow, Kafka, dbt, além de bancos SQL/NoSQL (PostgreSQL, MongoDB, Cassandra) e plataformas cloud (Databricks, AWS Glue, BigQuery).
- Projetar, definir e implementar arquiteturas de dados escaláveis, utilizando o modelo Lakehouse e a arquitetura Medallion (Bronze, Silver e Gold).
- Implementar soluções de processamento de dados em batch e streaming, incluindo CDC e Structured Streaming.
- Desenvolver e orquestrar processos de ingestão e integração de dados utilizando Azure Data Factory (ADF), Auto Loader e Lakeflow.
- Implementar práticas de governança, segurança e controle de acesso aos dados por meio do Unity Catalog.
- Desenvolver APIs REST, integrações e automações utilizando Python.
- Implementar processos de CI/CD, versionamento e automação de deploy utilizando Git e Databricks Workflows.
- Domínio avançado de Databricks, PySpark, Spark SQL e Delta Lake.
- Experiência sólida com DLT / Lakeflow Spark Declarative Pipelines, CDC e Structured Streaming.
- Experiência prática com Liquid Clustering, Auto Loader e otimização de tabelas Delta.
- Domínio de Unity Catalog, governança, segurança, linhagem e controle de acesso.
- Experiência na definição e implementação de Arquitetura de Dados, incluindo modelo Lakehouse e arquitetura Medallion (Bronze, Silver e Gold).
- Experiência prática com Azure Data Factory (ADF) para orquestração, ingestão e integração de dados.
- Experiência em Desenvolvimento de APIs (REST) e programação avançada em Python para construção de integrações, microsserviços e automações.
- Conhecimento avançado em Spark Performance Tuning, Photon, particionamento, shuffle e análise de planos de execução.
- Experiência com Databricks Workflows, CI/CD, Git e Declarative Automation Bundles.
- Capacidade de otimizar workloads, dimensionar recursos computacionais e reduzir custos de processamento.
- Experiência em observabilidade, monitoramento e sustentação de pipelines em produção.
- Capacidade de atuar como referência técnica, orientar profissionais e estabelecer boas práticas de engenharia de dados.
- Certificações: Databricks Certified Data Engineer Associate; Databricks Certified Data Engineer Professional.
Benefícios
- Vale-alimentação e/ou vale-refeição;
- Plano de saúde e plano odontológico;
- Plano de saúde para o seu pet;
- Auxílio home office (para vagas remotas);
- Kit de boas-vindas no onboarding;
- Seguro de vida;
- Zenklub, com acompanhamento psicológico e nutricional;
- TotalPass;
- Programa de Certificações e Capacitação Contínua com parceiros (Adobe, Anthropic, AWS, Google, Microsoft, Salesforce);
- Parcerias e descontos para o seu desenvolvimento;
- Acesso ao conteúdo UOL;
- Kit maternidade;
- Licença maternidade e paternidade estendidas;
- Programa de indicações.
עוד משרות ב-Compass UOL
Databricks Data Engineer | Senior (Remote)
Compass UOL מרחוק · ברזיל 🇧🇷
משרות נוספות ב-ברזיל
Operador de Caixa - Vendedor - Operador de loja
Randstad - Matriz חברת השמה קמפו גראנדה, מאטו גרוסו דו סול, ברזיל🇧🇷
Operador de loja - Vendedores - Operadores de caixa
Randstad - Matriz חברת השמה Maringá, פרנה, ברזיל🇧🇷
Vendedor de Loja de Shopping
Luandre Servicos Temporarios Ltda. (C-I) חברת השמה בלו הוריזונטה, מינאס ז'ראיס, ברזיל🇧🇷
AUXILIAR DE LOJA - MAXI SHOPPING JUNDIAÍ
Luandre Servicos Temporarios Ltda. (C-I) חברת השמה Jundiaí, סאו פאולו, ברזיל🇧🇷
ANALISTA DE LOGÍSTICA (VAGA TEMPORÁRIA - 1 MÊS)
Hass & Arruda Ltda ברזיל 🇧🇷
FISCAL DE PREVENÇÃO E PERDAS CARREFOUR ANCHIETA
RIT - Grupo Carrefour Brasil סאו פאולו, סאו פאולו, ברזיל🇧🇷
Repositor/a Externo (Eventual) Paraná – req200383
ManpowerGroup ברזיל 🇧🇷
Analista de Suporte Operacional Logístico
Enfok סאו פאולו, סאו פאולו, ברזיל🇧🇷
OPERADOR DE LOJA DE HIPER/SUPER - DIGAI 2026
RIT - Grupo Carrefour Brasil רסיפה, פרנמבוקו, ברזיל🇧🇷
Assistente de Suporte Operacional Logístico | Alphaville
Enfok סאו פאולו, סאו פאולו, ברזיל🇧🇷
Auxiliar de Cozinha - Restaurante
RHF Talentos Matriz בלנאריו קמבוריו, סנטה קטרינה, ברזיל🇧🇷
Pizzaiolo
RHF Talentos Matriz בלנאריו קמבוריו, סנטה קטרינה, ברזיל🇧🇷
Atendente de Loja - Zona Oeste (SEM EXPERIÊNCIA)
Rede Integrada de Lojas de Conveniencia E Proximidade S.A. סאו פאולו, סאו פאולו, ברזיל🇧🇷