Sobre o Desafio:
Você será responsável pela construção, sustentação e otimização de pipelines de dados eficientes e escaláveis. Buscamos um profissional com perfil analítico, focado em processamento e integração de dados em tempo real e em lote, garantindo alta disponibilidade e performance para a tomada de decisão.
Principais Responsabilidades:
Desenvolver, gerenciar e otimizar pipelines de integração e processamento de dados.
Atuar com arquiteturas de processamento em tempo real (Streaming) e soluções Open Source (OSS).
Construir consultas complexas e modelagem de dados utilizando SQL.
Garantir a qualidade, integridade e eficiência no fluxo de dados entre diferentes plataformas e ambientes.
Apoiar na documentação técnica dos fluxos e arquiteturas desenvolvidas.
Requisitos Obrigatórios:
Experiência mínima de 3 anos em Engenharia / Análise de Dados.
Domínio em SQL e criação de pipelines de dados (ETL / ELT).
Vivência sólida com processamento e integração de dados em ambientes de grande volume.
Conhecimento prático em ferramentas de Streaming e tecnologias OSS (Apache Flink).
Diferenciais que saltam aos olhos:
Conhecimentos em arquiteturas de dados em nuvem (Cloud Providers).
Experiência prévia em projetos pontuais de consultoria ou alocação ágil.
3+ years in data engineering/analysis; strong SQL and ETL/ELT pipeline development; experience with large-volume data processing; practical knowledge of streaming tools and OSS technologies like Apache Flink.
Key Responsibilities
- building data pipelines
- optimizing data processing
- modeling data
Skills & Tools
SQL, Apache Flink
Job Details
- Category: Data and Analytics
- Seniority: Mid Level
- Commitment: Full Time
- Workplace: Remote — Brazil
- Languages: Portuguese
About PDGIT
An IT company focused on data engineering and integration solutions. — Industry: Information Technology