A Daki nasceu para revolucionar o delivery de mercado. O que antes alguém recebia em horas ou dias, agora recebe em minutos!
Mais que entregar rápido, buscamos entregar uma experiência incrível para os nossos clientes. Buscamos aquele "UAU" de quando o cliente recebe muito antes do que esperava.
E tudo começa muito antes da montagem do pedido, na verdade, começa bem aqui.
Estamos buscando uma pessoa Engenheira de Dados habilidosa e motivada para se juntar à nossa equipe dinâmica. Como Pessoa Engenheira de Dados, você desempenhará um papel crucial no projeto, desenvolvimento e manutenção da infraestrutura e dos fluxos de dados que impulsionam os processos de tomada de decisão baseados em dados de nossa organização. Você colaborará com equipes multidisciplinares, incluindo cientistas de dados, analistas e engenheiros de software, para garantir o fluxo contínuo de dados provenientes de várias fontes, possibilitando o processamento, transformação, armazenamento e recuperação eficientes dos dados.
Responsabilidades:
1. Desenvolvimento de Fluxos de Dados:
- Projetar, desenvolver e manter fluxos de dados escaláveis e confiáveis para coleta, processamento e transformação de dados de diversas fontes, incluindo bancos de dados, APIs e serviços externos.
- Implementar processos ETL (Extração, Transformação, Carga) para garantir a precisão e consistência dos dados em diferentes sistemas.
- Otimizar os fluxos de dados em termos de desempenho, eficiência e qualidade dos dados.
2. Modelagem e Arquitetura de Dados:
- Colaborar com arquitetos de dados e partes interessadas para projetar e implementar modelos de dados que atendam aos requisitos comerciais e às necessidades analíticas.
- Garantir a adequada particionamento de dados, indexação e design de esquema para consultas e relatórios eficientes.
- Avaliar e integrar novas tecnologias e ferramentas de dados para aprimorar a infraestrutura de dados.
3. Qualidade e Governança de Dados:
- Implementar verificações de qualidade de dados e mecanismos de monitoramento para identificar e resolver anomalias e problemas nos dados.
- Aplicar políticas de governança e segurança de dados para manter a integridade dos dados e conformidade com regulamentações do setor.
4. Integração de Dados:
- Integrar fontes de dados de terceiros nos fluxos de dados e sistemas existentes, garantindo compatibilidade e consistência.
- Desenvolver e manter fluxos de trabalho de integração de dados para facilitar a troca de dados entre sistemas internos e externos.
5. Otimização de Desempenho:
- Identificar e resolver gargalos de desempenho no processamento e armazenamento de dados, otimizando a infraestrutura geral de engenharia de dados.
- Monitorar e solucionar falhas nos fluxos de dados, garantindo uma resolução rápida para minimizar interrupções.
6. Colaboração e Documentação:
- Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer o suporte necessário de engenharia de dados.
- Documentar fluxos de dados, processos e melhores práticas para garantir a compartilhamento de conhecimento e manutenção do código.
Qualificações:
- Graduação em Ciência da Computação, Engenharia ou área relacionada (desejável).
- Experiência comprovada como Engenheiro de Dados ou função similar, com um histórico sólido de projeto e implementação de fluxos de dados complexos.
- Proficiência em linguagens de programação como Python e SQL.
- Conhecimentos com ferramentas e tecnologias de integração de dados (por exemplo, Apache Spark, Apache Kafka, frameworks ETL).
- Sólido entendimento de bancos de dados relacionais e NoSQL, conceitos de data warehousing e técnicas de modelagem de dados.
- Familiaridade com plataformas de nuvem - Google Cloud) e orquestradores como Apache Airflow (GCP Cloud Composer)
- Habilidades sólid
Número de vagas: 1
Tipo de contrato e Jornada: Efetivo – CLT - Período Integral
Área Profissional: Especialista em Informática, TI, Telecomunicações - Processamento de Dados
Exigências
Escolaridade Mínima: Ensino Superior
Denunciar Vaga