O quê?
Onde?

Data Engineer

3,8
53 avaliações
São Paulo - SP
Salário a combinar
Híbrido
Hoje

A Daki nasceu para revolucionar o delivery de mercado. O que antes alguém recebia em horas ou dias, agora recebe em minutos! Mais que entregar rápido, buscamos entregar uma experiência incrível para os nossos clientes. Buscamos aquele "UAU" de quando o cliente recebe muito antes do que esperava. E tudo começa muito antes da montagem do pedido, na verdade, começa bem aqui. Estamos buscando uma pessoa Engenheira de Dados habilidosa e motivada para se juntar à nossa equipe dinâmica. Como Pessoa Engenheira de Dados, você desempenhará um papel crucial no projeto, desenvolvimento e manutenção da infraestrutura e dos fluxos de dados que impulsionam os processos de tomada de decisão baseados em dados de nossa organização. Você colaborará com equipes multidisciplinares, incluindo cientistas de dados, analistas e engenheiros de software, para garantir o fluxo contínuo de dados provenientes de várias fontes, possibilitando o processamento, transformação, armazenamento e recuperação eficientes dos dados. Responsabilidades: 1. Desenvolvimento de Fluxos de Dados: - Projetar, desenvolver e manter fluxos de dados escaláveis e confiáveis para coleta, processamento e transformação de dados de diversas fontes, incluindo bancos de dados, APIs e serviços externos. - Implementar processos ETL (Extração, Transformação, Carga) para garantir a precisão e consistência dos dados em diferentes sistemas. - Otimizar os fluxos de dados em termos de desempenho, eficiência e qualidade dos dados. 2. Modelagem e Arquitetura de Dados: - Colaborar com arquitetos de dados e partes interessadas para projetar e implementar modelos de dados que atendam aos requisitos comerciais e às necessidades analíticas. - Garantir a adequada particionamento de dados, indexação e design de esquema para consultas e relatórios eficientes. - Avaliar e integrar novas tecnologias e ferramentas de dados para aprimorar a infraestrutura de dados. 3. Qualidade e Governança de Dados: - Implementar verificações de qualidade de dados e mecanismos de monitoramento para identificar e resolver anomalias e problemas nos dados. - Aplicar políticas de governança e segurança de dados para manter a integridade dos dados e conformidade com regulamentações do setor. 4. Integração de Dados: - Integrar fontes de dados de terceiros nos fluxos de dados e sistemas existentes, garantindo compatibilidade e consistência. - Desenvolver e manter fluxos de trabalho de integração de dados para facilitar a troca de dados entre sistemas internos e externos. 5. Otimização de Desempenho: - Identificar e resolver gargalos de desempenho no processamento e armazenamento de dados, otimizando a infraestrutura geral de engenharia de dados. - Monitorar e solucionar falhas nos fluxos de dados, garantindo uma resolução rápida para minimizar interrupções. 6. Colaboração e Documentação: - Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer o suporte necessário de engenharia de dados. - Documentar fluxos de dados, processos e melhores práticas para garantir a compartilhamento de conhecimento e manutenção do código. Qualificações: - Graduação em Ciência da Computação, Engenharia ou área relacionada (desejável). - Experiência comprovada como Engenheiro de Dados ou função similar, com um histórico sólido de projeto e implementação de fluxos de dados complexos. - Proficiência em linguagens de programação como Python e SQL. - Conhecimentos com ferramentas e tecnologias de integração de dados (por exemplo, Apache Spark, Apache Kafka, frameworks ETL). - Sólido entendimento de bancos de dados relacionais e NoSQL, conceitos de data warehousing e técnicas de modelagem de dados. - Familiaridade com plataformas de nuvem - Google Cloud) e orquestradores como Apache Airflow (GCP Cloud Composer) - Habilidades sólid

Número de vagas: 1

Tipo de contrato e Jornada: Efetivo – CLT - Período Integral

Área Profissional: Especialista em Informática, TI, Telecomunicações - Processamento de Dados

Assine a Conta Premium agora!
Exigências
  • Escolaridade Mínima: Ensino Superior
Denunciar Vaga

Outras vagas similares