Data Engineer

A Daki nasceu para revolucionar o delivery de mercado. O que antes alguém recebia em horas ou dias, agora recebe em minutos!

Mais que entregar rápido, buscamos entregar uma experiência incrível para os nossos clientes. Buscamos aquele “UAU” de quando o cliente recebe muito antes do que esperava.

E tudo começa muito antes da montagem do pedido, na verdade, começa bem aqui.

Estamos buscando uma pessoa Engenheira de Dados habilidosa e motivada para se juntar à nossa equipe dinâmica. Como Pessoa Engenheira de Dados, você desempenhará um papel crucial no projeto, desenvolvimento e manutenção da infraestrutura e dos fluxos de dados que impulsionam os processos de tomada de decisão baseados em dados de nossa organização. Você colaborará com equipes multidisciplinares, incluindo cientistas de dados, analistas e engenheiros de software, para garantir o fluxo contínuo de dados provenientes de várias fontes, possibilitando o processamento, transformação, armazenamento e recuperação eficientes dos dados.

Responsabilidades:

1. Desenvolvimento de Fluxos de Dados:

– Projetar, desenvolver e manter fluxos de dados escaláveis e confiáveis para coleta, processamento e transformação de dados de diversas fontes, incluindo bancos de dados, APIs e serviços externos.

– Implementar processos ETL (Extração, Transformação, Carga) para garantir a precisão e consistência dos dados em diferentes sistemas.

– Otimizar os fluxos de dados em termos de desempenho, eficiência e qualidade dos dados.

2. Modelagem e Arquitetura de Dados:

– Colaborar com arquitetos de dados e partes interessadas para projetar e implementar modelos de dados que atendam aos requisitos comerciais e às necessidades analíticas.

– Garantir a adequada particionamento de dados, indexação e design de esquema para consultas e relatórios eficientes.

– Avaliar e integrar novas tecnologias e ferramentas de dados para aprimorar a infraestrutura de dados.

3. Qualidade e Governança de Dados:

– Implementar verificações de qualidade de dados e mecanismos de monitoramento para identificar e resolver anomalias e problemas nos dados.

– Aplicar políticas de governança e segurança de dados para manter a integridade dos dados e conformidade com regulamentações do setor.

4. Integração de Dados:

– Integrar fontes de dados de terceiros nos fluxos de dados e sistemas existentes, garantindo compatibilidade e consistência.

– Desenvolver e manter fluxos de trabalho de integração de dados para facilitar a troca de dados entre sistemas internos e externos.

5. Otimização de Desempenho:

– Identificar e resolver gargalos de desempenho no processamento e armazenamento de dados, otimizando a infraestrutura geral de engenharia de dados.

– Monitorar e solucionar falhas nos fluxos de dados, garantindo uma resolução rápida para minimizar interrupções.

6. Colaboração e Documentação:

– Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer o suporte necessário de engenharia de dados.

– Documentar fluxos de dados, processos e melhores práticas para garantir a compartilhamento de conhecimento e manutenção do código.

Qualificações:

– Graduação em Ciência da Computação, Engenharia ou área relacionada (desejável).

– Experiência comprovada como Engenheiro de Dados ou função similar, com um histórico sólido de projeto e implementação de fluxos de dados complexos.

– Proficiência em linguagens de programação como Python e SQL.

– Conhecimentos com ferramentas e tecnologias de integração de dados (por exemplo, Apache Spark, Apache Kafka, frameworks ETL).

– Sólido entendimento de bancos de dados relacionais e NoSQL, conceitos de data warehousing e técnicas de modelagem de dados.

– Familiaridade com plataformas de nuvem – Google Cloud) e orquestradores como Apache Airflow (GCP Cloud Composer)

– Habilidades sólidas de resolução de problemas e capacidade de trabalhar de maneira eficaz em um ambiente de equipe colaborativo.

– Excelentes habilidades de comunicação e capacidade de explicar conceitos técnicos para partes interessadas não técnicas.

Informações adicionais:
Estamos em crescimento: Nosso modelo de trabalho é híbrido, permitindo que o Dakier atue de forma remota e presencial;
Somos Modernos: por meio de um cartão de crédito da bandeira Mastercard, você recebe o vale refeição, dando mais liberdade ao Dakier de como utilizar;
Transporte: realizamos o depósito direto no VT de acordo com a necessidade de passagem do Dakier até a unidade;
Saúde: Hoje disponibilizamos para o nosso Dakier a Assistência Médica e Odontológica, e também o Total Pass;
Mimo: Nossos Dakier tem desconto de 10% em todas as compras feitas em nosso do APP.