Pular para o conteúdo
Início » Data Engineer – São Paulo

Data Engineer – São Paulo

  • Período Integral
  • São Paulo

DAKI

A Daki nasceu para revolucionar o delivery de mercado. O que antes alguém recebia em horas ou dias, agora recebe em minutos! Mais que entregar rápido, buscamos entregar uma experiência incrível para os nossos clientes. Buscamos aquele “UAU” de quando o cliente recebe muito antes do que esperava. E tudo começa muito antes da montagem do pedido, na verdade, começa bem aqui. Estamos buscando uma pessoa Engenheira de Dados habilidosa e motivada para se juntar à nossa equipe dinâmica. Como Pessoa Engenheira de Dados, você desempenhará um papel crucial no projeto, desenvolvimento e manutenção da infraestrutura e dos fluxos de dados que impulsionam os processos de tomada de decisão baseados em dados de nossa organização. Você colaborará com equipes multidisciplinares, incluindo cientistas de dados, analistas e engenheiros de software, para garantir o fluxo contínuo de dados provenientes de várias fontes, possibilitando o processamento, transformação, armazenamento e recuperação eficientes dos dados. Responsabilidades: 1. Desenvolvimento de Fluxos de Dados: – Projetar, desenvolver e manter fluxos de dados escaláveis e confiáveis para coleta, processamento e transformação de dados de diversas fontes, incluindo bancos de dados, APIs e serviços externos. – Implementar processos ETL (Extração, Transformação, Carga) para garantir a precisão e consistência dos dados em diferentes sistemas. – Otimizar os fluxos de dados em termos de desempenho, eficiência e qualidade dos dados. 2. Modelagem e Arquitetura de Dados: – Colaborar com arquitetos de dados e partes interessadas para projetar e implementar modelos de dados que atendam aos requisitos comerciais e às necessidades analíticas. – Garantir a adequada particionamento de dados, indexação e design de esquema para consultas e relatórios eficientes. – Avaliar e integrar novas tecnologias e ferramentas de dados para aprimorar a infraestrutura de dados. 3. Qualidade e Governança de Dados: – Implementar verificações de qualidade de dados e mecanismos de monitoramento para identificar e resolver anomalias e problemas nos dados. – Aplicar políticas de governança e segurança de dados para manter a integridade dos dados e conformidade com regulamentações do setor. 4. Integração de Dados: – Integrar fontes de dados de terceiros nos fluxos de dados e sistemas existentes, garantindo compatibilidade e consistência. – Desenvolver e manter fluxos de trabalho de integração de dados para facilitar a troca de dados entre sistemas internos e externos. 5. Otimização de Desempenho: – Identificar e resolver gargalos de desempenho no processamento e armazenamento de dados, otimizando a infraestrutura geral de engenharia de dados. – Monitorar e solucionar falhas nos fluxos de dados, garantindo uma resolução rápida para minimizar interrupções. 6. Colaboração e Documentação: – Trabalhar em estreita colaboração com cientistas de dados, analistas e outras partes interessadas para entender os requisitos de dados e fornecer o suporte necessário de engenharia de dados. – Documentar fluxos de dados, processos e melhores práticas para garantir a compartilhamento de conhecimento e manutenção do código. Qualificações: – Graduação em Ciência da Computação, Engenharia ou área relacionada (desejável). – Experiência comprovada como Engenheiro de Dados ou função similar, com um histórico sólido de projeto e implementação de fluxos de dados complexos. – Proficiência em linguagens de programação como Python e SQL. – Conhecimentos com ferramentas e tecnologias de integração de dados (por exemplo, Apache Spark, Apache Kafka, frameworks ETL). – Sólido entendimento de bancos de dados relacionais e NoSQL, conceitos de data warehousing e técnicas de modelagem de dados. – Familiaridade com plataformas de nuvem – Google Cloud) e orquestradores como Apache Airflow (GCP Cloud Composer) – Habilidades sólid

Número de vagas: 1

Tipo de contrato e Jornada: Efetivo – CLT – Período Integral

Área Profissional: Especialista em Informática, TI, Telecomunicações – Processamento de Dados

Exigências
  • Escolaridade Mínima: Ensino Superior

Por favor, preencha os campos obrigatórios.



Vagas em Destaque
  • sine bahia
    Período Integral
    São Luís

    FORMATO DE CONTRATÇÃO: CLT. SEGMENTO DA EMPRESA: RESTAURANTE. Atividades Organização e preparo de lanches na chapa; auxilio geral nas atividades da cozinha; organização e limpeza do ambiente.
  • Panvel Farmácias
    Período Integral
    Curitiba

    Descrição da vaga Você quer fazer parte de um grande time em uma empresa que não para de crescer?  Se você é dedicado(a), gosta de organização e novos desafios, venha participar do nosso processo seletivo para Ajudante de Limpeza na
  • +PET
    Período Integral
    Brasília

    Descrição da vaga Nascemos para transformar a forma de cuidar da saúde dos pets!   Somos uma empresa referência em planos de saúde veterinário no Brasil, oferecemos um modelo de negócio simples e flexível com +Excelência e +Tecnolog
  • Fênix Team
    Período Integral
    Rio de Janeiro

    OPORTUNIDADE DE TRABALHO COM INÍCIO IMEDIATO PARA O TIME COMERCIAL OUTBOUND EM FORMATO HOME-OFFICE Trabalho 100% home office e o único pré-requisito para participar da seleção é possuir vontade de vencer e crescer na carreira comercial. P
  • , SAPORE .0
    Período Integral
    São Bernardo do Campo

    Gerenciar os processos internos e externos: processos de qualidade, gestão de pessoas, compras e custo, com objetivo de acompanhar as metas estabelecidas e resultados; Gerenciar processo de distribuição das refeições, bem como a distribui�
  • COMERCIAL CISNE
    Período Integral
    São Paulo

    Assistente Administrativo-Ti Salário: R$ 2000,00 Vale transporte (sem integração); Horário de trabalho Segunda á Sexta das 08 horas ás 17 horas Sábado das 08:00 horas ás 12:00 Local: Rua gomes Cardim, 172 – Brás Suporte ao setor de v