Staff Data Engineer

O time:

O time de Engenharia de Dados da Incognia é responsável por melhorar e manter toda a infraestrutura de dados da empresa, desde clusters, serviços de dados e autenticação, até ETLs, notebooks e outras ferramentas necessárias que permitem que nossos colaboradores possam extrair métricas e inteligência de um vasto volume de dados ingeridos diariamente, de forma fácil, confiável, segura e respeitando a privacidade dos nossos usuários.

O trabalho do time é essencial para para entregar um variedade de soluções baseadas em um grande volume de dados coletados, no intuito de proteger usuários de diversos clientes de golpes e fraude

A oportunidade:

Precisamos de uma pessoa que tenha familiaridade com vários bancos de dados e engines de processamento distribuído, que consiga entender a fundo as ferramentas que usamos e que em caso necessário seja capaz de contribuir para os projetos opensource que rodamos em produção ou possa criar nossas próprias soluções para vencermos nossos desafios de dados.

Dia a dia da posição:

• Criar, implantar, manter e monitorar soluções de infraestrutura de dados para toda a empresa, incluindo deployments de ferramentas open source e soluções desenvolvidas internamente;

• Prover ferramentas como software, guidelines e templates que tornem o uso da infraestrutura de dados fluida e de fácil acesso aos colaboradores;

• Criar e manter pipelines de dados recorrentes e/ou em tempo real de alta performance para tratar grandes volumes de dados;

• Monitorar constantemente nossos sistemas para garantir alta disponibilidade, performance e redução de custos;

• Criar mecanismos que garantam as políticas de acesso aos dados;

Requirements

Requisitos:

• Graduação em Engenharia de Software ou relacionado;

• Inglês avançado;

• Experiência em kubernetes e deployment de sistemas em escala;

• Experiência com ETLs/Pipelines em larga escala;

• Experiência com o ecossistema Spark;

• Experiência com Data Warehousing & Data Lake;

• Familiaridade com vários bancos de dados;

• Familiaridade com sistemas distribuídos;

• Experiência com modelagem, análise e visualização de dados.

Sobre a Incognia

A Incognia é uma empresa de identidade baseada em geolocalização com soluções para verificação de usuários e segurança de contas em toda a jornada digital, desde a abertura até autenticação e validação de eventos sensíveis. Com mais de uma década de experiência em tecnologia de geolocalização, a nova abordagem da Incognia combina a inteligência dos dispositivos e análise do comportamento de localização para proporcionar uma experiência de uso sem fricção. A Incognia entrega avaliações de risco personalizáveis e acionáveis desde o primeiro dia para potencializar a estratégia de …