Staff Data Engineer
Remote job
O time:
O time de Engenharia de Dados da Incognia é responsável por melhorar e manter toda a infraestrutura de dados da empresa, desde clusters, serviços de dados e autenticação, até ETLs, notebooks e outras ferramentas necessárias que permitem que nossos colaboradores possam extrair métricas e inteligência de um vasto volume de dados ingeridos diariamente, de forma fácil, confiável, segura e respeitando a privacidade dos nossos usuários.
O trabalho do time é essencial para para entregar um variedade de soluções baseadas em um grande volume de dados coletados, no intuito de proteger usuários de diversos clientes de golpes e fraude
A oportunidade:
Precisamos de uma pessoa que tenha familiaridade com vários bancos de dados e engines de processamento distribuído, que consiga entender a fundo as ferramentas que usamos e que em caso necessário seja capaz de contribuir para os projetos opensource que rodamos em produção ou possa criar nossas próprias soluções para vencermos nossos desafios de dados.
Dia a dia da posição:
Criar, implantar, manter e monitorar soluções de infraestrutura de dados para toda a empresa, incluindo deployments de ferramentas open source e soluções desenvolvidas internamente;
Prover ferramentas como software, guidelines e templates que tornem o uso da infraestrutura de dados fluida e de fácil acesso aos colaboradores;
Criar e manter pipelines de dados recorrentes e/ou em tempo real de alta performance para tratar grandes volumes de dados;
Monitorar constantemente nossos sistemas para garantir alta disponibilidade, performance e redução de custos;
Criar mecanismos que garantam as políticas de acesso aos dados;
Requirements
Requisitos:
Graduação em Engenharia de Software ou relacionado;
Inglês avançado;
Experiência em kubernetes e deployment de sistemas em escala;
Experiência com ETLs/Pipelines em larga escala;
Experiência com o ecossistema Spark;
Experiência com Data Warehousing & Data Lake;
Familiaridade com vários bancos de dados;
Familiaridade com sistemas distribuídos;
Experiência com modelagem, análise e visualização de dados.
Sobre a Incognia
A Incognia é uma empresa de identidade baseada em geolocalização com soluções para verificação de usuários e segurança de contas em toda a jornada digital, desde a abertura até autenticação e validação de eventos sensíveis. Com mais de uma década de experiência em tecnologia de geolocalização, a nova abordagem da Incognia combina a inteligência dos dispositivos e análise do comportamento de localização para proporcionar uma experiência de uso sem fricção. A Incognia entrega avaliações de risco personalizáveis e acionáveis desde o primeiro dia para potencializar a estratégia de …
This job isn't fresh anymore!
Search Fresh JobsJob Profile
Benefits/PerksDiverse work environment Remote work flexibility
Tasks- Create and maintain data pipelines
Data analysis Data engineering Data Lake Data Modeling Data Visualization Data Warehousing Distributed Systems ETL Kubernetes Open-source tools Spark
Experience3 years
Education