Sr Data Engineer

Sobre a Trela

Nossa missão é ajudar as pessoas a se alimentarem melhor. Para isso, nós selecionamos apenas os melhores produtores e marcas de alimentos em São Paulo e estamos construindo um supply chain que permite vender esses alimentos sem estoque — maximizando seu frescor e eliminando desperdício. Na Trela, você encontra a maior variedade de alimentos saudáveis, entregues na porta da sua casa, aos preços mais competitivos.

Somos uma startup que cresce 40% ao mês e tem o apoio de alguns dos principais investidores em tecnologia da América Latina e do mundo, como Kaszek, SoftBank, General Catalyst e Y Combinator.

Vem fazer parte!

Nossa Stack

O time de Dados da Trela trabalha utilizando Python e SQL em uma plataforma quase totalmente open source, fazendo uso apenas do Snowflake como data warehouse. Para o nosso processo de ELT, utilizamos Apache Kafka para enviarmos os dados para o Snowflake e o dbt para transformá-los em tabelas para serem consumidas pelos nossos usuários internos no Metabase. Tudo isso é orquestrado e gerenciado pelo dagster.

A missão da pessoa Engenheira de Dados Sênior será de manter e evoluir nossa data stack, onde temos 11 componentes, +100 tabelas, arquitetura near real time e integrações com softwares terceiros em parceria com o nosso Senior Data Engineer. Você terá autonomia e responsabilidade sobre a disponibilidade dos dados na camada raw em <5 minutos, apoiar todas as áreas da empresa criando tabelas ouro de acordo com as necessidades garantindo a qualidade e integridade.

Se você é uma pessoa engenheira de dados altamente organizada, autônoma e que prospera em um ambiente de startup de ritmo acelerado, ficaremos felizes em conhecer você!

Responsabilidades e atribuições:

- Diminuir alertas do Dagster pela metade;

- Implementar CI/CD do Dagster para termos as boas práticas de Engenharia de Software;

- Centralizar as 5 principais regras de negócio utilizadas nas métricas comuns à empresa dentro de um modelo gerenciado e mantido pelo time de dados.

- Propor e aplicar uma estrutura de segurança e governança de dados na Trela.

Requisitos e qualificações:

- SQL Avançado e Python;

- Orquestradores (Airflow, Dagster, etc) e Kafka;

- Modelagem de dados;

- Medallion Architecture;

- Processamento de dados near real time;

- Habilidade de resolução de problemas e análise.

Benefícios:

 Vale-refeição;

Vale-transporte;

Seguro de vida;

Plano de Saúde e Odontológico;

Totalpass.