Data Engineer

A Birdie coleta milhões de opiniões de consumidores provenientes de diversas fontes (e-commerces, fóruns de discussão, lojas de aplicativos, entre outros sistemas privados dos nossos clientes) de todo o mundo e estrutura em escala utilizando diversas técnicas (Machine Learning, NLP, entre outras) para criar a maior base estruturada de conhecimento de opinião sobre produtos do mundo.

Missão do cargo:

Você fará parte do time que tem como objetivo projetar, desenvolver e manter uma plataforma de infra estrutura de dados (ingestão, enriquecimento e disponibilização de dados) sobre opinião de produtos. Algumas características desejadas dessa plataforma são as seguintes:

  • Monitoramento ativo da execução do pipeline e qualidade dos dados
  • Redução do tempo de disponibilização em produção dos dados desde a ingestão
  • Implantação simplificada e novas transformações de enriquecimentos que utilizem tanto SQL quanto Python (modelos em deep learning)
  • Disponibilização dos dados em camada de consulta rápida (sub-second queries)
  • Gestão de permissão de acesso aos dados por pessoas e sistemas
  • Otimização do custo de processamento, armazenamento e disponibilização dos dados
  • Projeto de arquitetura (tão) agnóstico (quanto possível) à nuvem (hoje utilizamos AWS e Azure)
  • Gestão de modelagem de dados e data lake que permita escalabilidade de fontes de opiniões e tipos de enriquecimentos
  • Facilite a operação (treinamento, teste, implantação, monitoramento) de algoritmos de Machine Learning

Quem é você:

Um profissional com pelo menos dois anos experiência no projeto e desenvolvimento de infra-estrutura de dados. Se você possui experiência em pelo menos quatro dos seguintes critérios, considere a aplicação:

  • SQL e Python
  • AWS ou Azure;
  • Modelagem de dados para analytics;
  • Desenvolvimento de ETL/ELT;
  • Airflow;
  • DataBricks, Snowflake ou equivalentes;
  • Catálogo de dados;
  • Elastic Search;
  • Docker;
  • Inglês intermediário.

Soft Skills:

  • Disciplina e capacidade de gerenciar o tempo para entregar os projetos com autonomia em um ambiente de trabalho remoto;
  • Capacidade de se comunicar, engajar, discutir ideias, receber e prover críticas construtivas com foco na melhoria do projeto;
  • Pro-atividade em se comunicar e buscar apoio com o time;

O que te oferecemos:

• Regime de contratação CLT;
• Ambiente descontraído, de alto crescimento, com foco em resultado e inovação;
• Vale Refeição/Alimentação flexível – Swile Food;
• Ajuda com custos pessoais – Swile Utilities – com descontos em academias, psicólogos e muito mais;
• Plano de saúde;
• Plano odontológico;
• Seguro de vida;
• Horário de trabalho flexível.


Se candidate pelo botão abaixo e nosso time entrará em contato com você em breve!