Data Engineer Pleno

Nível: Efetivo


Descrição: Como parte do time de Data Engineering, você irá participar de projetos de implementação de infraestrutura de dados de ponta a ponta.

Você vai trabalhar com equipes de negócios, engenharia de dados, data science e UX design para entregar projetos desafiadores.


Desafios:

  • Usar API de serviços (internos e externos) para ingestão de dados em nossos Processos de ETL (Extract Transform and Load).
  • Garantir que todo o processo de ETL esteja funcionando por meio de monitoramento e métricas, como SLA.
  • Monitorar a execução do ETL hospedado na nuvem e on-premises.
  • Disseminar boas práticas de Devops e Dataops no time.
  • Agregar dados com ferramentas distribuídas que conseguem lidar com grandes volumes de dados.
  • Administrar o carregamento de dados em storages distribuídos (sejam eles relacionais ou não relacionais).
  • Ter liberdade e pensamento crítico para propor e questionar soluções relacionadas à engenharia de dados.

Requisitos:

  • Experiência de pelo menos 3 anos  em alguma linguagem de programação (Python, Java, Ruby, JavaScript, Scala etc.).
  • Conhecimento avançado em SQL.
  • Conhecimento em algoritmos e estrutura de dados.
  • Experiência com tecnologias, como Spark, Kafka, Presto ou Airflow, e que se sinta confiante para criar datasets agregados.
  • Experiência com o funcionamento de data warehouses, como Google Bigquery, Redshift ou Snowflake.
  • Experiência avançada com infraestrutura na nuvem ( AWS,  GCP etc).

Diferenciais:

  • Experiência com data build tool (DBT).

Carga Horária: 40 horas semanais


Local: Florianópolis - SC


Remuneração: A Combinar