Data Engineer Pleno

Nível: Efetivo


Descrição: Como parte do time de Data Engineering, você irá participar de projetos de implementação de infraestrutura de dados de ponta a ponta.

Você vai trabalhar com equipes de negócios, engenharia de dados, data science e UX design para entregar projetos desafiadores.


Desafios:

  • Usar API de serviços (internos e externos) para ingestão de dados em nossos processos de ELT (extract load transform);
  • Garantir que todo o processo de ETL esteja funcionando por meio de monitoramento e métricas, como SLA;
  • Monitorar a execução do ELT hospedado na nuvem e/ou on-premises;
  • Executar boas práticas de Devops Dataops e Data Engineering no time;
  • Executar Extração e Load (EL) de diversos bancos de dados e API em Data Lakes e Data Warehouses;
  • Trabalhar com time multidisciplinar composto de data engineers, data science, analytics engineers e project managers;
  • Encarar desafios de data engineering de diversos verticais de negócio.

Requisitos:

  • Experiência avançada com manipulação de dados utilizando SQL;
  • Experiência intermediária em frameworks de processamento distribuído (Spark, Hadoop, Dask etc.);
  • Experiência intermediária com aplicações de data pipelines (Airflow, Prefect etc.);
  • Experiência intermediária com Data Warehouse (Ex: PostgreSQL, Redshift, BigQuery);

Diferenciais:

  • Experiência avançada com aplicações de data pipelines (Airflow, Prefect etc.);
  • Experiência  avançada de frameworks de processamento distribuído (Spark, Hadoop, Dask etc.);
  • Experiência avançada com processamento de dados na nuvem (AWS, GCP);
  • Experiência intermediária/avançada com metodologia ELT (Extract Load Transform);
  • Experiência intermediária/avançada em projetos de infraestrutura para analytics (Ex: Implementação de infraestrutura para BI);
  • Experiência intermediária/avançada em projetos de infraestrutura para Data Science (Ex: implementação de infraestrutura para Machine Learning e deploy de modelos).

Carga Horária: 40 horas semanais


Local: Florianópolis - SC


Remuneração: A Combinar