Data Engineer Jr.

Nível: Efetivo

Descrição: Como parte do time de Data Engineering, você irá participar de projetos de implementação de infraestrutura de dados de ponta a ponta.

Você vai trabalhar com equipes de negócios, engenharia de dados, data science e UX design para entregar projetos desafiadores.

Desafios:

• Usar API de serviços (internos e externos) para ingestão de dados em nossos processos de ELT (extract load transform);
• Garantir que todo o processo de ETL esteja funcionando por meio de monitoramento e métricas, como SLA;
• Monitorar a execução do ELT hospedado na nuvem e/ou on-premises;
• Executar boas práticas de Devops Dataops e Data Engineering no time;
• Executar Extração e Load (EL) de diversos bancos de dados e API em Data Lakes e Data Warehouses;
• Trabalhar com time multidisciplinar composto de data engineers, data science, analytics engineers e project managers;
• Encarar desafios de data engineering de diversos verticais de negócio.

Requisitos:

• Experiência com manipulação de dados utilizando SQL;
• Experiência básica em frameworks de processamento distribuído (Spark, Hadoop, Dask etc.);
• Experiência básica com aplicações de data pipelines (Airflow, Prefect etc.);
• Experiência básica com Data Warehouse (Ex: PostgreSQL, Redshift, BigQuery);

Diferenciais:

• Experiência intermediária/avançada com aplicações de data pipelines (Airflow, Prefect etc.);
• Experiência  intermediária/avançada de frameworks de processamento distribuído (Spark, Hadoop, Dask etc.);
• Experiência intermediária/avançada com processamento de dados na nuvem (AWS, GCP);
• Experiência com metodologia ELT (Extract Load Transform);
• Experiência em projetos de infraestrutura para analytics (Ex: Implementação de infraestrutura para BI);
• Experiência em projetos de infraestrutura para Data Science (Ex: implementação de infraestrutura para Machine Learning e deploy de modelos).

Carga Horária: 40 horas semanais

Local: Florianópolis - SC

Remuneração: À Combinar