Você está em busca de um trabalho que agregue valor e tenha impacto?

Você quer fazer a diferença com sua experiência?

Com nós, você poderá fazer isso acontecer.

A NCS é uma empresa líder em serviços de tecnologia, operando na região da Ásia-Pacífico em mais de 20 cidades, fornecendo serviços e soluções em consultoria, serviços digitais, tecnologia e mais.

Acreditamos em utilizar o poder da tecnologia para fazer coisas extraordinárias acontecerem e criar um impacto e valor duradouros para nosso pessoal, comunidades e parceiros. Nossa força de trabalho diversificada, composta por 13.000 colaboradores, entregou uma riqueza de projetos de grande escala, críticos para a missão e multiplataformas para governos e empresas em Cingapura e na região da APAC.

O que fazemos:

Dirigimos nossa paixão por aproveitar a tecnologia.

Juntamos pessoas e tecnologia.

Avançamos comunidades e transformamos indústrias.

Estamos à procura de Engenheiro de Dados para fazer parte de nossa equipe diversa de talentos aqui na NCS!

O que buscamos alcançar juntos:

• Desenvolver jobs de ETL

• Garantir a eficiência do uso de recursos de cluster aplicados a um job de ETL

• Projetar e implementar soluções de big data em nível de framework que sejam rentáveis

• Fornecer suporte para os problemas de big data encontrados no sistema de dados corporativos proprietário da empresa e em seus frameworks

• Aprimorar um job de ETL aplicando as melhores práticas e o balanceamento da configuração do spark

• Participar da revisão de requisitos de lógica de projeto e programa

• Cascatear mudanças macro no framework e no sistema para a equipe e outras equipes que trabalham e são afetadas pelo job

• Conversão e migração de jobs de uma plataforma para outra plataforma de big data

• Integração de um job de sua fonte ingerida transformando-o em vários alvos como bancos de dados, arquivos de extração e casos de uso de plataforma de streaming

• Manter e/ou gerenciar repositórios principais de origem

• Documentar módulos de entregáveis técnicos

• Manter-se atualizado sobre tendências tecnológicas relacionadas ao ETL de big data o máximo possível

• Trabalhar em múltiplos jobs de ETL implementando java-spark, airflow e carregando em diferentes armazéns de dados e para diferentes relatórios, como relatórios financeiros, relatórios de leads, relatórios de assinantes de rede e extrações como extrações de site celular, telcoscore, gscore, etc.

• Solucionar problemas, testar e pré-implantar mapeamentos de dados de ETL em pyspark

• Trabalhar em múltiplos jobs de ETL para Datamart, os dados focam principalmente em banda larga, pós-pago e pré-pago da Globe para repensar a experiência do cliente para uso de engenheiros de aprendizado de máquina

• Conversão macro de jobs de ETL de execução local para todos baseados em nuvem e em clusters baseados em nuvem e ferramentas de big data

• Desenvolver jobs de ETL para casos de uso de Crescimento Digital e Transformação para ajudar os negócios a visualizar o relatório resumido financeiro e os dados usados para ajudar a rastrear a transação de pagamento do cliente, recompensas, assinaturas e obter uma visão macro sobre leads regionais

• Usar Databricks para as migrações dos outros jobs para ter controle sobre a gestão do uso de computação.

• Aplicar técnicas no spark para leitura e escrita de fontes e alvos para reduzir o tempo de execução

• Trabalhar em soluções para implementações de jobs de ETL rentáveis junto com engenheiros de qualidade de dados e arquiteto de dados.

Requisitos Obrigatórios:

• Java 11 ou superior (para ingestão)
• SQL
• Python
• Dbt
• Databricks
• Kafka
• Airflow
• NiFi
• Administração de Linux
• Bitbucket

Por favor, consulte a descrição do trabalho.