Data engineer sr –

Titulo da Vaga: Data engineer sr

Localização: Curitiba – PR

Descrição da Vaga: Detalhes da VagaEscolaridade Não InformadoSegmento Não InformadoSalário Não InformadoÁrea de AtuaçãoDiversos / OutrosO que você irá fazer

• Nessa posição, você irá reportar e alinhar suas atividades e entregas ao líder dessa área.
• Este profissional será responsável pela estruturação e otimização da arquitetura de dados, atuando no processamento e orquestração de grandes volumes de dados para atender às necessidades analíticas e operacionais da empresa.
• Nosso ambiente é colaborativo e inovador, oferecendo oportunidades de crescimento profissional, aprendizado contínuo e a possibilidade de trabalhar com tecnologias de ponta que impulsionam a eficiência e criam soluções de impacto para nossos clientes.
• Como será seu dia-a-diaSeus desafios são inúmeros, entre eles:Diagnosticar, estruturar e otimizar a arquitetura de dados da empresa, garantindo eficiência e escalabilidade no processamento de informações.
• Implementar pipelines de dados eficientes e escaláveis utilizando Glue, Spark e outras tecnologias para processar grandes volumes de dados.
• Migrar e traduzir scripts Python para PySpark, garantindo compatibilidade com a arquitetura de processamento distribuído.
• Trabalhar com cientistas de dados para facilitar o acesso a dados e aprimorar o desempenho de processamento.
• Criar e gerenciar ambientes centralizados para desenvolvimento e produção, melhorando a colaboração e a confiabilidade das soluções.
• Validar e otimizar o consumo de DPU em processos de ETL, reduzindo custos e melhorando a eficiência.
• Explorar e recomendar soluções gerenciadas, como AWS EMR, para aumentar a performance e escalabilidade dos processos analíticos.
• Definir boas práticas para versionamento, monitoramento e governança de dados dentro do time de BI.
• Apoiar na criação de soluções que permitam o melhor uso de ferramentas como Google Colab e Google Cloud Platform (GCP), mitigando desafios de integração e processamento.
• Lembrando: atuamos com squads e times multidisciplinares, e a tendência é que você execute também outras tarefas além dessas, dependendo do momento de cada projeto e de cada desafio! Seu perfilO que esperamos de você?Proatividade e habilidade para resolver problemas complexos de forma analítica e eficiente.
• Organização e autonomia na condução de atividades e projetos.
• Capacidade de otimizar e automatizar processos, promovendo eficiência e escalabilidade.
• Boa comunicação para interagir com cientistas de dados e stakeholders técnicos e de negócios.
• Facilidade em estruturar e documentar soluções, garantindo a continuidade e evolução dos processos

Informações AdicionaisQuantidade de Vagas 1Jornada Não Informado

Nome da Empresa:

Salário:

Candidatar-se a vaga!