Engenheiro de Dados - 21367/5
Estamos em busca de um Engenheiro de Dados Sênior para integrar a equipe de BI. O profissional será responsável pela estruturação e otimização da arquitetura de dados, atuando no processamento e orquestração de grandes volumes de dados para atender às necessidades analíticas e operacionais da empresa. Buscamos alguém que tenha perfil analítico, proatividade e capacidade de resolver problemas complexos com eficiência.
Responsabilidades
Diagnosticar, estruturar e otimizar a arquitetura de dados, garantindo eficiência e escalabilidade.
Implementar pipelines de dados utilizando AWS Glue, Spark e PySpark.
Migrar e traduzir scripts Python para PySpark, otimizando a arquitetura distribuída.
Trabalhar com cientistas de dados para facilitar o acesso a dados e aprimorar o desempenho.
Criar e gerenciar ambientes centralizados para desenvolvimento e produção.
Validar e otimizar o consumo de DPU em processos de ETL, reduzindo custos.
Definir boas práticas de versionamento, monitoramento e governança de dados.
Explorar soluções gerenciadas, como AWS EMR, para melhorar performance e escalabilidade.
Requisitos da VagaFormação Acadêmica: Ensino superior completo em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.
Conhecimentos Técnicos:
Experiência sólida em engenharia de dados, com foco em arquitetura escalável e processamento de grandes volumes de dados.
Experiência com AWS Glue, Spark, PySpark e construção de pipelines de dados em cloud (AWS, GCP ou Azure).
Conhecimento em bancos de dados SQL e NoSQL.
Experiência em CI/CD, Git e automação de processos.
Análise e otimização de custos de processamento e armazenamento na nuvem.
Diferenciais:
Experiência com AWS EMR, Databricks, Snowflake e Delta Lake.
Conhecimento em Kubernetes, Docker e ferramentas de observabilidade (CloudWatch, Prometheus, Grafana).
Certificações AWS Data Analytics, Big Data ou similares.
Se você busca desafios em um ambiente inovador, colaborativo e com tecnologia de ponta, venha fazer parte do nosso time!
Candidatar
Receba alerta de vagas da cidade
Curitiba