Engenheiro de Dados Sr - AWS - Híbrido Brasília - DF
Descrição da vaga
Na Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global. Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!
Junte-se a nós e seja parte da mudança!
(LI-HYBRID)
(#LI-MM1 )
Responsabilidades e atribuições
- Projetar e implementar pipelines de dados utilizando Airflow/MWAA, Python e SQL, seguindo boas práticas de modularidade, testes e versionamento.
- Modelar camadas Bronze/Silver/Gold (arquitetura medallion) em S3 e Glue Data Catalog, definindo partições, formatos (Parquet/Delta) e tabelas/partições otimizadas para consulta.
- Construir e otimizar modelos analíticos em Amazon Redshift, assegurando performance e custo.
- Publicar e manter datasets confiáveis para Power BI, incluindo gateways, incremental refresh, agregações e uso eficiente de DirectQuery/Import em Redshift.
- Colaborar com analistas e times de negócio, traduzindo necessidades em datasets, KPIs e camadas consumíveis, além de documentar catálogos e contratos de dados.
Requisitos e qualificações
Requisitos:
- Experiência sólida em AWS: S3, Glue Data Catalog (tabelas, crawlers, schemas, partições); Airflow (preferencialmente MWAA), DAGs em Python; Amazon Redshift (design de tabelas, otimização de queries, Spectrum/External Tables).
- Power BI: modelagem semântica, DAX, incremental refresh, gateway, boas práticas para consumo de Redshift.
- Proficiência em linguagens: Python e SQL avançado.
- Conhecimento em Data Lakehouse: arquitetura medallion, formatos colunares (Parquet), partições e metadados.
- Boas práticas de engenharia: Git, testes, code reviews, documentação e pipelines confiáveis.
- Conhecimento em segurança e governança: IAM, criptografia, princípios de mínimo privilégio, LGPD aplicada a dados.
Diferenciais:
- Experiência com Spark/EMR ou Glue ETL (PySpark), dbt para Redshift e Redshift Serverless.
- Conhecimento em Lake Formation para controle de acesso a dados e Athena para consultas interativas.
- Experiência em observabilidade com CloudWatch.
- Familiaridade com ferramentas de qualidade de dados (Great Expectations/Deequ).
- Experiência em gestão de custo/performance: compactação, poda de partições, materializações e agregações para Power BI.
- Conhecimento em Terraform/CloudFormation (IaC).
Informações adicionais
🍛 Vale Alimentação ou Vale Refeição;
👨🏼🎓 Desconto em cursos, universidades e instituições de idiomas;
📚 Academia Stefanini - plataforma com cursos online, gratuitos, atualizados e com certificado;
🗣 Mentoring;
💉 Clube de vantagens para consultas e exames;
🏥 Assistência Médica;
🦷Assistência Odontológica;
💰 Clube de vantagens e descontos nos melhores estabelecimentos;
🛫 Clube de viagens;
🐶 Convênio para Pet;
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Mapeamento Comportamental
- Etapa 3: Entrevista Comportamental
- Etapa 4: Entrevista Cliente
- Etapa 5: Contratação
A SCALA
A Scala, empresa do grupo Stefanini, é especializada em tecnologias com foco em Analytics, Hiperautomação, Integração de Sistemas, Inteligência Artificial, Cloud e Observabilidade.
Entregamos soluções de alta performance que auxiliam os nossos clientes em suas jornadas digitais, sempre aplicando o nosso propósito de tornar a tecnologia um agente de mudança para um mundo melhor.
Estamos buscando profissionais inovadores, disruptivos e interessados em crescer junto ao nosso time Scalático. 🚀
|+ de 30 anos no mercado | + de 40 países | + de 20 Cases publicados | + de 500 certificações ativas |
Redes Sociais