Engenheiro(a) de Dados | Azure & Databricks

Venha fazer parte de um ecossistema vivo onde o futuro dos negócios é criado e vivido todos os dias. Faça parte desta transformação!

Na LUZA Group, a paixão, a perseverança e a vontade de superar limites definem o nosso caminho para o sucesso.

Fundada em 2006, somos uma multinacional portuguesa com mais de 1.200 profissionais talentosos e um volume de negócios. Com presença em mercados estratégicos como Portugal, Espanha, Marrocos, Brasil, México, Estados Unidos e China, oferecemos soluções inovadoras em engenharia, TI, design, consultoria, Indústria 4.0, treinamento e recrutamento. Tudo o que fazemos é movido pelo talento de nosso povo.

Este é um momento de crescimento e oportunidade. O futuro pertence a mentes visionárias. Junte-se a nós!

Modelo de atuação: Remoto
Nível: Pleno / Sênior

Sobre a posição

Buscamos um(a) Engenheiro(a) de Dados para atuar em um ambiente corporativo de grande porte e alta complexidade, apoiando diferentes áreas de negócio na construção e evolução de soluções de dados.

O profissional terá papel importante na interface entre Tecnologia e Negócio, participando desde o entendimento das necessidades e definição da solução até a implementação, configuração e sustentação dos ambientes e pipelines de dados.

Procuramos alguém com boa capacidade de comunicação, autonomia e visão de negócio, capaz de transformar demandas das áreas internas em soluções de dados estruturadas, escaláveis e sustentáveis.

Principais Responsabilidades

• Desenvolver, manter e evoluir pipelines de ingestão, transformação e processamento de dados (ETL/ELT).
• Desenvolver e otimizar consultas e estruturas utilizando SQL.
• Configurar, administrar e otimizar ambientes e workloads no Azure Databricks.
• Atuar com processamento de dados utilizando Spark/PySpark.
• Construir e evoluir soluções de dados em ambiente Microsoft Azure.
• Trabalhar com Azure Data Factory, Azure Storage/Data Lake e Azure SQL.
• Apoiar a definição de arquiteturas e soluções de Data Lake / Lakehouse.
• Garantir qualidade, performance, confiabilidade e disponibilidade dos pipelines de dados.
• Realizar troubleshooting e análise de problemas relacionados a processamento, integração e disponibilização de dados.
• Participar de reuniões com áreas de negócio para levantamento e entendimento de necessidades.
• Traduzir requisitos de negócio em requisitos técnicos e projetos de dados, propondo arquiteturas e abordagens adequadas.
• Apoiar estimativas, definição de escopo, arquitetura, esforço e planejamento das iniciativas.
• Trabalhar de forma integrada com equipes de Analytics, BI, Arquitetura, Sistemas e áreas corporativas.
• Contribuir para padrões e boas práticas de engenharia, governança e segurança de dados.

Conhecimentos Técnicos

Obrigatórios

• Experiência sólida com SQL.
• Experiência prática com Azure Databricks, incluindo configuração e utilização da plataforma.
• Conhecimento de Spark / PySpark.
• Experiência na construção e sustentação de pipelines ETL/ELT.
• Experiência com ambientes de dados em Microsoft Azure.
• Conhecimento de Azure Data Factory.
• Conhecimento de Data Lake, Lakehouse e modelagem de dados.
• Experiência com Git e práticas de versionamento.

Desejáveis

• Azure DevOps e práticas de CI/CD.
• Delta Lake e arquitetura Medallion.
• Python aplicado à Engenharia de Dados.
• Conhecimentos de governança, qualidade e observabilidade de dados.
• Experiência com integração de dados provenientes de SAP.
• Conhecimento de ambientes AWS.
• Experiência em ambientes corporativos de grande porte e múltiplas unidades de negócio.

Perfil Comportamental

• Excelente comunicação com áreas de negócio e stakeholders.
• Capacidade de conduzir reuniões de levantamento e definição de requisitos.
• Perfil consultivo e capacidade de questionar e entender a necessidade real do negócio.
• Capacidade de transformar problemas de negócio em soluções técnicas.
• Proatividade e autonomia para propor alternativas.
• Organização e capacidade de atuar simultaneamente em diferentes iniciativas.
• Facilidade para trabalhar com equipes multidisciplinares.
• Visão crítica sobre arquitetura, qualidade, performance e custos das soluções de dados.

Diferencial esperado

Mais do que um perfil exclusivamente técnico, buscamos um profissional capaz de atuar como ponte entre Engenharia de Dados e Negócio, participando da concepção das iniciativas e ajudando as áreas internas a transformar necessidades e oportunidades em projetos de dados tecnicamente viáveis e capazes de gerar valor para a organização.

Originally posted on Himalayas