Engenheiro(a) de dados pleno (azure/databricks)
BRQ
Sobre a oportunidade
Estamos em busca de uma pessoa Engenheira de Dados Pleno com experiência em Azure Databricks para atuar em um grande banco privado, participando de iniciativas de migração e modernização do ambiente de dados.
O desafio envolve a evolução de soluções de engenharia de dados, incluindo a migração de processos legados desenvolvidos em PowerCenter para uma arquitetura moderna baseada em Azure Databricks.
Buscamos uma pessoa com experiência em Python, PySpark e SQL, que tenha conhecimento em engenharia reversa de ETLs e capacidade de analisar fluxos existentes, compreender regras de negócio e garantir a consistência dos dados durante o processo de modernização.
Responsabilidades
Atuar na migração e modernização de projetos utilizando Python, SQL, Spark e Azure Databricks.
Desenvolver e manter pipelines de dados e processos de orquestração no Azure Data Factory.
Analisar e otimizar a performance e a escalabilidade dos processos de dados.
Desenvolver rotinas de automação para agilizar processos de homologação.
Realizar sustentação e manutenção das soluções de engenharia de dados implantadas.
Trabalhar em conjunto com equipes multidisciplinares para entender requisitos e entregar soluções.
Realizar engenharia reversa de ETLs, analisando e interpretando workflows, mapplets, mappings e sessions existentes no PowerCenter, identificando regras de negócio e dependências dos processos legados.
Conduzir validações de qualidade e consistência dos dados entre o ambiente legado (PowerCenter) e o novo ambiente, realizando testes de volumetria e integridade.
O que esperamos de você
Experiência com ferramentas de inteligência artificial aplicadas ao desenvolvimento, como GitHub Copilot, Devin, Claude Code e Cursor.
Mínimo de 3 anos de experiência com Python e PySpark.
Experiência prática com Azure Databricks e Apache Spark.
Bons conhecimentos em SQL e PL/SQL.
Conhecimento dos principais serviços Azure, como Data Factory, Storage Accounts e Blob Storage.
Conhecimento em engenharia reversa de ETLs, com capacidade de analisar e interpretar processos legados.
Noções de programação orientada a objetos.
Familiaridade com Git para versionamento de código.
Conhecimento de processamento de dados em lote (Batch).
Será um diferencial
Experiência com ambientes de Big Data on-premises, como Cloudera, Hadoop, Hive e HBase.
Noções de CI/CD e ferramentas como Jenkins.
Conhecimento em orquestradores de processos, como Control-M.
Capacidade de leitura e interpretação de código Java.
Noções de containers e tecnologias como Docker e Kubernetes/AKS.
Vamos construir o que importa?
Se você gosta de engenharia de dados, tem experiência com modernização de ambientes e quer participar de desafios que envolvem evolução tecnológica e transformação de soluções legadas, essa oportunidade pode ser para você!
Vem construir o que importa com a BRQ!
Vaga - bbbd8f
#LI-JO1
#LI-Hybrid
- ...consistência em todos os canais e materiais. Analisar métricas de desempenho de campanhas de marketing e propor otimizações baseadas em dados. Colaborar com equipes de produto e vendas para desenvolver materiais de apoio e campanhas de lançamento. Pesquisar tendências...
- ...seguindo padrões de identificação e otimização de espaço. Separar pedidos conforme as ordens de serviço, utilizando coletores de dados ou listas de separação. Auxiliar no carregamento e descarregamento de veículos, utilizando equipamentos de movimentação (paleteiras...
- ...atuação no segmento administrativo); • Conhecimento em linguagem SQL para elaboração de consultas de leitura (SELECT) em bancos de dados; • Atuar na investigação da causa raiz de incidentes recorrentes, em colaboração com as demais equipes de TI, propondo soluções de...
- ...Através de um atendimento informativo e consultivo, sua missão é identificar as reais necessidades dos potenciais clientes, coletar dados relevantes e apresentar a Lello como a solução ideal e eficiente, engajando-o para o fechamento de novos negócios. O que você fará...
R$ 2.500
...presencial, telefônico, por WhatsApp e e-mail; Agendamento, confirmação e organização das agendas médicas; Cadastro e atualização dos dados dos pacientes no sistema; Recebimento de pagamentos, conferência de valores, fechamento de caixa e emissão de notas fiscais;...- ...problemas e garantir os cumprimentos dos projetos. Promover alinhamento contínuo com Product Owners, Tech Leads, UX, arquitetura, dados, segurança, infraestrutura, operação e fornecedores. Antecipar conflitos de capacidade e impactos cruzados, estruturando planos...
- ...desenvolvimento (não apenas sustentação) • Conhecimento em APIs REST, integração com serviços externos • Familiaridade com bancos de dados relacionais • Noções de CI/CD e versionamento (Git) Localidade da posição: Hibrida em São Paulo/SP Quem é a Insi? Somos...
R$ 2.000 a R$ 4.000 mensal
...Noturno Área e especialização profissional: Administração - Administração Geral Nível hierárquico: Operacional HABILIDADES Azure MongoDB Postman C# SQL Server Requisitos Escolaridade Mínima: Ensino Fundamental (1º grau) Benefícios...R$ 2.000 a R$ 4.000 mensal
...Noturno Área e especialização profissional: Administração - Administração Geral Nível hierárquico: Operacional HABILIDADES Azure MongoDB Postman C# SQL Server Requisitos Escolaridade Mínima: Ensino Fundamental (1º grau) Benefícios...- ...construir um futuro mais brilhante e saudável para todos. Engenheiro(a) de Projetos Sênior Resumo da Posição O Engenheiro de... ...Supervisionar o progresso de projetos/programas, questionar premissas e dados para melhorar resultados, ajustar planos e tomar ações...
- ...estimativas mais recentes (LEs), cálculos do Optima e manutenção de SKUs (bloqueio/desbloqueio) para garantir o controle preciso dos dados mestres de custos e estoques. Melhoria Contínua: Validar projetos do Funding the Growth (FTG), assegurar a integridade do banco...
- ...Buscamos um(a) profissional com visão ampla do ecossistema de dados, curiosidade técnica e disposição para atuar em diferentes desafios... ...Experiência com outras plataformas Cloud, como Microsoft Azure ou Google Cloud Platform (GCP). Conhecimento em observabilidade...
- ...sustentação de soluções de Engenharia de Dados, construindo pipelines, integrando... ...dos dados. Atuar em parceria com engenheiros de dados e áreas de negócio na identificação... ...e Apache Spark. Vivência com Azure Data Lake, Databricks, Delta Lake e Airflow....
- ...para desenvolver soluções de Business Intelligence, transformando dados em informações estratégicas para apoiar a tomada de decisão e... ...dados e integração de fontes. Vivência com ambientes de dados em Azure ou GCP, além de sistemas corporativos como SAP. Desejável :...
- ...Leopoldina (próximo ao Parque Vila Lobos / Estação Vila Lobos-Jaguaré). O Grupo DPSP valoriza a sua Privacidade e a Proteção dos seus dados pessoais. Em caso de dúvidas sobre o tratamento de dados pessoais no processo de atração e seleção, acesse nosso Aviso de...
- Competências Técnicas Essenciais Experiência Especializada: 4 a 7 anos em Engenharia de Nuvem ou DevOps, com foco em operações e gestão de infraestrutura. Especialista em GCP: Experiência prática comprovada na implantação de cargas de trabalho corporativas no ...
- ...Mensageria (SQS, RabbitMQ) e observabilidade Experiência com Cognito/Azure AD Uso de IA no desenvolvimento Experiência em produtos... ...(Clean / DDD / CQRS) Cloud & Infra: AWS, Kubernetes, CI/CD Dados & Segurança: PostgreSQL, JWT, Cognito, Azure AD...
- ...suporte na organização e controle das agendas dos profissionais assistenciais; Apoiar no cadastro, atualização e conferência de dados dos pacientes nos sistemas institucionais; Auxiliar no registro e lançamento de informações nos sistemas corporativos, conforme orientação...
- ...envolvam apoio e desenvolvimento da equipe; Facilidade para interpretar indicadores de vendas, identificar oportunidades e transformar dados em ações práticas; Boa comunicação, relacionamento interpessoal e habilidade para compartilhar conhecimentos e desenvolver...
- ...Formação Superior completo, porém todos os cursos são bem-vindos. Requisitos Experiência sólida com engenharia de dados em ambientes digitais. Domínio de linguagens como Python, SQL e ferramentas de orquestração (ex: Airflow). Experiência com plataformas...
- ...fica mais tempo com a gente. A vaga é para quem gosta de operação com muitas partes andando ao mesmo tempo, decide com base em dados e quer usar IA e automação para agendar mais, com menos esforço manual e menos visitas perdidas. RESPONSABILIDADES E ATRIBUIÇÕES...
- ...excelência em Segurança, Saúde e Meio Ambiente; Representar a Raízen junto aos clientes, leads e parceiros institucionais, fortalecendo relacionamento e presença da marca; Analisar dados e indicadores, trazendo insights para estratégias regionais e melhoria contínua....
- Ensino fundamental completo; Capacidade de trabalhar em equipe e em um ambiente de ritmo acelerado. Atender clientes de forma cortês e eficiente, oferecendo assistência quando necessário; Registrar produtos corretamente no caixa e processar pagamentos; Manter...
- ...Experiência com SharePoint/Lists e Dataverse como base de apps de RH. Conhecimento de Totvs ou outro ERP/HRIS, apenas como consumidor de dados. Experiência em Pyton e SQL. Mapear processos de RH ponta a ponta, identificando fontes de dados, retrabalho, pontos de falha...
- ...produto. Experiência com produtos digitais em ambientes ágeis (Scrum e Kanban). Conhecimento em ferramentas de manipulação de dados. Atuar como Product Owner em squad de projetos relacionados a experiência e aos serviços de limite da conta PagBank (descoberta,...
- ...Experiência em automação (RPA); Experiência concreta em Python; Conhecimento sólido em consulta e manipulação de banco de dados (ex: SQL e NoSQL); Coleta, análise e visualização de dados; Forte capacidade de compreensão dos requisitos dos stakeholders;...
- ...Ensino Superior completo em Estatística, Economia, Engenharia, Administração, Ciência de Dados ou áreas correlatas; Sólida experiência em People Analytics ou análise estratégica de dados; Domínio avançado de Microsoft Excel; Domínio em ferramentas de BI (Power...
- ...estudos aprofundados de equidade salarial interna e propor planos de ação para correção de distorções; Apoiar a estruturação de dados e análises para o Relatório de Transparência Salarial (Lei 14.611/2023); Atuar como consultor(a) interno(a) para lideranças e time...
- ...devoluções, Cancelamento e Reembolso (C&R), gestão de passivos (fidelidade/cashback) e noções básicas de impactos tributários. Análise de Dados: Habilidade analítica para tomada de decisão baseada em dados. Domínio de Excel/Google Sheets avançado. (Diferencial: Conhecimento...
- ...para atuar no desenvolvimento das seguintes atividades: Apoiar na emissão e conferência de faturas e notas fiscais; Conferir dados cadastrais e contratuais, pedidos de venda e ordens de serviço antes da emissão da fatura; Realizar lançamentos em sistemas ERP;...
Deseja receber mais vagas?
Assine e receba vagas semelhantes a Engenheiro(a) de dados pleno (azure/databricks). Seja o primeiro a se candidatar!
