AWS Data Engineer PySpark Redshift Iceberg Airflow
Efetivo
Decision group
Nível Acadêmico: Ensino Superior Completo Turno/Horas -- Áreas de Atuação Profissional: TI - Projetos Descrição: 'Graduação em Sistemas de Informação, Ciência da Computação, Engenharia de Dados ou área relacionada; Inglês Avançado/Fluente - C2 (haverá contato com cliente internacional); Experiência comprovada com desenvolvimento AWS com foco em Glue, Spark e Redshift; Proficiência em linguagens de programação como Python ou Scala para processamento de dados; Forte entendimento dos conceitos e melhores práticas de data warehousing; Experiência com SQL e sistemas de gerenciamento de banco de dados é necessária. Principais responsabilidades: Projetar, desenvolver e implementar soluções de dados na AWS utilizando Glue, Spark e Redshift. Colaborar com engenheiros de dados e cientistas de dados para entender os requisitos de dados e traduzi-los em pipelines de dados escaláveis; Criar e gerenciar processos ETL usando AWS Glue para extrair, transformar e carregar dados de várias fontes; Otimizar fluxos de trabalho de processamento de dados no Apache Spark para garantir um manuseio e análise de dados eficientes; Desenvolver e manter modelos e esquemas de dados no Amazon Redshift para suportar relatórios e análises; Monitorar e solucionar problemas em pipelines de dados para garantir a qualidade e integridade dos dados; Documentar processos de dados, arquitetura e melhores práticas para compartilhamento de conhecimento e conformidade. ' Habilidades: Qualquer localidade - Hibrido ou Remoto
Formação Acadêmica:
Não informado
Salário:
A combinar
Cargo:
Engenheiro de Testes
Empresa:
Decision group
Atua com consultoria de mão de obra de serviços de tecnologia.
Ramo:
Recursos Humanos/ Recrutamento e seleção
(FI)Vaga publicada há 2 dias atrás
Empregos semelhantes que podem ser interessantes para vocêCom base na vaga AWS Data Engineer PySpark Redshift Iceberg Airflow em São Paulo, SP
R$ 8.266,66
...(mínimo 3 anos); Certificação: ITIL V4 ou superior; Certificação: AZ-104 – Azure Administrator ou AWS Certified SysOps Administrator Associate ou Google Cloud Engineer Associate ou Oracle Cloud Operations Associate; Certificações desejáveis: AZ-305 - Designing Microsft...R$ 14.000
...de Dados utilizando Python, Databricks e AWS. Projetar, desenvolver e otimizar pipelines... ...de governança de IA. Conhecimento de PySpark, SQL e arquiteturas Lakehouse.... ...de R$ 300,00 por mês; Aniversário – Uma data tão especial, a Rox te presenteia com um vale...R$ 14.000
...Engenharia de Dados utilizando AWS e Databricks. Desenvolver e... ...Experiência com Python e/ou PySpark. Conhecimento de bancos de... ...Experiência com AWS Glue, S3, Redshift, Lambda ou Kinesis. Conhecimento... ...por mês; Aniversário – Uma data tão especial, a Rox te...- ...Principais responsabilidades Atuar tecnicamente no projeto de Data Normalization. Desenvolver e evoluir soluções relacionadas à... ...PostgreSQL. Experiência com Snowflake. Experiência com Apache Airflow. Conhecimento de pipelines de dados. Conhecimento de...
HIRING
São Paulo, SP1 há um mês atrás - ...firms or corporate legal departments in contracts, advisory, litigation, or legal marketing. Knowledge of the Brazilian General Data Protection Law (LGPD). Our Commitment to Inclusion Our journey begins with our people—developing strong talent with diverse...
- ...Sales capability within the 3PD channel, building from scratch the data, KPIs, and measurement frameworks required to enable data-driven... ...• Skill in assessing and solving problems; • Graduates in Engineer , Marketing, Administration, Economics or related areas;...
- ...Java/Springboot Kafka ( obrigatório ) Quarkus e AWS (desejável) conhecimentos também em Python/pyspark, não precisa ser mega especialista em python, mas necessitamos... ...17 e 21 Domínio de framework, Spring boot, MVC e Data Domínio de Banco de Dados relacional e NoSQL...
- ...à Inteligência Artificial, Automação, Analytics ou Data & AI. Experiência na interação com diferentes níveis... ...). Certificações em Cloud e IA (Microsoft Azure AI Engineer, Azure Fundamentals, AI Fundamentals, Copilot, AWS ou Google Cloud). Experiência em programas de...
- ...and squads to solve operational issues Work closely with the Engineering Team to identify operations issues and bring them to the squads... ..., engineering, and design teams Gather and analyze product data, surfacing relevant teams to inform the direction and understanding...
- ...interact with multiple stakeholders, and the capability to transform data and information into structured analyses, risk indicators, and... ...’s degree in Finance, Economics, Accounting, Risk Management, Engineering, Information System or a related field. · Minimum of 3 years...
- .... Provide guidance and consultation on workforce planning, talent acquisition, succession planning and team effectiveness Use data-driven insights to identify HR trends, diagnose problems, and recommend solutions. Lead change management initiatives design and...
- ...Fastmarkets is an industry-leading price-reporting agency (PRA) and information provider for global commodities, providing price data, news, analytics and events for the agriculture, forest products, metals and mining and new-generation energy markets. Fastmarkets...
R$ 10.100
...resolve complex cases, optimizing daily workflows, and leveraging data to hit key performance metrics without compromising the... ...Suite, Slack, and AI-driven support tools. Proficiency in prompt engineering and data visualisation tools to analyse team-level trends independently...- ...e mapeamento de objetos e definição de regras de migração; Executar extração, transformação e carga de dados utilizando: SAP Data Services (BODS) SAP Migration Cockpit IDocs LSMW RFC / integrações Trabalhar com objetos dos módulos MM, SD, PP, WM, FI...
- ...Fastmarkets is an industry-leading price-reporting agency (PRA) and information provider for global commodities, providing price data, news, analytics and events for the agriculture, forest products, metals and mining and new-generation energy markets. Fastmarkets...
- ...our clients' business transformation challenges and set new industry standards through innovative solutions. Focused on S4HANA, Data & Cloud, and innovative technologies, Fusion Consulting brings unparalleled expertise and commitment to excellence to every project...
- ...when it genuinely beats better prompting or retrieval, plus the data flywheel that feeds it. The deep research pipeline — multi-... ..., vector stores, hybrid search, reranking . ~ Solid engineering fundamentals: APIs, async, testing, CI/CD, containers, cloud...
- ...parceria com Tax, Finance, Accounting, Legal, Business, SAP, Vertex, Data e Technology; Coordenar atividades de tax determination,... ...Experiência em SAP S/4HANA Transformation; Experiência com Tax Engines, Fiscal Integrations e Regulatory Reporting; Experiência em...
- ...want to be. Megaport is the global leader in Network as a Service (NaaS), and has transformed the way businesses connect to the cloud, data centers, and each other. We’re publicly listed on the Australian Stock Exchange and partnered with the biggest names in tech like...
- ...Salesforce Engineer Position Type: Full-Time Schedule: 40 hours per week, Monday–Friday Time Zone: Eastern Time (ET) Location... ...expertise in Salesforce administration, configuration, data management, CRM process improvement, and revenue-related Salesforce...Trabalho remoto
OpsArmy
São Paulo, SPhá 1 dia atrás - ...About the Role We are looking for detail-oriented Audio Transcription Reviewers to support a Portuguese (Brazil) speech data annotation project. In this role, you will listen to short audio clips and verify or correct word-level segment boundaries and transcriptions...Trabalho remoto
Welocalize
São Paulo, SPhá 1 dia atrás - ...prioritize product opportunities, making explicit tradeoffs and recommendations backed by customer insight and data ~ Collaborate closely with engineering, data science, commercial, and operations teams to deliver high-quality products ~ Actively unblock challenges...
- ...READMEs, runbooks, API specs. Mentor other engineers and take technical lead on projects.... ...dependency injection, Spring Security, Spring Data, transaction management, and testing. ~... ..., and Git with mandatory PR review), and AWS. ~ Security awareness: OWASP Top 10 and...
- ...Informação; Prestar suporte interno aos usuários. Requisitos Conhecimento em administração de sistemas Linux; Conhecimento em GCP (Compute Engine, VPC, Shared VPC, Peering, Load Balancer, IAM e Backup/DR); Conhecimento em Cloudflare; Conhecimento em CrowdStrike. Diferenciais...
- ...para Infoblox; Conhecimento de DNSSEC, Response Policy Zones e recursos avançados de segurança DNS; Experiência com Microsoft Azure, AWS ou outras plataformas cloud; Conhecimento em automação utilizando PowerShell, Python e REST APIs; Experiência com ferramentas de monitoramento...
- ...Habilidades: Responsabilidades & Atribuições Como um(a) Forward Deployed Engineer (FDE) – Generative AI, você focará em: Atuar diretamente com... ...aplicações de IA Generativa; Experiência com cloud computing (AWS, Azure ou Google Cloud Platform), containers e Docker;...
- ...Requirements: 7+ years as a Developer Relevant experience with microservices architecture Technical Skills: Java 8+ XML, JSON mTLS, OAuth2 (AWS Cognito Client Credentials grant) Frameworks: Spring, Struts, REST Services, Angular Databases: SQL, NoSQL Tools: Docker, Kubernetes,...
- ...Responsabilidades: Projetar e aprimorar uma arquitetura de Data Lake *serverless* na AWS para lidar de forma eficiente com grandes volumes de... ...recuperação de dados, utilizando serviços da AWS como S3, Athena, Redshift ou DynamoDB, para garantir acesso de alto desempenho aos...
- Nível Acadêmico: Ensino Superior Completo Turno/Horas -- Áreas de Atuação Profissional: TI - Projetos Descrição: 'Responsabilidades Suportar projetos de migração de notebooks e refresh de dispositivos. Configurar equipamentos utilizando Microsoft Intune e Windows Autopilot...
- ...arquiteturas modernas de dados, incluindo Data Warehouses, Data Lakes e arquiteturas... ...integração de dados e plataformas de Data Engineering; Experiência com governança, qualidade, segurança... ...e transformação digital; Experiência com AWS ou outras plataformas cloud; Conhecimento...
Deseja receber mais vagas?
Assine e receba vagas semelhantes a AWS Data Engineer PySpark Redshift Iceberg Airflow. Seja o primeiro a se candidatar!
