Cloud Data Engineer implementing tailored solutions for Volkswagen Group data processing. Building ETL/ELT pipelines while collaborating with technical experts.
About the role
- Senior Data Engineer building Big Data pipelines and distributed processing at Reply, an Italian IT consultancy. Collaborate with data science teams and cloud platforms.
Responsibilities
- Construir e gerenciar pipelines confiáveis de dados envolvendo ingestão/coleta, processamento, integração, armazenamento e disponibilização de dados
- Atuar em arquitetura de sistemas distribuídos para processamento massivo em paralelo (MPP)
- Combinar diversas fontes de dados heterogêneas e colaborar com equipes de análise e ciência de dados
- Colaborar na construção de soluções e geração de valor baseadas em dados
- Trabalhar com as frentes IA, Cloud, Machine Learning e Indústria 4.0
Requirements
- Experiência prática com ingestão, integração, processamento e armazenamento de grandes volumes de dados
- Atuação em projetos de Big Data
- Behavior Driven Development (BDD)
- Extração de dados em Python
- Processamento de dados com PySpark
- Experiências em ferramentas ETL's
- Conhecimento em modelagem de dados relacionais e dimensionais (Data WareHouse)
- Experiência com bancos de dados SQL
- Experiência com ferramentas Big Data na AWS: EMR, Kinesis, RedShift, S3, Glue, ElasticSearch
- Conhecimento em Kafka
- Conhecimento com Data Lake e Data Ops
- Desejável: Certificações AWS
- Desejável: Conhecimento em Terraform ou CloudFormation
Benefits
- Cartão flexível Swile pra você usar como quiser (VA e VR)
- Totalpass ou Gympass
- Apoio à Saúde Mental – Psicologia Viva
- Plano de Saúde Bradesco
- Plano Odontológico Bradesco
- Participação nos Lucros
- Auxílio-Creche para nossas mamães
- Incentivo a certificações
- Palestras e Webinars especiais
- Programa RAF de bonificação por indicações
- Seguro de Vida
- Subsídio para Inglês ou Italiano
- Desconto Open English
- Presente de aniversário
- Possibilidade de mudança do país
- Parcerias com Universidades
Job title
Job type
Experience level
Salary
Not specified
Degree requirement
No Education Requirement
Tech skills
Location requirements
Data Engineer designing and optimizing data pipelines using Databricks and Google Cloud Platform. Collaborating with analysts and scientists to deliver high - quality data products.
Data Engineer responsible for building scalable data infrastructure that supports data - driven decisions. Collaborating with team to maintain systems and unlock data value for organizations.
Associate Data Engineer supporting privacy engineering controls and executing privacy impact assessments in a financial services company. Collaborating across business units to ensure alignment with privacy regulations.
Data Engineer at CVS Health optimizing data pipelines and analytical models. Driving data - driven decisions with healthcare data for improved business outcomes.
Senior Data Engineer at CVS Health developing robust data pipelines for healthcare data. Collaborating with teams to provide actionable insights and integrate them with consumer touchpoints.
Senior Data Engineer supporting AI - enabled financial compliance initiative with data pipelines and ingestion processes. Collaborating with diverse teams in a mission - critical regulated environment.
Data Architect leading the definition and construction of cloud data architecture for Kyndryl. Participating in significant technological modernization initiatives, focusing on Google Cloud Platform.
Senior Data Engineer driving data intelligence requirements and scalable data solutions for a global consulting firm. Collaborating across functions to enhance Microsoft architecture and analytics capabilities.
Experienced AI Engineer designing and building production - grade agentic AI systems using generative AI and large language models. Collaborating with data engineers, data scientists in a tech - driven company.