Data Engineer at Keyrus responsible for building and optimizing data pipelines for major projects. Contributing to data solutions and ensuring data quality in a growing team.
About the role
- Data Engineer managing complete data solutions on AWS for consulting clients. Focusing on Amazon Redshift and Data Warehouse architectures in a hybrid setup.
Responsibilities
- Desarrollar soluciones utilizando tecnologías de datos de AWS de vanguardia
- Determinar de dónde extraer los datos, cómo recuperarlos y construir algoritmos para que el acceso a los datos sea más sencillo y útil para los clientes
- Investigar sobre diferentes enfoques para el almacenamiento y explotación de datos en AWS
- Resolver problemas diseñando, desarrollando, probando e implementando soluciones de software
- Supervisar las métricas de rendimiento del sistema para identificar posibles riesgos/problemas
- Relevar y confeccionar análisis de datos (exploratorios, prescriptivos y/o predictivos)
- Desarrollar pipelines de extracción transformación y carga de datos de diversos tipos y orígenes, tanto en batch como en tiempo real
Requirements
- Experiencia de al menos cuatro años en el rol
- Nociones de ETL
- Manejo de Python avanzado
- Experiencia práctica actual de al menos 2 años con Amazon Redshift en producción
- Experiencia con AWS Glue para desarrollo de ETL (PySpark y/o Python Shell)
- Manejo de lenguaje SQL (en al menos un motor: MS-SQL, Oracle, Postgre, etc)
- Experiencia trabajando en un entorno Agile
- Experiencia demostrable en proyectos de migración de Data Warehouse
- Probar, validar e implementar mejoras de rendimiento y optimización de recursos en consulta con los equipos de desarrollo de AWS
- Experiencia utilizando tecnologías de streaming de datos (Kafka, MSK, Kinesis, MQ, SQS, etc)
- Inglés conversacional intermedio
- Deseable: Conocimientos de PySpark
- Deseable: Conocimientos en diseño e implementación de Data Lakes
- Deseable: Experiencia trabajando con infraestructura como código (SAM, CDK, Terraform, CloudFormation)
- Deseable: Experiencia con Step Functions para orquestación de workflows
- Deseable: Experiencia con AWS DMS (Database Migration Service) para migraciones
Benefits
- Compensación competitiva
- Beneficios integrales
- Capacitación en tecnología de punta y socios (AWS)
- Horario de trabajo flexible
- Tiempo libre responsable
- Mucho más!
Job title
Job type
Experience level
Salary
Not specified
Degree requirement
Tech skills
Location requirements
Data Architect designing and implementing scalable data architectures for Keyrus in Bordeaux. Leading client transitions and contributing to the tech ecosystem with innovative data solutions.
Lead Data Engineer responsible for leading data engineering projects within the AI & Data Engineering team in Pune, India.
Data Engineer utilizing Databricks and AWS for scalable data solutions. Collaborating on analytics with business teams at Travelers.
Manager leading coordination between teams for data engineering at DPR Construction. Supporting core markets and account management through data analytics and technical delivery.
Program Manager leading enterprise - wide data migration efforts for Boeing's transition to modern data platforms. Overseeing complex processes to ensure secure and effective migrations across multiple systems.
Senior Data Engineer responsible for developing data products for Disney's immersive digital experiences. Collaborating with teams to ensure data quality and operational efficiency in a fast - paced environment.
Senior Data Engineer crafting and developing data products for analytical insights at Zendesk. Collaborating in an Agile environment with a focus on data warehousing and process optimization.
Senior Data Engineer designing and building data warehouse solutions with Snowflake for a fintech company. Collaborating with cross - functional teams to facilitate data insights and analytics.
Data Engineer developing and maintaining data pipelines and applications at EvidenceCare. Collaborating across teams to generate actionable insights from healthcare data for better decision - making.