Senior Data Engineer (Perú)

Senior Data Engineer (Perú)

18 nov
|
Pradera Technologies
|
Perú

18 nov

Pradera Technologies

Perú

Resumen del puesto

El Senior Data Engineer será un miembro fundamental del equipo de Tecnología. El puesto está diseñado para un ingeniero de datos que incorpore activamente inteligencia artificial en su flujo de trabajo, acelerando el desarrollo de pipelines, automatizando procesos de calidad de datos y habilitando insights más ricos y rápidos en una plataforma de analítica de datos en la nube, en lugar de depender de enfoques manuales y repetitivos.

Responsabilidades

Desarrollo y automatización de pipelines aumentados con IA

· Desarrollar, construir y mantener sistemas de procesamiento de datos a gran escala que recopilen información de diversas fuentes estructuradas y no estructuradas, utilizando herramientas de generación de código con IA.

· Construir y optimizar pipelines ELT mediante herramientas asistidas por IA para identificar cuellos de botella, sugerir optimizaciones y automatizar tareas rutinarias de mantenimiento.

· Identificar, diseñar e implementar mejoras de procesos internos, utilizando IA para automatizar procesos manuales, optimizar la entrega de datos y rediseñar infraestructura para una mayor escalabilidad.

· Construir la infraestructura necesaria para la extracción, transformación y carga óptimas de datos desde diversas fuentes, utilizando IA para acelerar la creación y configuración de Infrastructure as Code.

Preparación de datos para IA y habilitación de Machine Learning

· Preparar datos para exploración y descubrimiento por científicos de datos mediante herramientas asistidas por IA para perfilamiento y evaluación de calidad, detectando anomalías, cambios de esquema y brechas de datos.

· Realizar data wrangling y munging para analítica y machine learning, utilizando IA para generar y validar lógica de transformación frente a reglas de negocio.

· Construir datasets grandes y complejos que cumplan requisitos funcionales y no funcionales, utilizando IA para evaluar enfoques de modelado dimensional y alineamiento de ontologías.





· Habilitar machine learning a gran escala mediante el diseño y mantenimiento de datasets anotados, enfoques de búsqueda elástica y estructuras escalables de data lake para cargas de trabajo de IA/ML.

Pipelines analíticos y generación de insights

· Crear y mantener pipelines analíticos que generen datos e insights para la toma de decisiones, utilizando análisis asistido por IA para identificar proactivamente tendencias, anomalías y oportunidades.

· Colaborar con científicos de datos, analistas y stakeholders de negocio en requerimientos de modelado dimensional, pipelines ETL distribuidos y migración de datos entre repositorios.

· Evaluar, comparar y mejorar patrones de diseño, enfoques del ciclo de vida de datos y alineamiento de ontologías, utilizando IA para modelar alternativas y acelerar pruebas de concepto.

· Trabajar con especialistas de datos y analítica para mejorar continuamente la funcionalidad, confiabilidad e inteligencia de los sistemas de datos.

Análisis de causa raíz y gestión de calidad

· Realizar análisis de causa raíz sobre datos y procesos internos y externos mediante herramientas de investigación asistidas por IA.

· Desarrollar y mantener marcos de calidad de datos, utilizando IA para automatizar la detección de anomalías, validación de esquemas y cumplimiento de contratos de datos en los pipelines.

· Desarrollar un sólido entendimiento de los dominios, dirección estratégica y necesidades de los usuarios para asegurar que los sistemas de datos estén alineados con resultados de negocio.

Requisitos

· Más de 4 años de experiencia como Data Engineer.

· Grado de posgrado en Ciencias de la Computación, Estadística, Informática,



Sistemas de Información u otro campo cuantitativo.

· Conocimiento avanzado de SQL y experiencia con bases de datos relacionales y elaboración de consultas.

· Experiencia práctica demostrable utilizando herramientas de IA para acelerar tareas de ingeniería de datos: desarrollo de pipelines, automatización de calidad de datos, generación de código o análisis de causa raíz, con ejemplos específicos.

· Experiencia construyendo y optimizando pipelines, arquitecturas y datasets.

· Sólidas capacidades analíticas trabajando con datasets no estructurados y desconectados.

· Experiencia con herramientas Big Data: Hadoop, Spark, Kafka u otras similares.

· Experiencia con bases de datos relacionales y NoSQL, incluyendo Postgres y Cassandra.

· Experiencia con herramientas de gestión de pipelines y workflows: Airflow, Luigi, Azkaban o similares.

· Experiencia con servicios cloud de AWS: EC2, EMR, RDS y Redshift.

· Experiencia con sistemas de procesamiento de streaming: Storm, Spark Streaming o similares.

· Conocimiento práctico de colas de mensajes, procesamiento de streams y almacenes de datos altamente escalables.

· Dominio de lenguajes orientados a objetos o scripting: Python, Java, Scala, C++ o similares.

· Experiencia apoyando equipos multifuncionales en entornos dinámicos y ágiles.

Experiencia preferida

· Experiencia diseñando o soportando infraestructura de datos para entrenamiento de modelos de IA/ML, incluyendo datasets anotados y feature stores.

· Familiaridad con plataformas de calidad u observabilidad de datos asistidas por IA, como Monte Carlo, Soda o similares.

· Experiencia con pipelines de procesamiento de datos basados en LLM o arquitecturas de generación aumentada por recuperación (RAG).

· Experiencia con datos del sector salud; familiaridad con estándares FHIR/HL7 será valorada.

· Bilingüe: español e inglés.

Sueldo: A partir de S/.100.00 al mes

Lugar de trabajo: Empleo remoto

📌 Senior Data Engineer (Perú)
🏢 Pradera Technologies
📍 Perú

Postulate a este anuncio

Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.

Suscribete a esta alerta:

Recibe por email las nuevas ofertas de trabajo para: senior data engineer (perú) / perú

Suscribete a esta alerta:

Recibe por email las nuevas ofertas de trabajo para: senior data engineer (perú) / perú