Funciones Principales:

1. Ingesta y replicación de datos con AWS DMS (CDC y batch) desde fuentes on-premise y cloud.

2. Procesamiento distribuido con PySpark en EMR/Glue, optimizando rendimiento y costos.

3. Orquestación de ETL/ELT con Airflow o Step Functions.

4. Flujos de datos serverless con Lambda, SQS y EventBridge en casi tiempo real y batch.

5. Gestión de arquitectura backend de Databricks sobre AWS

6. Manipulación de procesos de datos con Databricks (Jobs, Unity Catalog, External Components)

Conocimientos y Certificaciones Indispensables:

- Databricks sobre AWS

- Experiencia en AWS / Databricks

- PySpark en EMR/Glue

- SQL

- Airflow o Step Functions

- Lambda

- Arquitecturas Data Lake / Lakehouse

Conocimientos y Certificaciones Deseables:

- Databricks Data Engineer Associate

- Data Engineer Associate AWS

Habilidades Blandas:

- Trabajo con equipos multidisciplinarios

- Pensamiento analitico con enfoque a resolucion de problemas

📌 Senior Data Engineer ( AWS & Data Bricks) (Lima)
🏢 Informatica Delta
📍 Lima