Conocimientos excluyentes:
- Python senior
- Data Flow
- OCI
Otros conocimientos:
- OCI Object Storage
- OCI Data Flow (Spark serverless)
- OCI SQL Query on Object Storage (SQL Endpoint)
- OCI SDK para Python
Descripción del perfil/habilidades/tecnologías/productos requeridos:
- Perfil de un desarrollador para migrar un Data Lake de AWS a OCI
- Manejo básico de servicios equivalentes (S3 ↔ OCI Object Storage).
- Conocimientos de autenticación y manejo de credenciales IAM y Compartments en OCI).
- Experiencia con datos en formatos Parquet, JSON.
- Lectura y escritura de datos en almacenamiento objeto.
- disposición para aprender SQL Endpoint en OCI.
- Ejecución de consultas y optimización básica.
- Optimización de jobs Spark a nivel código (particiones, joins, caché).
- Buen nivel en Python para desarrollo de scripts ETL.
- Uso de SDKs (OCI SDK en Python).
- Descripción de las actividades:
- Manejo de accesos a buckets/objetos.
- Automatización de deployments
- Desarrollo Scripts para copiar datos entre AWS y OCI (multi-part upload/download, paralelismo).
- Validaciones post-migración