Data Lake Engineer

Vacante para la empresa Talent Center Institute en Álvaro Obregón, Ciudad de México

Inegenirías o Licenciaturas en Tecnologías de la Información

Inglés Avanzado

Experienciade 3 años trabajando con tecnologías AWS IaC Data Lake desde el diseño hasta la implementación.

Manejo de lenguajes de programación como Python, Java o Scala.

Familiaridad con herramientas ETL y plataformas de procesamiento de datos como Apache Spark o Hadoop.

Sólidos conocimientos de bases de datos SQL y NoSQL.

Conocimientos fundamentales de AWS:

Servicios básicos de AWS: Familiaridad con los servicios clave de AWS, como EC2 (Elastic Compute Cloud), S3 (Simple Storage Service), RDS (Relational Database Service), VPC (Virtual Private Cloud), IAM (Identity and Access Management) y Lambda, Cloudformation, DMS, Glue, EMR, Kinesis e Iceberg AWS.

Misión

Contribuir al diseño, la implementación y la gestión de una infraestructura AWS escalable y segura. Implementar las mejores prácticas en materia de seguridad, rendimiento y optimización de costes. Crear automatizaciones y scripts para mejorar la eficiencia operativa. Participar en la configuración de componentes de red como: VPC, subredes y grupos de seguridad. Supervisar el rendimiento de las aplicaciones, las alertas y los registros. Mantener la documentación y elaborar informes de rendimiento.

Responsabilidades Técnicas

• Diseñar y crear arquitecturas de lago de datos escalables y eficientes.
• Integrar diferentes fuentes de datos en el lago de datos utilizando herramientas ETL (extraer, transformar, cargar).
• Garantizar la calidad, integridad y seguridad de los datos en el lago de datos.
• Colaborar con los equipos de análisis y ciencia de datos para proporcionar acceso a los datos necesarios.
• Supervisar el rendimiento del lago de datos y optimizar los procesos para mejorar la eficiencia.
• Documentar los procesos y procedimientos relacionados con el manejo de datos.

Arquitectura de AWS: comprensión de los principios de la arquitectura y los patrones de diseño de AWS para crear soluciones escalables y seguras. Infraestructura como código (IaC), CloudFormation, Terraform y AWS CLI. AWS Systems Manager: Familiaridad con para automatizar tareas, gestionar configuraciones y administrar instancias. Scripts de automatización: Capacidad para escribir scripts en Bash, Python o PowerShell para automatizar tareas administrativas y de configuración.

Adicionalmente colabora en procesos: Redes y Seguridad, Supervisión y Mantenimiento, Gestión de Datos, implementación y funcionamiento, mejores prácticas y patrones de arquitectura, solución de problemas, Costos.

Software y Herramientas

• Servicios sin servidor de AWS
• Infraestructura como código (Cloud Formation, Terraform)
• Control de versiones Git (Github, Gitlab)
• Python avanzado
• Ansible

Nivel de educación deseada:
Superior - titulado

Nivel de experiencia deseada:
Nivel Experto

Función departamental:
Tecnología / Internet

Industria:
Recursos Humanos