Salario negociable
Qode
South Carolina, USA
Título del puesto: Ingeniero de Datos AWS Glue Ubicación: Fort Mill, SC o Nueva York, NY (Híbrido) Resumen del trabajo Estamos buscando un Ingeniero de Datos AWS Glue altamente calificado para diseñar, desarrollar y optimizar pipelines de datos a gran escala y flujos de trabajo ETL en AWS. El candidato ideal tendrá amplia experiencia en servicios de datos nativos de la nube de AWS, modelado de datos y orquestación de pipelines, con experiencia práctica en la creación de soluciones de datos robustas y escalables para entornos empresariales. Principales responsabilidades Diseñar, desarrollar y mantener pipelines ETL utilizando AWS Glue, Glue Studio y Glue Catalog. Ingerir, transformar y cargar grandes volúmenes de datos desde fuentes estructuradas y no estructuradas hacia lagos/almacenes de datos en AWS. Trabajar con S3, Redshift, Athena, Lambda y Step Functions para almacenamiento, consulta y orquestación de datos. Crear y optimizar scripts PySpark/Scala dentro de AWS Glue para transformaciones complejas. Implementar controles de calidad de datos, trazabilidad y monitoreo en todos los pipelines. Colaborar con analistas comerciales, científicos de datos y equipos de productos para ofrecer soluciones de datos confiables. Garantizar el cumplimiento de los requisitos de seguridad, gobernanza y normativas relacionadas con los datos (preferiblemente BFSI). Solucionar problemas en producción y optimizar el rendimiento de los pipelines. Requisitos obligatorios Más de 12 años de experiencia en Ingeniería de Datos, con al menos 5 años en servicios de datos en la nube de AWS. Amplia experiencia en AWS Glue, S3, Redshift, Athena, Lambda, Step Functions y CloudWatch. Dominio de PySpark, Python y SQL para ETL y transformaciones de datos. Experiencia en modelado de datos (modelos estrella, copo de nieve, modelos dimensionales) y ajuste de rendimiento. Experiencia práctica en arquitectura e implementación de lagos y almacenes de datos. Excelentes habilidades para resolver problemas y capacidad para trabajar en entornos Agile/Scrum. Requisitos preferidos Experiencia en el sector BFSI o gestión de patrimonios. Certificación AWS Certified Data Analytics – Specialty o certificación AWS Solutions Architect. Conocimientos sobre pipelines CI/CD para ingeniería de datos (CodePipeline, Jenkins, GitHub Actions). Conocimiento de herramientas de BI/visualización como Tableau, Power BI o QuickSight. Formación académica Título universitario en Informática, Tecnologías de la Información, Ingeniería o campo relacionado. Se prefiere máster.