Salario negociable
Scalepex
Plano, TX, USA
❋ ¿Por qué Scalepex? Scalepex es una empresa de servicios dinámica especializada en ofrecer soluciones para marcas premium como Nike, Pepsi, Toyota, Virgin y Walgreens. Nuestra misión es conectar a importantes líderes del mercado con profesionales de alto nivel de todo el mundo, fomentando la colaboración, la eficiencia y el crecimiento. ❋ Lleva tu portafolio al siguiente nivel trabajando con uno de nuestros clientes de más rápido crecimiento. ¡Únete a la vanguardia de la innovación en Scalepex! Acerca del puesto Buscamos un Ingeniero de Datos en AWS con experiencia y sólida trayectoria en la creación de soluciones de datos escalables y conocimientos en conjuntos de datos relacionados con servicios públicos. El candidato ideal tendrá al menos 5 años de experiencia en ingeniería de datos, un profundo conocimiento de sistemas distribuidos y dominio de servicios y herramientas de AWS como Step Functions, Lambda, Glue y Redshift. Este puesto se centrará en diseñar, desarrollar y optimizar tuberías de datos para respaldar el análisis y la toma de decisiones en la industria de servicios públicos. Responsabilidades principales Diseñar y construir tuberías de datos: Desarrollar tuberías de datos escalables y confiables utilizando servicios de AWS (por ejemplo, Glue, S3, Redshift) para procesar y transformar grandes conjuntos de datos procedentes de sistemas de servicios públicos, como contadores inteligentes o redes eléctricas. Orquestación de flujos de trabajo: Utilizar AWS Step Functions para orquestar flujos de trabajo a través de tuberías de datos; se acepta experiencia con Airflow, aunque se prefiere Step Functions. Integración y transformación de datos: Implementar procesos ETL/ELT utilizando PySpark, Python y Pandas para limpiar, transformar e integrar datos de múltiples fuentes en conjuntos de datos unificados. Experiencia en sistemas distribuidos: Aprovechar la experiencia en sistemas distribuidos complejos para garantizar confiabilidad, escalabilidad y rendimiento al manejar grandes volúmenes de datos de servicios públicos. Desarrollo de aplicaciones sin servidor: Utilizar funciones de AWS Lambda para crear soluciones sin servidor que automatizen tareas de procesamiento de datos. Modelado de datos para análisis: Diseñar modelos de datos adaptados a casos de uso en el sector de servicios públicos (por ejemplo, predicción del consumo de energía) para permitir análisis avanzados. Optimización de tuberías de datos: Monitorear y mejorar continuamente el rendimiento de las tuberías de datos para reducir la latencia, aumentar el rendimiento y garantizar alta disponibilidad. Garantizar la seguridad y cumplimiento de los datos: Implementar medidas de seguridad robustas para proteger datos sensibles de servicios públicos y asegurar el cumplimiento con las regulaciones del sector. Requisitos Calificaciones requeridas Mínimo 5 años de experiencia en ingeniería de datos. Dominio de servicios de AWS como Step Functions, Lambda, Glue, S3, DynamoDB y Redshift. Sólidas habilidades de programación en Python, con experiencia en PySpark y Pandas para el procesamiento de grandes volúmenes de datos. Experiencia práctica con sistemas distribuidos y arquitecturas escalables. Conocimiento de procesos ETL/ELT para integrar diversos conjuntos de datos en sistemas centralizados. Conocimiento de conjuntos de datos específicos del sector de servicios públicos (por ejemplo, contadores inteligentes, redes eléctricas) muy valorado. Sólidas habilidades analíticas y capacidad para trabajar con conjuntos de datos no estructurados. Conocimiento de prácticas de gobernanza de datos para garantizar precisión, consistencia y seguridad de la información. Experiencia sólida en ingeniería de datos en AWS. Capacidad para trabajar de forma independiente. Capacidad para colaborar con equipos multifuncionales, incluyendo interacción y comunicación con interesados del negocio. Habilidades profesionales de comunicación oral y escrita. Sólidas habilidades para resolver problemas y solucionar errores, con experiencia en tomar decisiones con juicio maduro. Excelentes habilidades de trabajo en equipo e interpersonales. Capacidad para obtener y mantener la autorización requerida para este puesto.