Ingeniero Principal de Datos

Descripción

Resumen: Worth AI busca un Ingeniero Principal de Datos para liderar la arquitectura de datos a nivel empresarial, diseñar canalizaciones escalables, implementar la calidad de los datos y habilitar análisis y aprendizaje automático mediante sistemas seguros y eficientes desde el punto de vista de costos. Aspectos destacados: 1. Liderar iniciativas empresariales de arquitectura y plataforma de datos 2. Definir la arquitectura integral de datos y establecer estándares técnicos 3. Brindar liderazgo técnico y mentoría a ingenieros senior y del personal Worth AI, líder en la industria del software informático, busca un Ingeniero Principal de Datos talentoso y experimentado para unirse a su innovador equipo. En Worth AI, nuestra misión es revolucionar la toma de decisiones mediante el poder de la inteligencia artificial, al tiempo que fomentamos un entorno de colaboración y adaptabilidad, con el objetivo de generar un impacto significativo en el panorama tecnológico. Nuestros valores de equipo incluyen la responsabilidad absoluta, el trabajo en equipo único y la creación de fans apasionados tanto entre nuestros empleados como entre nuestros clientes. Worth busca un Ingeniero Principal de Datos para asumir la responsabilidad de la arquitectura y plataforma de datos a nivel empresarial. Diseñar y escalar canalizaciones confiables por lotes y en tiempo real, implementar la calidad y gobernanza de los datos, y habilitar análisis y aprendizaje automático mediante sistemas seguros y eficientes desde el punto de vista de costos. Colaborar con los equipos de ingeniería, producto, análisis y seguridad para transformar las necesidades comerciales en productos de datos duraderos. Responsabilidades Lo que harás: Arquitectura y estrategia Definir la arquitectura integral de datos (lago/lago-casa/almacén, por lotes/en tiempo real, CDC, metadatos). Establecer estándares para esquemas, contratos, orquestación, capas de almacenamiento y modelos semánticos/métricos. Publicar hojas de ruta, documentos de decisión arquitectónica (ADR) o propuestas de cambio (RFC), y estados objetivos finales («north star»); orientar las decisiones de construir frente a comprar. Plataforma y canalizaciones Diseñar y construir canalizaciones ELT/ETL y de eventos escalables y observables. Establecer patrones de ingesta (CDC, archivos, API, bus de mensajes) y políticas de evolución de esquemas. Proporcionar herramientas de autoservicio para analistas y científicos de datos (dbt, cuadernos, catálogos, almacenes de características). Garantizar la fiabilidad de los flujos de trabajo (idempotencia, reintentos, procesamiento retroactivo, acuerdos de nivel de servicio - SLA). Calidad y gobernanza de los datos Definir acuerdos de nivel de servicio (SLA) y objetivos (SLO) para los conjuntos de datos, actualidad, trazabilidad y niveles de certificación de los datos. Hacer cumplir los contratos y pruebas de validación; desplegar detección de anomalías y manuales de respuesta ante incidentes. Colaborar con el equipo de gobernanza en la catalogación, manejo de información personal identificable (PII), retención y políticas de acceso. Fiabilidad, rendimiento y costos Liderar la planificación de capacidad, particionamiento/agrupamiento y optimización de consultas. Introducir prácticas de ingeniería de confiabilidad del software (SRE) aplicadas a los datos (presupuestos de errores, análisis posteriores a fallos). Impulsar la gestión financiera de operaciones de datos (FinOps) para almacenamiento y cómputo; supervisar y reducir el costo por TB/consulta/trabajo. Seguridad y cumplimiento Implementar cifrado, tokenización y seguridad a nivel de fila/columna; gestionar secretos y auditorías. Alinear con los requisitos SOC 2 y las normativas de privacidad (por ejemplo, GDPR/CCPA; HIPAA, si aplica). Habilitación de ML y análisis Entregar conjuntos de datos y características versionados y documentados para inteligencia empresarial (BI) y aprendizaje automático (ML). Operacionalizar los flujos de datos para entrenamiento y producción, señales de desviación y gobernanza del almacén de características. Construir y mantener la capa semántica y la coherencia métrica para experimentación e inteligencia empresarial. Liderazgo y colaboración Brindar liderazgo técnico transversal a los equipos de trabajo (squads); mentorizar a ingenieros senior y del personal. Realizar revisiones de diseño y promover el consenso en decisiones complejas con compensaciones múltiples. Traducir objetivos comerciales en productos de datos junto con líderes de producto y análisis. Requisitos Más de 10 años de experiencia en ingeniería de datos (incluidos al menos 3 años como ingeniero del personal o principal, o con alcance equivalente). Experiencia comprobada liderando iniciativas empresariales de arquitectura y plataforma de datos. Amplia experiencia con al menos una nube (AWS) y un almacén o lago-casa moderno (por ejemplo, Snowflake, Redshift, Databricks). Conocimientos sólidos de SQL y de al menos un lenguaje de programación (Python o Scala/Java). Herramientas de orquestación (Airflow/Dagster/Prefect), transformaciones (dbt o equivalente) y procesamiento de flujos (Kafka/Kinesis/PubSub). Modelado de datos (formas normales, modelo estrella, data vault) y capas semánticas/métricas. Pruebas de calidad de datos, trazabilidad y observabilidad en entornos productivos. Buenas prácticas de seguridad: control de acceso basado en roles (RBAC) o atributos (ABAC), cifrado, gestión de claves y auditabilidad. Deseable Almacenes de características y operaciones de datos para ML; marcos de experimentación. Optimización de costos a gran escala; arquitecturas multi-inquilino. Herramientas de gobernanza (DataHub/Collibra/Alation), OpenLineage y frameworks de pruebas (Great Expectations/Deequ). Experiencia en cumplimiento normativo (SOC 2, GDPR/CCPA; HIPAA/PCI, según corresponda). Características del modelo obtenidas a partir de datos complejos de terceros (KYB/KYC, burós de crédito, APIs de detección de fraude) Beneficios Plan de atención médica (médico, dental y visual) Plan de jubilación (401k, IRA) Seguro de vida Tiempo libre remunerado ilimitado 9 días festivos remunerados Licencia familiar Trabajo desde casa Alimentos y bocadillos gratuitos (¡Acceso a membresía en Industrious Co-working!) Recursos para el bienestar