Ingeniero Senior de Aseguramiento de Calidad (QA) de IA

En TWG Group Holdings, LLC (“TWG Global”), impulsamos la innovación y la transformación empresarial en una variedad de industrias—incluyendo servicios financieros, seguros, tecnología, medios y deportes—aprovechando los datos y la IA como activos fundamentales. Nuestro enfoque basado primero en IA y nativo de la nube ofrece inteligencia en tiempo real y aplicaciones empresariales interactivas, permitiendo decisiones informadas tanto para clientes como empleados. Priorizamos prácticas responsables con datos y IA, garantizando estándares éticos y cumplimiento regulatorio. Nuestra estructura descentralizada permite que cada unidad de negocio opere de forma autónoma, apoyada por un Grupo Central de Soluciones de IA, mientras que alianzas estratégicas con proveedores líderes en datos e IA impulsan iniciativas revolucionarias en marketing, operaciones y desarrollo de productos. Colaborará con la gerencia para avanzar en la transformación de datos y analítica, mejorar la productividad y permitir decisiones ágiles basadas en datos. Al aprovechar relaciones con startups tecnológicas destacadas y universidades, ayudará a crear ventajas competitivas e impulsar la innovación corporativa. En TWG Global, sus contribuciones respaldarán nuestro objetivo de crecimiento sostenido y retornos superiores, ya que entregamos valor e impacto excepcionales en nuestros negocios. TWG Global busca un Ingeniero Senior de Aseguramiento de Calidad (QA) de IA comprometido para unirse a nuestro equipo enfocado en productos de IA de grado comercial. Este puesto es fundamental para garantizar la confiabilidad, precisión y rendimiento de nuestras soluciones de IA mediante procesos sistemáticos de pruebas y procesos de bucle humano en el sistema (HIL). El candidato ideal tendrá experiencia práctica con productos de IA, evaluación de modelos y automatización de pruebas. Sus funciones serán: Diseñar, desarrollar y ejecutar planes de prueba completos para casos de uso y escenarios complejos de IA. Validar la precisión de los agentes y aplicaciones de IA, asegurando resultados consistentes y de alta calidad. Realizar pruebas de lanzamiento, del sistema y de rendimiento para mantener estándares de grado comercial en todas las versiones del producto. Llevar a cabo evaluaciones internas de modelos, incluyendo la preparación y revisión de datos de entrenamiento y evaluación. Desarrollar y mantener una biblioteca de casos de prueba de regresión para validación continua de casos de uso. Colaborar con científicos de datos e ingenieros para optimizar procesos de prueba y asignación de recursos. Diseñar e implementar casos de prueba automatizados, integrando HIL cuando la automatización sea insuficiente. Comparar el rendimiento del agente de IA frente a competidores y estándares del sector. Asegurar pruebas centradas en el usuario, validando que las salidas de IA sean precisas, confiables y satisfagan necesidades reales de aplicación. Comparar el rendimiento de modelos de IA con los modelos LLM más avanzados y de vanguardia para garantizar consistencia y calidad. Requisitos 2–5 años de experiencia en pruebas de productos de IA, aseguramiento de calidad o campos relacionados. Título universitario en Ciencias de la Computación, Ingeniería o campo afín (preferido). Experiencia comprobada con productos de IA, ingeniería de indicaciones (prompt engineering) y evaluación de modelos LLM, familiaridad con una amplia gama de herramientas y plataformas de IA. Sólidos conocimientos de programación en Python, con experiencia práctica construyendo suites de pruebas automatizadas usando herramientas como Selenium, Playwright o frameworks similares. Fuertes habilidades en manipulación de datos y preparación de datos de prueba. Dominio en el diseño y ejecución de pruebas automatizadas. Excelentes habilidades analíticas, de resolución de problemas y comunicación. Capacidad para trabajar de forma independiente dentro de un entorno de equipo estructurado, gestionando eficazmente tareas y prioridades. Experiencia en empresas de productos de IA, particularmente en startups tecnológicas o fintech, es muy deseable. Beneficios Ubicación del puesto Este puesto está ubicado en Santa Mónica, CA. Compensación El salario base para este puesto será de $160,000-$190,000. Se ofrecerá un bono como parte del paquete de compensación, además de un completo conjunto de beneficios médicos, financieros y/u otros beneficios. TWG es un empleador que ofrece igualdad de oportunidades, y todos los solicitantes calificados recibirán consideración para empleo sin importar raza, color, religión, género, orientación sexual, identidad de género, origen nacional, discapacidad o condición de veterano protegido.