Saltar al contenido

Investigación

ML Evaluation Engineer (h/m/x)

Exacto y trazable es nuestra promesa. Tú construyes las evaluaciones que muestran si la cumplimos, para cada modelo y cada caso de uso.

Todos los puestos
Abierto · inicio desde el T4 de 2027
Equipo
Investigación
Contrato
Jornada completa
Lugar
Múnich · híbrido
Inicio
desde el T4 de 2027
Idiomas
Alemán e inglés

Qué harás

  • Construir y mantener conjuntos de evaluación a partir de casos de uso reales
  • Desarrollar métricas de exactitud, fidelidad a las fuentes, permisos y coste
  • Integrar evaluaciones automáticas en el desarrollo, para cada cambio
  • Comparar modelos de distintos proveedores y extraer recomendaciones
  • Analizar los tipos de error y corregirlos con ingeniería

Qué aportas

  • Piensas en mediciones: dices abiertamente lo que una cifra no muestra y cambias de opinión cuando los datos lo exigen
  • Titulación en informática, estadística, matemáticas o un campo afín
  • Experiencia evaluando sistemas de ML o LLM
  • Python excelente y buena base estadística
  • Mirada crítica sobre benchmarks y errores de medición
  • Trabajas con herramientas de IA con total naturalidad

Puntos extra

  • Experiencia con LLM-as-a-judge, anotación humana o métricas de retrieval
  • Publicaciones o un trabajo de fin de estudios sobre evaluación

Proceso de selección

Así contratamos para este puesto

Seis pasos. En los pasos 4 y 5 muestras cómo trabajas: con IA y en la práctica de tu puesto.

  1. Paso 1Formulario online

    Candidatura

    Un enlace a LinkedIn o a tu CV y unas frases sobre por qué demi. Sin subir archivos, sin carta de presentación larga.

    En qué nos fijamos

    • Qué has construido, vendido o movido
    • Por qué este puesto, por qué ahora
  2. Paso 2Remoto · con un fundadorTu tiempo: 45 min

    Entrevista personal

    Una conversación con uno de los fundadores. Ambas partes se conocen: tu trayectoria, nuestra misión, cómo trabajamos.

    En qué nos fijamos

    • Curiosidad y empuje
    • Responsabilidad propia
    • ¿Encaja contigo nuestra forma de trabajar?
  3. Paso 3Remoto o presencial

    Entrevista técnica

    Vamos a fondo: tus conocimientos, tu experiencia y cómo estructuras problemas y justificas decisiones.

    En qué nos fijamos

    • Profundidad en tu campo
    • Comunicación clara
    • Razonamiento sólido
  4. Paso 4Tarea y presentación en directoPara cada puesto

    Reto de IA

    Automatizas una tarea real con las herramientas de IA actuales que elijas y nos enseñas cómo lo has hecho. En ventas igual que en ingeniería.

    • Automatizar

      Construyes un flujo que hace el trabajo de forma repetible: con agentes, scripts o workflows.

    • Herramientas actuales

      Usas modelos y herramientas de agentes actuales y sabes cuál sirve para qué.

    • Linux y terminal

      Te mueves con soltura en la shell: archivos, scripts, entornos, automatización.

    • Autonomía

      Avanzas por tu cuenta: investigar, probar, comprobar y preguntar lo justo.

    • Comprobar

      Muestras cómo verificas los resultados de la IA antes de confiar en ellos.

  5. Paso 5En directo y como tarea

    Reto del puesto

    Investigación: Pensar como científico, entregar como ingeniero.

    1. ADebate sobre un paper

      Discutimos un paper reciente de tu campo: qué se sostiene, qué no, qué construiríamos a partir de él.

    2. BCaso de evaluación

      Diseñas cómo medir las respuestas de un agente: conjunto de datos, métricas, tipos de error.

    3. CPrototipo con IA

      Conviertes una idea en un pequeño prototipo con herramientas de IA y revisas el resultado con espíritu crítico.

    Tu tarea

    ¿Es la respuesta realmente correcta?

    Diseñas un esquema de evaluación para veinte respuestas de agentes, lo implementas con IA y muestras dónde la evaluación automática se aparta del juicio humano.

    En qué nos fijamos

    • Oficio
    • Rapidez con calidad
    • Criterio
  6. Paso 6Presencial · Múnich

    Visita en Múnich y oferta

    Nos visitas en el Centro Tecnológico de Múnich y conoces a los fundadores y a tu futuro equipo. Si encaja para todos, te hacemos una oferta con un paquete retributivo atractivo.

    En qué nos fijamos

    • Conocer el equipo y la oficina
    • Resolver dudas
    • Tu oferta

Qué ofrecemos

  • Herramientas y tokens

    Las mejores herramientas de IA y los tokens para usarlas. Probar un modelo nuevo no necesita aprobación.

  • Responsabilidad desde el primer día

    Te incorporas pronto y eres responsable de productos, clientes y decisiones.

  • Crecer hacia el liderazgo

    Quien da grandes resultados crece con la empresa hacia puestos de liderazgo.

  • Directamente con los fundadores

    Total transparencia en las decisiones de estrategia, go-to-market y producto.

  • Participar en el éxito

    Remuneración atractiva con la posibilidad de participar en el éxito a largo plazo de demi.

  • Oficina en el MTZ

    Una oficina moderna en el Centro Tecnológico de Múnich, cerca del Parque Olímpico, con el mejor equipamiento.

Candidatura

Envía tu candidatura.

ML Evaluation Engineer (h/m/x)

Un enlace y unas frases. Sin subir archivos, sin carta de presentación larga.

Por ejemplo, tu perfil de LinkedIn o una carpeta compartida con tu CV.

Bastan de tres a cinco frases.

Usamos tus datos solo para tu candidatura y los borramos como máximo seis meses después de cerrar el proceso, salvo que aceptes la bolsa de talento. Política de privacidad

Tu configurador

Aún no hay casos de uso

Tu configurador todavía está vacío

Añade un caso de uso desde cualquier tarjeta o página de caso y mira lo que aporta al año, con el cálculo. Gratis, sin registro, sin compromiso: pruébalo y cambia cada cifra.

Ver casos de uso