OpenAI crea LifeVal, una prueba que mide si la IA resuelve tareas cotidianas, como inscribir a un hijo en la escuela y armar una dieta
OpenAI presentó LifeVal, una evaluación con tareas de la vida cotidiana en cuidado familiar, salud, educación, administración del hogar, finanzas personales, compras y servicios del gobierno, que el modelo debe cumplir usando el navegador, el control del ordenador y conectores. Las tareas salieron de dos grandes encuestas de uso del tiempo (la American Time Use Survey y el Multinational Time Use Study) y de una nueva encuesta a 3.995 personas sobre dónde más quieren ayuda. En los ejemplos divulgados, los modelos actuales de OpenAI obtienen 93,1% en elegir e inscribir a un niño en el jardín de infancia tras una mudanza, 98,0% en organizar voluntarios antes de una inundación, 100% en encontrar una casa y 90,4% en armar un plan de comidas para un padre con diabetes. OpenAI dice que usó la prueba durante el último año para guiar la mejora de los modelos.
Fuente OpenAI