OpenAI cria o LifeVal, teste que mede se a IA resolve tarefas do dia a dia, como matricular filho na escola e montar dieta
A OpenAI apresentou o LifeVal, uma avaliação com tarefas da vida cotidiana em cuidados com a família, saúde, educação, administração da casa, finanças pessoais, compras e serviços de governo, que o modelo precisa cumprir usando navegador, controle do computador e conectores. As tarefas saíram de duas grandes pesquisas de uso do tempo (a American Time Use Survey e o Multinational Time Use Study) e de uma nova pesquisa com 3.995 pessoas sobre onde elas mais querem ajuda. Nos exemplos divulgados, os modelos atuais da OpenAI marcam 93,1% em escolher e matricular uma criança no jardim de infância depois de uma mudança, 98,0% em organizar voluntários antes de uma enchente, 100% em achar uma casa e 90,4% em montar um plano de refeições para um pai com diabetes. A OpenAI diz que usou o teste no último ano para guiar a melhoria dos modelos.
Fonte OpenAI