ModelosAlta importância
Runway libera os pesos do Praxis-1, modelo de 27 bilhões de parâmetros que usa vídeo para controlar robôs, sob licença Apache 2.0
A Runway abriu para todos o Praxis-1, que apresentou em setembro só para parceiros. É um transformer de difusão do tipo mistura de especialistas, com 27 bilhões de parâmetros, que prevê ao mesmo tempo o vídeo e as ações do robô a partir de imagens da câmera, instruções em texto e a posição do robô. Segundo a empresa, é o melhor “world action model” do ranking RoboLab-120 da NVIDIA, com 46,2% de sucesso em 1.200 episódios, e supera todos os modelos VLA de pesos abertos. Pesos e código de inferência saem sob Apache 2.0, que permite uso comercial, no GitHub e no Hugging Face (com suporte ao LeRobot), e também no vLLM-Omni. O The Decoder lembra que o modelo ainda confunde objetos parecidos e não planeja bem sequências longas sozinho.
Publicado na edição nº 29 do Noticiário do Joãozinho ·
Fonte original
RunwayPesos no Hugging FaceCódigo no GitHubThe Decoder: limitações do modelo
https://runway.com/news/company-news/praxis-1-is-now-available