Vals busca padronizar avaliação de modelos de IA

A startup Vals, fundada em 2024, está buscando padronizar a avaliação de modelos de inteligência artificial (IA) no mercado. Fundada por Rayan Krishnan, de 25 anos, a empresa visa corrigir falhas nos sistemas de benchmarking tradicionais.

Segundo Krishnan, muitos sistemas de benchmarking antigos não acompanham o avanço rápido dos modelos de IA modernos. 'Estamos vendo muitos novos modelos muito capazes chegarem ao mercado rapidamente, mas os benchmarks acadêmicos não estão acompanhando essa evolução', afirma.

Com sede em San Francisco, Vals oferece testes que medem a capacidade dos modelos de IA em tarefas complexas relacionadas a diferentes setores, como lei, finanças e codificação. A empresa também trabalha em benchmarks para a melhoria recursiva dos modelos, mental saúde, segurança cibernética e biosegurança.

Os clientes pagam Vals para testar seus modelos de IA, avaliando tanto os aspectos positivos quanto negativos dessas tecnologias. A startup já conseguiu levantar US$40 milhões em uma rodada de série A liderada por Andreessen Horowitz.