Стартап Vals, специализирующийся на бенчмаркинге искусственного интеллекта, привлёк $40 млн в раунде Series A. Инвестором выступила фирма Andreessen Horowitz. Раунд последовал за seed-раундом, возглавленным фондами 8VC и Bloomberg Beta.
Компания была основана в 2024 году. Её сооснователь Райан Кришнан, 25 лет, ранее стажировался в Palantir, учился в Стэнфордском университете и работал с Microsoft и университетской лабораторией искусственного интеллекта. По его словам, Vals появилась на фоне того, что академические бенчмарки не успевают за быстрым развитием пограничных ИИ-моделей.
В отличие от большинства систем оценки, использующих публично доступные тесты, Vals не раскрывает материалы проверок, чтобы компании не могли целенаправленно обучать модели под конкретные задания. Стартап оценивает не общие знания, а способность моделей выполнять реальные задачи в юриспруденции, финансах и программировании. Также анализируются потенциальные риски в кибербезопасности, биобезопасности, психическом здоровье и рекурсивном самосовершенствовании.
По словам Кришнана, клиенты платят за оценки аналогично тому, как студенты оплачивают сдачу стандартизированных тестов, а результаты используют для доработки моделей. Выручка компании выросла в восемь раз за год, штат утроился до 25 сотрудников. В ближайшее время планируется найм и расширение офиса. Vals запустила программу оценки моделей для федеральных ведомств США.
