Компания Vals AI, получившая финансирование от венчурного фонда Andreessen Horowitz, намерена развить платформу для бенчмаркинга систем искусственного интеллекта. Цель — сделать оценку моделей ИИ нейтральным и проверяемым инструментом на фоне стремительного роста их количества на рынке.
Бенчмаркинг — это процесс тестирования и сравнения программных решений по единым метрикам. В сфере искусственного интеллекта он позволяет измерить точность, скорость, логические способности и другие характеристики моделей. С каждым годом на рынок выходят десятки новых систем, и для пользователей, разработчиков и бизнеса всё сложнее объективно сравнить их между собой.
По информации Vals AI, существующие подходы к оценке ИИ-моделей нередко страдают от субъективности: тесты могут быть настроены под конкретные продукты, а методология не всегда доступна для независимой проверки. Стартап стремится выстроить тестирование так, чтобы результаты оставались беспристрастными и воспроизводимыми вне зависимости от того, кто их запрашивает.
Поддержка со стороны Andreessen Horowitz — одного из крупнейших венчурных фондов в сфере технологий — говорит о заинтересованности инвесторов в развитии инфраструктуры для работы с ИИ. Фонд вкладывался в десятки компаний, связанных с искусственным интеллектом, от разработки моделей до прикладных решений для корпоративного сектора.
Конкретные сроки запуска и технические детали платформы Vals AI пока не раскрываются. Ожидается, что сервис будет ориентирован на корпоративных заказчиков, исследовательские лаборатории и разработчиков, которым необходима объективная оценка моделей перед выбором или внедрением.
Рынок бенчмаркинга ИИ активно развивается: параллельно над аналогичными инструментами работают другие организации. Позиционирование Vals AI как нейтрального посредника определит, насколько широко его разработка будет принята отраслью.
