Качество ИИ проверят без участия человека

Новая разработка специалистов Центра практического искусственного интеллекта Сбербанка и НИУ ВШЭ оценивает качество моделей искусственного интеллекта без участия человека и размеченных данных.

Об этом пишет ТАСС со ссылкой на пресс-службу Сбера. Там привели в сообщении слова директора департамента развития ИИ-решений Сбербанка Сергея Рябова:

До появления специализированной метрики аналитики данных выбирали архитектуру и момент остановки обучения модели вслепую или через ресурсозатратные эксперименты с разметкой. Это требовало сотен GPU-часов и замедляло вывод моделей в прод. Наша метрика автоматически оценивает качество эмбеддингов по их внутренней геометрии. Обучают несколько конфигураций — Persistence указывает лучшую. Или обучают одну модель — метрика определяет эпоху остановки, избегая переобучения.

Отмечается, предложенная метрика превосходит зарубежные аналоги по корреляции качества на прикладных задачах. Продукт автоматически подбирает оптимальный размер эмбеддингов, количество слоёв и функцию потерь, а также указывает на какой эпохе обучения нужно остановиться, чтобы модель не осталась сырой и не переобучилась.

Решение точнее таргетирует рекомендации на маркетплейсах или в онлайн-кинотеатрах, улучшит работу голосовых помощников и ускорит интеграцию искусственного интеллекта в медицину. Помимо этого, снизится барьер применения моделей без учителя в области дефицитом разметки.

изображение Freepik