Портал SamMobile сообщает, что Samsung стала первой компанией, внедрившей в смартфоны широкий ИИ-функционал. В течение нескольких лет, каждые полгода, Samsung добавляла новые и улучшенные функции ИИ. В рамках своей последней разработки вендор представил собственный инструмент для оценки производительности искусственного интеллекта — TRUEBench.
На днях Samsung анонсировала запуск системы TRUEBench, которая позиционируется как надёжная тестовая платформа для оценки использования ИИ в реальных условиях. Этот тест, разработанный Samsung Research, призван устранить недостатки существующих инструментов для бенчмаркинга ИИ. Компания подчёркивает, что недостаток многих текущих тестов ИИ заключается в том, что эти системы ограничены английским языком и простыми связками вопрос-ответ.
TRUEBench оснащён автоматизированной системой оценки. Результаты тестирования доступны на платформе с открытым исходным кодом Hugging Face. Пользователи могут оценить до пяти моделей ИИ и сравнить их производительность при помощи TRUEBench.
Источник новости: www.ferra.ru
