В России созданы алгоритмы для проверки ИИ-систем на ложные «галлюцинации»

МГППУ разработал алгоритмы и ПО для выявления л...

freepik.com

MaxДзенTelegram

В России созданы алгоритмы для проверки ИИ-систем на ложные «галлюцинации»

Специалисты Московского государственного психолого-педагогического университета разработали алгоритмы и программное обеспечение, позволяющее выявлять у больших языковых моделей так называемые «галлюцинации» — правдоподобные, но ложные ответы. Система автоматизирует работу промпт-инженеров и помогает проверять корректность содержания интеллектуальных ассистентов.

Принцип работы алгоритмов

Для анализа предлагается использовать два алгоритма: первый подбирает корректные запросы, второй оценивает правдоподобность утверждений. В основе подхода лежит представление запросов и ответов как элементов метрических пространств, где расстояния между текстами определяются через семантическое сходство. Это позволяет количественно оценивать смысловую близость и применять методы статистического анализа.

Применение результатов

Разработанные алгоритмы и ПО могут быть востребованы программистами, математиками и исследователями, работающими с большими языковыми моделями. С их помощью возможно более точное выявление ложных данных и повышение надежности работы ИИ-систем.

Больше новостей и эксклюзивных видео смотрите в канале Самара Онлайн 24 в MAX.

Читайте также:

MaxДзенTelegramВКонтактеОдноклассники