Исследователи из Университета Карнеги-Меллон изобрели алгоритм, способный объяснить незрячим людям интернет-мемы.

BSIP

Мемы – социокультурное явление, без которого жизнь была бы намного скучнее. Американские ученые решили, что мемы должны быть доступны всем, поэтому разработали специальную систему, работающую с точностью до 92%.

Оказалось, что разработка подобного алгоритма – задача не из легких. Многие слабовидящие используют программы для распознавания текста или специальные режимы. Это, тем не менее, не дает полного понимания контекста мема, а для незрячих недоступно даже обычное описание изображения.

Алгоритм сканирует мемы и сверяет их с базой данных ранее существовавших метафор перед тем, как описать изображение в альтернативном тексте файла. «В своей работе мы опираемся на то, что за основу мемов часто берется одно изображение, тогда как текстовый контент меняется», – говорит Коул Глисон, один из авторов проекта.

Эффективность алгоритма предложили оценить слабовидящим и слепым. По шкале от 1 до 5, где 5 означает, что человек полностью понял шутку, средний показатель составил 3,95.