Проверкой фактов на подлинность займется новый алгоритм
Специалисты по цифровым сетям из Университета Индианы разработали новый вычислительный метод, который сможет справиться с непростой для человека задачей — проверкой фактов на подлинность.
Во время первых экспериментов с этим методом учёные создали простую вычислительную систему проверки фактов, которая присваивает баллы правдивости тезисам, касающимся истории, географии и развлечений, а также случайным предложениям, найденным в тексте известной онлайн-энциклопедии "Википедии".
В ходе нескольких экспериментов автоматизированная система последовательно выставляла оценки тезисам в зависимости от уверенности в правильности утверждений.
"Результаты оказались захватывающими и обнадёживающими, – делится сотрудник центра комплексных сетей и системных исследований при Университете Индианы Джованни Лука Чампалья (Giovanni Luca Ciampaglia), возглавлявший исследование. – Мы живём в эпоху информационной перегрузки, которая порождает обильную дезинформацию, неподтверждённые слухи и теории заговора, объём которых подрывает авторитет журналистов и общественности.
Наши эксперименты указывают на то, что многие абстрактные сложные задачи, с которыми сталкивается человек при анализе сетевого контента, можно решить вычислительно, и проверка истинности — одна из таких задач".
В качестве источника информации для эксперимента команда обратилась к "Википедии" из-за разносторонности и открытости ресурса. Хотя данные из статей "Википедии" не всегда точны на 100%, предыдущие исследования показали, что онлайн-энциклопедия почти так же надёжна, как и традиционные энциклопедии, но при этом охватывает больше областей знаний.
Учёные взяли фактическую информацию из инфобоксов на сайте и составили график верности трёх миллионов концепций и 23 миллионов связей между ними. Связи между двумя понятиями можно было назвать фактическими заявлениями (пример: "Сократ – человек" или "Париж – столица Франции", "Рим – столица Италии"). Команда применила свой алгоритм, чтобы ответить на простые вопросы, относящиеся к географии, истории и развлечениям. Например, программа соотносила национальности и государства, президентов и их супругов, оскароносных режиссёров и их фильмы, с которыми они выиграли награду.
Затем учёные использовали алгоритм для проверки фактов в отрывках из основного текста "Википедии", которые ранее были помечены человеком как истинные или ложные. В итоге они обнаружили положительную корреляцию между оценкой истинности, произведённую с помощью алгоритма.
Примечательно, что вычислительный метод оказался способен оценить правдивость даже той информации, что не содержится непосредственно в инфобоксах.
"Алгоритм, "измеряющий" правдивость тезисов, полагается также на косвенные связи между понятиями. – объясняет Чампалья. – Наш метод основывается на графиках, которые позволяют раскрыть эти косвенные связи".
Учёные намереваются провести дополнительные эксперименты с использованием графики, которая будет включать в себя информацию и из других источников человеческого знания (например, с открытой базы Freebase, созданной корпорацией Google).
По словам Чампалья, чем больше информации можно будет добавить в базы данных алгоритма, тем лучше будет итоговый результат.
"Дезинформация ставит под угрозу общественное мнение относительно огромного круга глобальных проблем социума, – комментирует соавтор исследования Филиппо Менцер (Filippo Menczer). – С увеличением зависимости от Интернета как источника информации, наш мир начинает нуждаться в инструментах, способных побороть дезинформацию, каждый день настигающую нас. Вычислительные фактологические алгоритмы могут стать частью решения этой проблемы".
Результаты исследования были опубликованы в журнале PLoS ONE.