Компьютер отличит правду от вымысла

Учеными разработан уникальный алгоритм, используя который компьютер сможет среди массы текстового контента в интернете вычленить новостные статьи и заметки, отделяя их от рассказов и других художественных текстов. О своей работе исследователи написали обзор, с которым можно ознакомиться на сайте arXiv.org.

Правда, принцип работы нового алгоритма довольно примитивен. Алгоритм анализирует тексты на предмет повторения определенных словоформ. Потом результаты анализа разных текстов сравниваются и на основании этого определяется тип текста. Для тестирования новой методики исследователи проанализировали 400 случайных рассказов из электронной библиотеки «Гутенберг» и 400 новостных заметок с ресурса National Public Radio. Художественные рассказы ограничили только произведениями писателей ХХ века.

Из 400 новостных заметок были правильно определены 69.1%, а для рассказов процент совпадений был равен 73.8%. Стоит отметить, что в последнее время аналитические возможности компьютеров все более востребованы. И уровень этих возможностей поражает воображение.

Не так давно другим коллективом исследователей проведена научно-практическая работа по применению компьютеров для анализа текстовой информации. Ученые смогли разработать алгоритм, используя который компьютер расшифровал язык из группы мёртвых семитских языков. На расшифровку машина потратила всего лишь несколько часов. Правда, мощность ЭВМ, которую использовали для эксперимента, не оглашается.

• Компьютеры и Интернет ::: Прочее

Комментариев нет