О поиске эквивалентных текстов
Электронная книга
- Автор: Д. С. Бухаров
- Издатель: Синергия
- Год: 2016
- ISBN:
- Цена: 152 Руб.
Знание - оружие, и книга - фундаментальный носитель знаний. И идеальный спутник в пути! И это характерный вид той работы, что дарит новые сведения из разнообразных областей, рассказывает о некоторых методах познания человеческого общества - "О поиске эквивалентных текстов"
В статье описан подход к формированию поискового множества, используемого при определении эквивалентов текста. Задача такого вида возникает при поиске дубликатов текста, определении авторства и возможного плагиата, организации библиотечного поиска, а также при создании поисковых систем Интернета. В подходе, представленном в статье, учитывается ряд особенностей: частотность слов, пунктуация, морфемная структура слов, регистр букв и артефакты текста (специфические цифро-буквенные сочетания). Разработанная программа протестирована на наборе данных, в число которых включены как оригиналы текстов, так и их специальным образом модифицированные варианты. В результате проведенного эксперимента определены слабые стороны подхода. Приведены варианты по улучшению разработанного программного средства и схема взаимодействия модулей разработанной программы после модификации.
Не сомневаемся, что "О поиске эквивалентных текстов" окажется своевременной, полезной и познавательной.