Метод автоматичного визначення семантично близьких фрагментів новинних текстів

Скорочена інформація про документ
dc.contributor.authorПетрасова, Світлана Валентинівнаuk
dc.contributor.authorГалкіна, Яна Романівнаuk
dc.contributor.authorМануйлов, Ілля Олександровичuk
dc.contributor.authorБородіна, Олександра Русланівнаuk
dc.contributor.authorШвець, Софія Ігорівнаuk
dc.date.accessioned2020-06-12T10:44:39Z
dc.date.available2020-06-12T10:44:39Z
dc.date.issued2019
dc.description.abstractСкладність семантичного аналізу текстової інформації, що міститься в новинних повідомленнях, визначається багатозначністю і синонімічністю, які властиві мові на всіх рівнях її представлення, що, перш за все, впливає на визначення смислово ї близькості мовних одиниць. Виявлення семантично близьких фрагментів текстів або перефразувань є актуальною проблемою у таких наукових напрямках як семантичний пошук інформації, видобування інформації, машинний переклад, визначення порушень авторських прав і т.п. , крім того широко використовується при рерайтингу. У статті проаналізовано основні проблеми рерайтинга, зокрема перефразування синтаксичних одиниць тексту зі збереженням смислового навантаження. Розглянуто сучасні методи визначення семантичної близькості слів, вказано основні переваги та недоліки. Запропоновано метод автоматичного виявлення синонімічних фрагментів новинних текстів на основі використання WordNet та розроблених синтаксичних правил, які зберігають інформацію про граматичні характеристики слів. Перевагою даного методу є те, що аналізується як граматична структура мови, так і смисл слів. Досліджуваний корпус представлено новинними текстами інформаційного агентства Reuters, служб CNN і BBC World News. Запропонований метод ідентифікації семантично зв’язних фрагментів тексту дозволяє виявити спільний інформаційний простір актуальних новин та може використовуватися для ефективного визначення близьких за змістом текстів в інформаційно-пошукових, експертних, аналітичних інформаційних системах. Вирішення завдання автоматичного визначення семантичної близькості може застосовуватися при автоматизованій побудові онтологій по тексту, для розширення існуючих і створення нових тезаурусів.uk
dc.description.abstractDepending on the ambiguity and synonymy at all language levels, the identification of semantic similarity of linguistic units is the challenging task of semantic analysis of text information contained in news reports. The extraction of semantically similar fragments of texts or paraphrases is an up-todate problem in fields of science such as semantic information retrieval, information extraction, machine translation, detection of copyright infringements, etc. and is widely used in rewriting. The article analyzes the main problems of rewriting, in particular, the paraphrasing of syntactic text units keeping the sense load. The modern methods for identification of semantic similarity of words, their advantages and disadvantages are considered. Based on the use of WordNet and the developed syntactic rules that store information about the grammatical characteristics of words, a method for automatic identification of synonymous fragments of news texts is proposed. The advantage of this method is that both the grammatical structure of the language and the meaning of words (using WordNet) are analyzed. The experimental corpus is represented by news texts from Reuters news agency, BBC World News and CNN services. The proposed method for identifying semantically similar text fragments allows defining the common information space of current news and can be used to effectively identify related texts in information retrieval, expert, analytical information and rewriting systems. The automatic identification of semantic similarity could be implemented in automated construction of ontologies, in expansion of existing and creation of new thesauri.en
dc.identifier.citationМетод автоматичного визначення семантично близьких фрагментів новинних текстів / С. В. Петрасова [та ін.] // Вісник Національного технічного університету "ХПІ". Сер. : Актуальні проблеми розвитку українського суспільства = Bulletin of the National Technical University "KhPI". Ser. : Actual problems of Ukrainian society development : зб. наук. пр. – Харків : НТУ "ХПІ", 2019. – № 1. – С. 98-102.uk
dc.identifier.doidoi.org/10.20998/2227-6890.2019.01.17
dc.identifier.orcidhttps://orcid.org/0000-0001-6011-135X
dc.identifier.urihttps://repository.kpi.kharkov.ua/handle/KhPI-Press/46902
dc.language.isouk
dc.publisherНаціональний технічний університет "Харківський політехнічний інститут"uk
dc.subjectсемантикаuk
dc.subjectтекстиuk
dc.subjectструктура текстівuk
dc.subjectрерайтингuk
dc.subjectперефразуванняuk
dc.subjectонтологіяuk
dc.subjectтезаурусuk
dc.subjectсемантична близькість слівuk
dc.subjectновинні текстиuk
dc.subjectWordNeten
dc.subjectrewritingen
dc.subjectcorpus of news textsen
dc.subjectparaphrasingen
dc.subjectsemantic similarityen
dc.subjectsyntactic rulesen
dc.titleМетод автоматичного визначення семантично близьких фрагментів новинних текстівuk
dc.title.alternativeMethod for automatic identification of semantically similar fragments of news textsen
dc.typeArticleen

Файли

Контейнер файлів
Зараз показуємо 1 - 1 з 1
Ескіз
Назва:
vestnik_KhPI_2019_1_Petrasova_Metod.pdf
Розмір:
606.6 KB
Формат:
Adobe Portable Document Format
Опис:
Завантажити
Ліцензійна угода
Зараз показуємо 1 - 1 з 1
Ескіз недоступний
Назва:
license.txt
Розмір:
1.71 KB
Формат:
Item-specific license agreed upon to submission
Опис:
Завантажити

Зібрання

Вісник № 01. Актуальні проблеми розвитку українського суспільства
Кафедра "Інтелектуальні комп'ютерні системи"