КОМП'ЮТЕРНА МОДЕЛЬ ГЕНЕРАЦІЇ ВІДПОВІДЕЙ У ПОШУКОВІЙ СИСТЕМІ НА ОСНОВІ НЕСТРУКТУРОВАНОЇ БАЗИ ЗНАНЬ

Анотація

Метою роботи є розробка моделі системи запит-відповідь, що спроможна створювати конкретні текстові відповіді на запит користувача, використовуючи у своєму алгоритмі генерацію наукового тексту на природній мові. Система визначає смислові зв'язки в документах, створюючи при цьому новий текст, який містить відповідь на питання користувача. У статті розглядається модель системи, що базується на розробленому підході до формування семантичної моделі документа, який дозволяє отримувати кількісні показники семантичних властивостей документу на природній мові і сенсові зв’язки між компонентами тексту. Розроблена у вигляді прикладного програмного автомата, система семантичного пошуку має використовувати модель, спроможну працювати із достатньо формалізованим типом знань, а саме - науковим текстом і дозволяти автоматично формувати програмну семантичну модель як окремого документа, так і всього корпусу знань в цілому. На основі отриманої структури додаток має генерувати текстову відповідь на отриманий користувальницький запит. Це призводить до важливої наукової властивості створеної моделі – додаток повинен мати можливість використовувати нерозмічений заздалегідь корпус текстів, що являє собою неструктуровану базу знань, задля чого необхідно створити та дослідити семантичну модель наукового тексту на природній мові, а також розробити алгоритм її формування з семантичної мережі. Такий підхід вирішує більшість питань обробки тексту задля подальшої автоматичної генерації відповіді. Додатково розроблена підсистема автоматичної класифікації наукових текстів за ступенем їх зв’язності, що використовує у своїй роботі кількісні характеристики семантичних властивостей створеної моделі наукового тексту. У статті описані розроблені критерії оцінки створених систем та алгоритмів. Отримана таким чином система, окрім організації зручного пошукового середовища, утворює універсальну модель для проведення автоматичної обробки текстів на семантичному рівні для груп слов’яномовних текстів формального стилю, набір інструментів якої дозволяють гнучко створювати і оброблювати тематичні повнотекстові корпуси документів без попередньої семантичної розмітки та отримати програмну модель тексту формалізованої стильової спрямованості із кількісними характеристиками семантичних властивостей тексту, на основі яких можливо вирішувати інші завдання автоматичної обробки текстів.

The aim of the work is to develop a request-response system model capable of creating specific textual responses to a user’s request, using a scientific text generating in a natural language in its algorithm. The system determines the semantic links in the documents, while creating a new text containing the answer to the user's question. The article discusses a model of a system based on the developed approach to the formation of a semantic model of a document, which allows you to get quantitative indicators of the semantic properties of a document in a natural language and semantic links between components of a scientific text. Developed as an application software, the semantic search system should use a model capable of working with a sufficiently formalized type of knowledge, namely - scientific text and allow you to automatically form a software semantic model of a single document and the body of knowledge as a whole. Based on the received structure, the application should generate a text response to the received user request. This leads to an important scientific property of the created model - the application should be able to use unstructured corpus of texts, which is an unstructured knowledge base, for which it is necessary to create and explore a semantic model of scientific text in natural language, and develop an algorithm for its formation from the semantic network. This approach solves most word processing issues for further automatic generation.  In addition, a subsystem for the automatic classification of scientific texts by the degree of their connectivity was developed, which uses quantitative characteristics of the created model of a scientific text in its work. The article describes the developed criteria for evaluating the created systems and algorithms. The system thus obtained, in addition to organizing a convenient search environment, forms a universal model for automatic text processing at a semantic level for groups of Slavic-language texts of a formal style, a set of tools that allow you to flexibly create and process thematic full-text document bodies without preliminary semantic markup and get a program text model formalized stylistic orientation with quantitative characteristics of semantic properties text and, on the basis of which it is possible to solve other problems of automatic word processing.