В статье проанализированы модели и методы обработки естественного языка и выбраны современные технологии обучения моделей с целью разработки веб-сервиса для создания тестов на основе анализа текста с использованием технологий обработки естественного языка. В исследовании используются интеллектуальные методы анализа данных и алгоритмы для генерации вопросов, а также правильных и неправильных ответов из текста. Авторы обосновывают выбор нейронной сети для генерации тестов на основе текста на английском и украинском языках и характеризуют источники данных для обучения. В исследовании также описана работа предложенной модели, которая послужит основой для создания веб-сервиса. Необходимые для эксперимента данные были извлечены и преобразованы в удобный для использования формат после детального рассмотрения этих наборов данных. Был разработан и реализован алгоритм обучения для 6 моделей, после их обучения были получены ценные метрики. Дополнительно были разработаны серверный интерфейс и веб-интерфейс для взаимодействия с ними.
PL
W artykule przeanalizowano modele i metody przetwarzania języka naturalnego oraz wybrano nowoczesne technologie szkolenia modeli w celu opracowania usługi internetowej do tworzenia testów opartych na analizie tekstu z wykorzystaniem technologii przetwarzania języka naturalnego. Badanie uwzględnia metody i algorytmy inteligentnej analizy danych w celu generowania pytań oraz poprawnych i niepoprawnych odpowiedzi z tekstu. Autorzy uzasadniają wybór sieci neuronowej do generowania testów na podstawie tekstu w języku angielskim i ukraińskim oraz charakteryzują źródła danych do szkolenia. Badanie opisuje również działanie proponowanego modelu, który posłuży jako podstawa do stworzenia usługi internetowej. Po szczegółowym przeglądzie tych zbiorów danych, niezbędne dane do eksperymentu zostały wyodrębnione i przekształcone w wygodny do użycia format. Zaprojektowano i zaimplementowano algorytm treningowy dla 6 modeli, a po ich wytrenowaniu uzyskano wartościowe metryki. Dodatkowo opracowano interfejs po stronie serwera i interfejs sieciowy do interakcji z nimi.
EN
The purpose of the work is to analyze models, natural language processing methods, and select modern technologies for training these models, as well as to develop a web service for creating tests based on text analysis using natural language processing technologies. The study considers methods and algorithms for intelligent data analysis to generate questions and correct and incorrect answers from the text. The authors justify the choice of a neural network for generating tests based on English and Ukrainian text, and characterize data sources for training. The study also describes the activity of the proposed model, which will serve as a basis for creating a web service. After a detailed review of these datasets, the necessary data for the experiment were extracted and transformed into a convenient format for use. The training algorithm for 6 models was designed and implemented, and valuable metrics were obtained after their training. Additionally, a server-side and web interface were developed to interact with each other.
JavaScript is turned off in your web browser. Turn it on to take full advantage of this site, then refresh the page.