Сибирский федеральный университет

Тип публикации: статья из журнала

Год издания: 2021

Идентификатор DOI: 10.14489/vkit.2021.05.pp.045-052

Ключевые слова: message processing, lexical analysis, syntactic analysis, regular expressions, decision tree, weather data, обработка сообщений, лексический анализ, синтаксический анализ, регулярные выражения, дерево решений, метеоданные

Аннотация: Рассмотрена возможность использования методов анализа данных для поиска и исправления ошибок в выпускаемых метеорологами сообщениях. Предложен алгоритм обработки исходных данных (синтаксический и логический анализ) для предварительной очистки данных от шумов и определения ошибок формата для каждого типа сообщения. После предварительной подготовки методом классификации соотносится полученный набор характеристик сообщения с ранее обученной моделью для определения ошибочности текущей метеосводки и вывода соответствующего сообщения оператору в режиме реального времени. Продемонстрировано разработанное программное обеспечение, в котором реализован предложенный алгоритм, позволяющий повысить качество метеорологических прогнозов. The issues of using data analysis methods to find and correct errors in the reports issued by meteorologists are considered. The features of processing various types of meteorological messages are studied. The advantages and disadvantages of existing methods of classification of text information are considered. The classification methods are compared in order to identify the optimal method that will be used in the developed algorithm for analyzing meteorological messages. The prospects of using each of the methods in the developed algorithm are described. An algorithm for processing the source data is proposed, which consists in using syntactic and logical analysis to pre-clean the data from various kinds of noise and determine format errors for each type of message. After preliminary preparation the classification method correlates the received set of message characteristics with the previously trained model to determine the error of the current weather report and output the corresponding message to the operator in real time. The software tools used in the algorithm development and implementation processes are described. A complete description of the process of processing a meteorological message is presented from the moment when the message is entered in a text editor until the message is sent to the international weather message exchange service. The developed software is demonstrated, in which the proposed algorithm is implemented, which allows to improve the quality of messages and, as a result, the quality of meteorological forecasts. The results of the implementation of the new algorithm are described by comparing the number of messages containing various types of errors before the implementation of the algorithm and after the implementation.

Журнал: Вестник компьютерных и информационных технологий

Выпуск журнала: Т. 18, № 5

Номера страниц: 45-52

ISSN журнала: 18107206

Место издания: Москва

Издатель: Издательский дом "Спектр"

• Ященков К. Г. (Сибирский федеральный университет)
• Дымко К. С. (Сибирский федеральный университет)
• Уханов Н. О. (Сибирский федеральный университет)
• Хныкин А. В. (Сибирский федеральный университет)

• РИНЦ (eLIBRARY.RU)
• Список ВАК