Единый государственный фонд гидрометеорологических данных как большие данные. Универсальный парсер структуры данных в формате языка описания гидрометеорологических данных

Аннотация

данная статья относится к серии статей, посвященной работе с данными, размещёнными в Едином государственном фонде данных Федеральной службы России по гидрометеорологии и мониторингу окружающей среды (Росгидромет), а именно, технологиям и инструментам для работы с этими данными как с большими данными.
Статья посвящена универсальному парсеру структуры данных в формате ЯОД (языка описания гидрометеорологических данных). Структура данных в формате ЯОД также называется ЯОД описанием. Разработанный парсер осуществляет анализ, разбор и сохранение структуры ЯОД описания для последующей конвертации данных в этом формате. Для реализации парсера была разработана система классов на основе описания формата ЯОД. Результатом работы парсера является структура ЯОД в виде набора взаимосвязанных объектов разработанных классов для обеспечения возможности чтения или записи данных в формате ЯОД. Универсальный парсер является ключевой составляющей комплекса программных средств взаимной конвертации данных в формате ЯОД в современные распространённые форматы.
В работе представлены диаграмма классов в нотации UML и их описание, особенности универсального парсера, подробное описание этапов его работы.
Универсальный парсер ЯОД описания разработан на базе Всероссийского научно-исследовательского института гидрометеорологической информации — Мирового центра данных.