4. Архивация и каталогизация данных MODIS
4.1. Основные функции приложения
Каталог ScanEx Catalog Manager позволяет создавать и использовать каталог спутниковых снимков (рис. 6). В каталоге сохраняется набор параметров, позволяющий в дальнейшем быстро находить снимки по заданным критериям и просматривать сохраненные параметры, не извлекая из архива сами снимки.
Регистрация снимков в каталоге осуществляется автоматически путем считывания информации непосредственно из файлов с изображениями. Кроме параметров снимка в каталоге также сохраняется метка тома диска и расположение файла на нем, что позволяет при необходимости легко его отыскать. Кроме заносимой автоматически информации пользователь имеет возможность связать с записями о снимках изображение в формате BMP или JPEG (так называемый диіск1оок-«квиклук») и произвольный текстовый комментарий.
Рис. 6. Интерфейс приложения ScanEx Catalog Manager
Каталог организован в виде набора таблиц. Первые три таблицы создаются автоматически при первоначальной установке каталога:
- Global catalog и Local catalog -- таблицы, предназначенные для хранения основного каталога. Сюда необходимо заносить снимки, которые будут составлять основу постоянного каталога;
- Last query -- временная таблица, в которую заносят записи, отобранные в результате поиска в основном каталоге. При каждой операции поиска эта таблица перезаписывается.
Для того чтобы сохранить результаты поиска и отбора снимков, пользователь имеет возможность создавать новые таблицы путем сохранения существующих под другим именем.
Пакет состоит из двух приложений -- Catalog Manager и Ingest Manager. Первое предназначено для внесения информации в каталог, ее поиска и поддержки каталога. Ingest Manager предназначен только для внесения данных в каталог и предоставляет для этого дополнительные возможности по сравнению с Catalog Manager (автоматическое создание «квиклуков» и поддержка данных спектрорадиометра MODIS).
4B34.2. Приложение INGEST MANAGER
Приложение Ingest Manager предназначено для автоматического извлечения метаданных из файлов спутниковых изображений и внесения их в каталог для дальнейшего использования с программой Catalog Manager. Это приложение предоставляет ряд дополнительных возможностей при занесении данных в каталог. Среди них -- автоматическое создание и регистрация изображений для предварительного просмотра («квиклук») и протоколирование выполняемых операций. В текущей реализации каталога это единственный способ регистрации данных спектрорадиометра MODIS.
Ingest Manager позволяет выполнять только две операции: регистрацию метаданных снимков в каталоге и создание и сохранение в виде BMP уменьшенных изображений (без занесения в каталог). Последнюю операцию можно использовать для визуальной оценки набора снимков или подбора параметров создания уменьшенных изображений, при этом в базы данных каталога не вносят никаких изменений. Обе операции выполняются над всеми файлами данных поддерживаемых форматов, расположенными в указываемой пользователем директории.
4.3. Согласование архива данных MODIS
Для согласованного ведения архива и возможности упрощенного обмена данными необходимо выполнять следующие указания:
1. Долговременному хранению в архиве подлежат данные MODIS уровня 1А (MOD01). Для обработки принятых с помощью станций ЕОСкан и УниСкан данных до этого уровня необходимо использовать программный пакет IMAPP. Визуальный контроль качества исходных (уровень 0, или PDS) и обработанных данных осуществляется с помощью приложения ScanViewer.
2. В архиве предлагается хранить только снятые в дневном режиме относительно безоблачные (не более 50% облачности) фрагменты одинакового размера. В особых случаях (например, при необходимости частого мониторинга заранее определенных территорий) возможно изменение критериев отбора данных. Фрагментация исходных изображений на фрагменты осуществляется автоматически приложением unpack пакета IMAPP.
Основным носителем для архивирования и передачи данных служат компакт-диски однократной записи (CD-R). На рабочем месте установлены следующие программные пакеты: ScanViewer, IMAPP, ПО записи данных на CD-R.
5B34.4. Порядок обработки данных MODIS для помещения в архив
Прием. Осуществляется обычным образом (подробное описание можно найти в руководствах пользователя станций ЕОСкан и УниСкан). Снимки, имеющие большое количество помех или отсутствующих данных (по визуальному контролю изображения во время приема), дальнейшей обработке не подлежат.
Распаковка и фрагментация (нарезка данных на фрагменты фиксированного размера). Осуществляет программа unpack пакета IMAPP. Для выполнения этой операции необходимо в Проводнике вызвать контекстное меню для принятого PDS файла и выбрать команду «IMAPP unpack — Fragment». В результате выполнения операции в папке MOD01 будут созданы несколько выходных файлов с префиксом MOD01 и расширением hdf.
Отбор фрагментов и дополнительная обработка. Далее необходимо с помощью приложения ScanViewer просмотреть полученные фрагменты и отобрать те из них, которые сняты в дневном режиме, содержат не менее 50 «дневных» сканов и имеют значительные (не менее половины площади) свободные от облачности участки земной поверхности. Для отобранных файлов необходимо выполнить операцию геолокации с помощью приложения geolocate пакета IMAPP. Для этого нужно в контекстном меню для отобранных файлов выбрать команду «IMAPP Geolocate».
Запись на архивные носители и передача данных. После геолокации отобранные файлы MOD01 (без MOD03) необходимо записать на компакт-диски. Размер стандартного фрагмента -- около 215 Мб. Таким образом, на один стандартный компакт-диск может быть записано 3 фрагмента. Меньший размер файла может быть вызван тем, что в нем содержится количество сканов меньше стандартного (80) или он содержит данные, полученные в ночном режиме. Все записываемые архивные диски должны иметь уникальные метки дисков (Volume label), которые присваиваются в процессе записи. Это необходимо для возможности автоматического учета и каталогизации данных. Диски, подлежащие передаче, должны иметь метку, состоящую из двух частей: постоянного идентификатора приемного центра (несколько букв, которые должны быть предварительно согласованы с получателем информации) и порядкового номера, увеличивающегося на единицу для каждого последующего диска. Например, первый диск может иметь метку «MSAH0001» (MSAH -- идентификатор станции, 0001 -- порядковый номер диска), следующий -- «MSAH0002».
Еще по теме 4. Архивация и каталогизация данных MODIS:
- Сжатие и архивация данных
- B63. Обработка данных спектрорадиометра MODIS
- 3B1. Прием данных MODIS на наземную приемную станцию
- B105. Трансформация в географические проекции, экспорт в ГИС и тематическая обработка изображений MODIS
- Глава 11 Базы данных и система управления базами данных MS Access
- Базы данных и системы управления базами данных
- КАЧЕСТВЕННЫЙ И КОЛИЧЕСТВЕННЫЙ АНАЛИЗ ДАННЫХ ПСИХОДИАГНОСТИКИ ЛИЦ С ОТКЛОНЕНИЯМИ В РАЗВИТИИ. ПАРАМЕТРЫ КАЧЕСТВЕНОЙ ОЦЕНКИ И ИНТЕРПРЕТАЦИИ ДАННЫХ ПСИХОДИАГНОСТИКИ.
- Титул VII. Об усыновлении и освобождении из-под власти49 и о других способах прекращения власти (De adoptionibus et emancipationibus et aliis modis quibus potestas solvitur)
- 3.6 Типы данных и форматы данных
- Банки данных, базы данных, базы знаний
- F. Функции Международного центра данных
- Стандартные продукты Международного центра данных
- БАЗЫ ДАННЫХ