
- •1.1. Информация и сигналы
- •1.2. Информационные технологии и системы
- •База знаний;
- •Механизм вывода;
- •Интерфейс и пользователь.
- •1.3. Передача и оценка информации
- •1.4. Алгоритмы
- •2.1. Цели создания, назначение и структура еаис
- •2.2. Этапы развития еаис
- •2.3. Ведомственная интегрированная телекоммуникационная сеть
- •3.1. Общие принципы и органы управления
- •3.2. Правовые основы применения электронных документов и информационных технологий в таможенном деле и торговле
- •Глава 1. Общие положения.
- •Глава 2. Условия использования электронной цифровой подписи. Глава 3. Удостоверяющие центры.
- •Глава 4. Особенности использования электронной цифровой подписи. Глава 5. Заключительные и переходные положения.
- •3.3. Основные направления развития
- •4.1. Назначение и классификация вычислительных сетей
- •4.2. Физическая передающая среда для связи компьютеров
- •4.3. Эталонная модель взаимодействия вычислительных систем
- •4.4. Устройства организации взаимодействия в вычислительных сетях
- •4.5. Принципы управления и доступа в вычислительных сетях
- •4.6. Глобальная сеть Интернет
- •4.7. Параметры рабочих станций и вычислительных сетей
- •4.8. Контроль и восстановление
- •4.9. Средства вычислительных сетей таможенных органов
- •5.1. Размещение и организация
- •5.2. Понятия базы данных и системы управления базами данных
- •5.3. Файловая модель
- •5.4. Иерархическая и сетевая модели представления данных
- •5.5. Реляционная модель данных
- •5.6. Системы управления базами данных
- •5.7. Классификация и кодирование
- •5.8. Базы данных еаис
- •5.9. Информационно-поисковые системы
- •Август 14.08.2007
- •Январь 27.01.2007
5.8. Базы данных еаис
таможенных органов России
Назначение основных баз данных, справочников и классификаторов
Компьютерные базы данных ЕАИС условно можно разбить на три большие группы:
-
нормативно-справочная информация (НСИ): электронные классификаторы и кодификаторы, правовые и нормативные акты, эксплуатационная документация на АРМ и т.п.;
-
оперативная информация: электронные копии таможенных документов, получаемые и формируемые в ходе таможенного оформления и контроля (ГТД, ТД, ДТС, ТПО и др.); данные и документы, получаемые и формируемые в связи с выполнением операций учета, ревизии и аудита, оперативных разработок и т.п.);
-
статистическая информация, являющаяся производной от баз оперативной информации или первичной, если формирование таких баз автоматически не может производиться средствами ЕАИС.
Практически каждое функциональное подразделение таможенных органов имеет собственную БД для текущей работы.
При загрузке в БД электронные образы таможенных документов проверяются специальными программными средствами на их достоверность и непротиворечивость. Результаты работы подразделений каждой таможни ежедневно передаются по линиям передачи данных в вычислительные центры региональных информационно-технических служб, на базе которых действуют региональные центры передачи электронных данных и организованы региональные базы данных (РБД). Отсюда данные передаются в ГНИВЦ ФТС России, где функционирует центральная база данных (ЦБД). Сопровождение ЦБД осуществляет ГНИВЦ.
Для обеспечения надлежащего качества информации на каждом из уровней осуществляется ее автоматизированный контроль, и если данные не соответствуют предъявляемым к ним требованиям, соответствующие электронные документы возвращаются на нижестоящий уровень для устранения обнаруженных ошибок. Кроме того, из ГНИВЦ в функциональные подразделения РТУ и таможен регулярно передаются корректировки НСИ.
Постоянно растет число различных классификаторов и справочников, используемых при таможенном оформлении и контроле. Уже в 2000 г. БД с НСИ составляли более сотни классификаторов и справочников, в том числе:
примечания по акцизам;
список уполномоченных банков;
311
коды изменения реквизитов банков; паспорта бартерных сделок; классификатор нарушений; реестр таможенных перевозчиков; декларанты-посредники; особенности перемещения товаров; единицы измерения; экономические ареалы; примечания к экспортной пошлине; географические ареалы;
классификация групп таможенных платежей; классификатор причин задержания; примечания по импортному тарифу; категории участников ВЭД;
классификатор сроков поступления валютной выручки; классификатор форм расчетов; срок оплаты товаров - импорт;
таможенные органы России и их структурные подразделения; типы возвратов/ взысканий; лицензии; книжки МДП;
расчетные ставки ввозных таможенных платежей; нарушители правил ВТТ; страны мира и территории;
преференции, льготы и иные особенности по уплате таможенных платежей; таможенные режимы; номера личных платежей; номера плашек;
примечания по сертификатам безопасности; примечания по классификации товаров по ТН ВЭД; примечания по лицензированию; примечания к НДС;
примечания по товарам, на которые нет преференции;
примечания по подтверждению сертификации происхождения;
счета участников ВЭД;
зарегистрированные участники ВЭД;
региональные пункты сбора информации;
характер сделки;
реестр СВХ;
реестр таможенных складов; административно-территориальное деление; разновидности товаров двойного назначения; статьи/пункты статей нарушений;
организации - нарушители правил таможенного оформления;
312
таможенные платежи; коды ТН ВЭД; разделы ТН ВЭД; группы ТН ВЭД; товарные позиции ТН ВЭД; товарные подпозиции ТН ВЭД; коды товаров по ГС; хронология по ТН ВЭД; товары двойного применения; коды таможенных управлений; условия поставки; коды и наименования валют; курсы валют; валютные ценности; виды транспорта; классификатор видов квот и др.
Как отмечалось ранее, возможны несколько технологий организации взаимодействия пользователя с базами данных. Наиболее перспективные из них -архитектура клиент-сервер и интранет-технологии - реализуются во всех вновь разрабатываемых и внедряемых в практику работы таможенных органов информационных системах. Например, на основе этих технологий доступа в каждом таможенном управлении организовано взаимодействие в режиме on-line с региональной базой данных (РБД), что позволяет должностным лицам таможенных органов обращаться с запросами из своих ЛВС на удаленный сервер РБД. Создаваемая система электронного декларирования также ориентирована на использование интранет-технологий. Однако ряд АРМ, созданных до 1999 г. и до сих пор используемых в таможенных органах, функционирует в режимах, когда общая БД находится на сервере локальной сети, который работает в режиме файл-сервера.
Центральный банк данных ФТС России
Фактически ЦБД представляет собой ряд относительно независимых БД, каждая из которых предназначена для хранения и обработки электронных копий одного или группы первичных таможенных документов. При этом основу ЦБД составляет БД ГТД. Состав и структура баз формировались эволюционно по мере возникновения задач сбора, хранения и обработки электронных копий первичных таможенных документов. Соответственно, каждая из баз ориентирована на хранение одного документа (или группы тесно связанных документов).
ЦБД ЕАИС функционирует под управлением СУБД Oracle. ФТС России имеет договор с фирмой- разработчиком СУБД Oracle, в рамках которого осуществляется доработка под нужды ФТС России и поставка новых версий системы.
313
Каждая БД соответствует отдельной физически и логически независимой функциональной подсистеме. В целом структура ЦБД определяется составом и структурой хранящихся в ней документов.
На начало 2003 г. информационную основу ЦБД ЕАИС составляли следующие базы (банки) данных:
электронных копий ГТД;
валютного контроля;
электронных копий таможенных приходных ордеров (ТПО); временного ввоза (вывоза) товаров по процедуре карнет-АТА; мониторинга таможенного оформления; автоматизированной системы «Автоконтроль»;
электронных копий документов контроля доставки (транзитных деклараций); нормативно-справочной информации;
агрегированных данных таможенной статистики внешней торговли;
конфиската;
штрафов [47].
Работа с ЦБД осуществляется сотрудниками ГНИ ВЦ при помощи специализированных комплексов программных средств (КПС), выполняющими входной контроль загружаемых данных. Контролируются форматы полей, их заполнение, соответствие содержимого полей справочникам и т.п. Документ признается правильным, если все проверяемые поля удовлетворяют критериям проверки.
Информация из ЦБД используется для:
подготовки регламентной отчетности для функциональных подразделений ФТС России;
подготовки внерегламентной отчетности для функциональных подразделений ФТС России и по запросам внешних организаций;
подготовки регламентной отчетности в рамках соглашений ФТС России с другими ведомствами.
Для решения этих задач в ГНИВЦ используется около 60 КПС.
ЦБД ЕАИС представляет собой средство получения содержательной информации о процессах таможенного оформления и контроля, а не хранилище электронных копий первичных документов.
На основе ЦБД формируются данные государственной статистики внешней торговли России, анализируются товарооборот, поступление средств в государственный бюджет. В частности, ЦБД используется при подготовке отчетов функциональных подразделений ФТС России, для издания ежеквартального бюллетеня и годового сборника «Таможенная статистика внешней торговли Российской Федерации», при подготовке статистических справок в рамках соглашений ФТС России с другими ведомствами и др.
Основой для различных аналитических исследований являются БД ГТД, ТД и ТПО, которые реализованы: на уровне таможенных постов и таможен - в среде, поддерживающей формат DBF-файлов; на уровне регионов - преимущественно в среде СУБД Oracle; на федеральном уровне - в среде СУБД Oracle. Передача данных между уровнями осуществляется в пакетном режиме несколько раз в сутки.
314
На начало 2000 г. общий объем информационного массива в ЦБД достиг 800 Gb. При этом ежегодное наращивание информационного поля достигало уровня 45-50 Gb [25, 26]. Информационные массивы содержат данные ГТД с 1992 г. (около 560 000 документов на 2000 г.), ТПО - с 1997 г. (около 600 000 документов на 2000 г.), Автоучет/Автоконтроль - с 1996 г. (около 700 000 документов на 2000 г.).
Ведение баз данных НСИ осуществляется администратором системы и реализуется посредством генератора программных приложений НСИ, оформленного в виде пакета прикладных программ - «АРМ НСИ».
Таким образом, на начало XXI в. ЦБД фактически представляла собой ряд физически и логически независимых баз (банков) данных (включая банк НСИ), эксплуатирующихся под управлением СУБД Oracle, каждая из которых функционировала как отдельная функциональная подсистема. Поскольку их проектирование велось независимо друг от друга и в разное время, в ЦБД не было логической целостности, а в ряде случаев допускалось дублирование информации. Кроме того, вследствие ориентированности на хранение документов структура ЦБД сильно зависела от структуры первичных таможенных документов.
Задача создания типовых ДБ таможенной информации на уровне РТУ до 2000 г. не ставилась и не решалась. В результате в каждом РТУ был реализован свой вариант региональной базы данных (РБД). При этом в РТУ различались как структуры БД, так и программные средства, используемые для их ведения. Однако с конца 2000 г. были проведены работы, направленные на унификацию ЦБД и РБД ЕАИС.
Концепция информационно-технической политики ГТК России (разд. 2.5) и проект «Модернизация информационной системы таможенных органов» привели к довольно существенным изменениям взглядов на методы хранения и доступа к информации, информационного обмена, в значительной мере потому, что в начале XXI в. таможенная служба вышла на новый уровень развития таможенного дела, в результате чего произошло резкое увеличение информационных ресурсов и числа их пользователей; получаемая таможенной службой информация стала более широко использоваться для управления государственной политикой; стало налаживаться информационное взаимодействие с авто-
315
матизированными системами других ведомств и стран, которые имеют разные и несовместимые с принятыми в ЕАИС форматами.
В рамках проводимых работ было определено, что основным содержанием работ по унификации БД таможенной информации на уровне ФТС России является создание ЦБД ЕАИС на основе перепроектирования существующих БД электронных копий таможенных документов. ЦБД ЕАИС при этом понимается как интегрированный информационный ресурс, имеющий общую структуру и программные средства ведения.
Основными элементами ЦБД ЕАИС являются:
- оперативная база данных (ОБД), созданная на основе модели процессов таможенного оформления и контроля с включением нормативно-справочной информации;
- архив электронных копий первичных таможенных документов;
- хранилище данных, отделенное от ОБД и предназначенное для выдачи справок и отчетов, решения задач анализа и прогнозирования;
- репозитарий метаданных.
Поступающие сообщения регистрируются в журнале транзакций (ТТ). Состав компонентов ЦБД ЕАИС в рамках принятого варианта концепции приведен на рис. 5.21.
Кардинальное
отличие нового варианта построения
ЦБД ЕАИС состоит в том, что она из
простого архива независимых электронных
документов превращается в единую
информационную систему, которая будет
эффективным средством анализа и
получения информации для управления
экономической
316
и таможенной политикой России, совершенствования технологий таможенного оформления и контроля.
Одна из важнейших компонент новой ЦБД - хранилище данных, или информационное хранилище. Фактически это новый тип СУБД, предназначенной для хранения и анализа большого числа разнородных данных и документов. Они все шире используются в качестве информационной базы в аналитических системах, в первую очередь в системах поддержки принятия решений (СГШР). Последнее обстоятельство являлось одной из причин выбора концепции информационных хранилищ, так как более активное использование информационных ресурсов ФТС России для оптимизации государственного управления -важнейшее направление развития ЕАИС.
В технологиях работы с информационным хранилищем (Data Warehouse -DW) обработку данных можно разделить на два относительно независимых процесса. Первый из них связан с «обработкой транзакций в реальном времени» (технологии OLTP). В результате в БД накапливается первичная информация о функционировании структурного подразделения (организации). Второй процесс связан с выполнением аналитической обработки в реальном времени (технологии OLAP, Data Mining - применяются для построения различных отчетов, поиска функциональных и логических закономерностей в накопленной информации, построения моделей и правил, которые объясняют найденные аномалии и/или с определенной вероятностью прогнозируют развитие рассматриваемых процессов). Например, это может быть анализ объемов перемещаемых товаров, динамики изменения номенклатуры перемещаемых через таможенную границу товаров и др.
В информационном хранилище для структурирования и указания связей между данными используется методология метаданных (метаданные - это описывающие данные). Метаданные хранятся в репозитарии - специальной БД. Они необходимы для описания каталогов и схем расположения данных, кроме того позволяют также определять время, источник и приемник данных, алгоритм выполненного над ними преобразования. Это нужно для того, чтобы (при необходимости) найти первичную информацию, на которой основывались обобщения.
Поступающие из таможен электронные документы первоначально помещаются в архив (см. рис. 5.21). В последующем все обмены данными, их перераспределение осуществляются через ОБД.
Сведения в ОБД собираются со всех баз данных, создаваемых на рабочих местах сотрудников таможенных органов. Затем они анализируются, сортируются, объединяются, располагаются в порядке, удобном для поиска и выборки. Между хранящимися объектами информации устанавливаются необходимые логические связи.
После соответствующей обработки данные загружаются в хранилища данных, и соответствующие изменения вносятся в репозитарии. В последующем информация из хранилищ используется для быстрого выполнения запросов, формирования различных отчетов.
317
Журнал транзакций (ТТ) - отдельная часть ЦБД, недоступная пользователям (поддерживается с особой тщательностью), в которую поступают записи обо всех запросах и изменениях в данных. Все обращения к данным и их изменения отслеживаются специальной программой «Монитор таможенных транзакций».
Витрины данных - БД, в которых информация хранится по определенному признаку или предназначению. Иными словами, витрины данных - это относительно небольшие БД, создаваемые на основе ресурсов информационных хранилищ. Они обеспечивают пользователей ЦБД тематической информацией, касающейся отдельных направлений деятельности таможенных органов (ход сбора таможенных платежей, информация для сотрудников правоохранительного блока таможенных органов и др.). Для каждой категории пользователей можно создать свою витрину, на которой отображать всю необходимую им информацию.
На рисунке 5.22 показаны методические и программные основы принимаемых проектных решений по хранению и обработке информационных ресурсов ФТС России [46].
Рис. 5.22. Направления развития информационных систем ЕАИС
Задача создания хранилищ данных достаточно сложна, и ее решение связано с рядом нижеперечисленных проблем.
1. Хранилища данных работают с разнообразными внешними источниками: различными информационными системами, электронными архивами, каталога-
318
ми и справочниками, статистическими сборниками и т.д. Все эти источники реализованы на основе различных форматов, программных и аппаратных средств, которые нужно объединить, построив единую функционально согласованную информационную систему.
2. Формирование, сохранение и представление метаданных. Для аналитичес- ких систем поддержки принятия решений база метаданных жизненно необхо- дима (как путеводитель в незнакомом городе). Пользователю, кроме структуры и взаимосвязей данных, необходимо знать:
-
источники получения данных и степень их достоверности (одна и та же информация может поступить в БД из различных источников);
-
периодичность обновления (время от последнего и следующего обновления);
-
собственников данных (для определения путей доступа к этим данным);
-
статистическую оценку запросов (в том числе времени и объема полученного ответа).
3. Защита информации как от угроз нарушения целости данных, так и от угроз нарушения конфиденциальности. Собранная из разных источников информа- ция, охватывающая все стороны деятельности организации, практически всег- да представляет собой государственную или коммерческую тайну и требует той или иной степени защиты.
4. Потребность в необходимости хранения больших объемов хранилищ данных.
Все вышеперечисленное свидетельствует о том, что информационные системы на основе хранилищ представляют собой довольно сложные во всех отношениях программно-аппаратные комплексы.
Работа с ЦБД и ее обслуживание ведутся с помощью Центрального вычислительного комплекса (ЦВК) на базе мощных серверов с большими вычислительными ресурсами. Глубина оперативного функционирования баз данных (4-5 лет) была определена потребностью в информационном обеспечении центрального аппарата ФТС России, органов правительства, администрации президента и других государственных структур.
Для обеспечения работы с информационными ресурсами таможенных органов созданы два центральных вычислительных комплекса (ЦВК «Комсомольская» и ЦВК «Фили»), на основе которых образована надежная отказоустойчивая система с реализацией кластерного решения, включающая два разнесенных в пространстве вычислительных комплекса и предполагающая следующую организацию работы:
-
ЦВК «Комсомольская» - первичная обработка данных, поступающих из таможенных органов, реализация обратной связи с таможенными органами для формирования достоверной информации, формирование центральной базы данных статистической отчетности ЕАИС, выполнение регламентных отчетных работ и пр.;
-
ЦВК «Фили» - резервный центр, предназначенный для выполнения оперативных запросов и работ ФТС России, зеркальная база данных и пр.
319
Основная нагрузка в ЦВК в 2001 г. приходилась на два сервера:
Alpha Server 8400 (6-8 процессоров по 700-800 МГц, 16 ГБ оперативной памяти, 160-2100 ГБ дискового пространства), обеспечивающий выполнение сложных оперативных запросов, предназначенных для информирования Центрального аппарата ФТС России и других федеральных органов;
Alpha Server 4100 (2-4 процессора по 625 МГц, 8 ГБ оперативной памяти, 160-180 ГБ дискового пространства), обеспечивающий обработку данных для формирования периодического таможенного сборника ВЭД России.
В рамках программы модернизации таможенной службы в течение 2004-2008 гг. предполагается существенно обновить парк вычислительной техники, поддерживающий функционирование баз данных ЕАИС.
Информационное взаимодействие ЕАИС ФТС России с другими системами
Повышение требований к срокам таможенной очистки и качеству таможенного контроля привело к появлению технологий, которые предполагают обмен информацией таможеннх служб стран, между которыми перемещаются товары и транспортные средства. С этой же целью таможенной службе надо иметь средства оперативного взаимодействия с информационными системами других ведомств и организаций.
Поэтому одно из направлений развития ЕАИС - интеграция информационных ресурсов ФТС России и иных федеральных органов исполнительной власти, информационное взаимодействие с таможенными службами других государств [47].
Информационно-техническая политика ФТС России предполагает в ближайшие годы развитие и внедрение системы оперативного взаимодействия с информационными системами других государственных ведомств для решения ряда задач, выполняемых таможенными органами (рис. 5.23).
Активные работы по созданию и внедрению систем информационного обмена с отдельными государствами и союзами ведутся с 2000 г.
Экспериментальные системы информационного обмена с Евросоюзом, его отдельными государствами, а также с международными организациями, занимающимися вопросами мошенничества и контрабанды, стали создаваться с 2002-2003 г.
В частности, уже созданы и развиваются системы информационного взаимодействия с таможенными службами стран бывшего СССР: Казахстана, Украины, Республики Беларусь, странами ЕврАзЭС и др.
В числе экспериментальных разработок в этом направлении следует указать такие, как: проект «Зеленый коридор» с таможенными службами Финляндии и Швеции; передача электронных экспортных ГТД в порты Японии для предотвращения контрабанды морепродуктов; подключение ЕАИС к общеевропейской транзитной системе NCTS (проект «Калининградский транзит»); проект CUSTOM по упрощению таможенного оформления автоперевозок из Финляндии и др.
320
В сентябре 2001 г. в соответствии с Решением Совета руководителей таможенных служб государств СНГ в качестве координирующего органа на пространстве СНГ был создан Региональный узел связи по правоохранительной работе ВТО (Всемирной таможенной организации) по странам СНГ - «RILO-Москва». Его офис находится в Москве и функционирует в рамках Главного управления по борьбе с контрабандой ФТС России.
Инициатива создания глобальной сети региональных узлов связи («RILO») принадлежит ВТО. Эта сеть представляет собой закрытую информационную и коммуникационную систему в виде структурированных БД, где в режиме реального времени осуществляется обмен правоохранительной информацией о случаях незаконного перемещения основных видов контрабанды. На момент подготовки данного учебника сеть состояла из 11-ти «RILO», расположенных на всех континентах мира и объединяющих таможенные службы по субрегиональному принципу. Основная цель создания сети — повышение эффективности двустороннего и многостороннего сотрудничества таможенных служб в сфере обмена информа-
321
2 I Ю. В. Малышснко
цией правоохранительного характера. Основной массив информации, передаваемой по каналам сети, касается наркотиков, подакцизных товаров, оружия, предметов искусства, флоры и фауны. Помимо передачи данных по указанной тематике, «RILO-Москва» активно участвует и в «антинаркотических» проектах ВТО, в частности, по созданию поясов безопасности вокруг Афганистана.
Центры «RILO» подключены к сети «CEN» ВТО, которая представляет собой информационную, аналитическую и коммуникационную систему, предназначенную для организации борьбы с таможенными правонарушениями. Одной из составляющих системы CEN является БД таможенных задержаний и правонарушений.
«RILO-Москва» осуществляет координацию деятельности национальных узлов связи таможенных служб - участниц «RILO-Москва», сбор и обработку информации, полученной от национальных узлов связи таможенных служб-участниц, по следующим предметам контрабанды и нарушений таможенного законодательства:
-
подакцизных товаров: сигарет, алкоголя, автомобилей;
-
оружия и взрывчатых веществ;
-
ядерных, радиоактивных и опасных материалов;
-
наркотиков, психотропных веществ и прекурсоров;
-
валюты и валютных ценностей;
-
редких и охраняемых видов фауны и флоры;
- предметов, перемещаемых с нарушением прав интеллектуальной собственности;
-
культурных ценностей;
-
других запрещенных и подлежащих ограничениям товаров. Основными функциями «RILO-Москва» являются:
-
выявление новых и отслеживание существующих международных каналов контрабанды;
-
обобщение информации по способам сокрытия предметов контрабанды;
-
выявление лиц и организаций, занимающихся контрабандой на выявленных международных каналах;
-
выявление тенденций развития того или иного вида контрабанды;
-
обмен полученной в ходе работы «RILO-Москва» информацией правоохранительного характера с таможенными службами - участниками «RILO-Москва», региональными узлами связи и Секретариатом ВТО;
-
подготовка и публикация регулярных, периодических и оперативных аналитических бюллетеней и обзоров по таможенным правонарушениям на международных каналах контрабанды;
-
проведение аналитических исследований и подготовка справок для доклада руководителям таможенных служб — участниц «RILO—Москва», в том числе по отдельным поручениям руководителей таможенных служб-участниц;
-
направление в национальные узлы связи «RILO-Москва» ориентировок ВТО;
-
развитие и осуществление регионального сотрудничества с другими правоохранительными органами и международными организациями.
322