книги из ГПНТБ / Брага, В. В. Основы технологии машинной обработки статистической информации [учеб. пособие]

СССР так как именно здесь собираются и выпускаются все ста­ тистические работы, выполняемые всеми вычислительными уста­ новками ЦСУ СССР. Поэтому достоинства и недостатки обработки этих отчетов сказываются на работе ГВЦ и, следовательно, на сро­ ках и качестве выполняемых им работ. ГВЦ ЦСУ СССР было по­ ручено также приспосабливать формы первичных и сводных отче­ тов к требованиям механизации, а также составлять системы ко­ дов для статистических разработок.

Таким образом, единство методологии механизированной разра­ ботки статистической отчетности определяют следующие факторы:

1. Единство организационного построения вычислительных уста­ новок системы ЦСУ СССР, а также формы их работы.

2.Единый подход к формированию состава оборудования вы­ числительных установок системы ЦСУ СССР.

3.Единая методология приспособления форм первичной и свод­ ной статистической отчетности к машинной разработке.

4. Единая система кодов машинной разработки, действующая, в ЦСУ СССР.

только для статистических отчетов, подлежащих разработке на перфорационных и бухгалтерских машинах. За прошедший период было создано около 200 таких проектов по 40 темам статистических работ (с учетом их ежегодного изменения). Типовые проекты при­ спосабливались к эксплуатационным свойствам' перфорационных машин, и, естественно, в них не могли найти отражение те вопросы, которые можно было решить лишь с помощью электронных вычис­ лительных машин.

Так, типовые проекты отличались следующим:

они составлялись на отдельные статистические задачи, в них не предусматривалась машинная обработка комплекса задач;

проект, как правило, содержал программу машинной обработки лишь для решения статистической задачи на вычислительных уста­ новках одного уровня;

методология машинной обработки в основном была приспособ­ лена к той программе разработки, которая составлялась экономи­ стами-методологами;

1 На базе Центральной машиносчетной станции ЦСУ СССР организован Главный вычислительный центр ЦСУ СССР (ГВЦ).

70

не предусматривалось существенного изменения потоков инфор­ мации, содержания первичных и сводных документов;

в качестве машинного носителя использовались только перфо­ карты;

технологический процесс машинной обработки предусматривал лишь составление сводных таблиц; логический контроль отчетов выполняли экономисты.

Проект машинной обработки составляли специалисты при со­

При составлении типового проекта машинной обработки ста­ тистической отчетности на перфорационных Машинах выполняется несколько разделов;

проектирование шифров и кодов; проектирование первичных и сводных статистических докумен­

также инструкций экономистам по подготовке данных к машинной обработке и использованию исходных данных;

составление схем настройки машин; калькуляция отпускной стоимости работ.

Типовые проекты кроме обязательной программы Представле­ ния данных в вышестоящие статистические органы содержат так­ же технологию разработки данных для местных партийных, совет­ ских и хозяйственных органов. Для этого потребовалось детально изучить на местах сводные данные, представляемые органами ста­ тистики местным организациям.

С момента установки электронных вычислительных машин в си­ стеме организация работы по составлению проектов машинной об­ работки статистической информации изменяется. Эта работа по­ стоянно совершенствуется. Содержание проектных работ зависит от эксплуатационных свойств ЭВМ. В настоящее время типовые про­ екты предусматривают использование ЭВМ «Минск-22» и «Минск32».

Начиная с 1966 г., когда в системе начали появляться первые ЭВМ, на них решались в основном единичные статистические задачи. Каждый вычислительный центр разрабатывал свою машинную про­ грамму. Вскоре стало очевидно, что при такой организации работы нет должного эффекта от внедрения электронных вычислительных машин. Для регулирования работ создается и утверждается ру­ ководством ЦСУ СССР план подготовки я внедрения комплексов электронной обработки статистических отчетов. Под комплексом понимается совокупность статистических форм определенной темы какой-либо отрасли статистики, связанных взаимозависимыми и

71

одинаковыми показателями различной периодичности. Например, в комплекс входят отчеты о выполнении плана по труду в промыш­ ленности: формы № 2-Т (краткая), 2-Т (квартальная), 7, 7-а, 8, 9М, 8 (отраслевая). Для комплекса устанавливается единая техноло­ гия, обеспечивающая его решения по единым машинным программам.

В план подготовки и внедрения комплексов включены стати­ стические задачи, подлежащие в первую очередь обработке на ЭВМ в целом по системе. Составление рабочих проектов машинной обработки по этим задачам с указанием этапов проектирования и конкретных сроков исполнения поручается различным вычислитель­ ным центрам, что позволяет более рационально организовать работу инженеров-проектировщиков и программистов системы. Раз­ работку комплексных проектов электронной обработки статисти­ ческой информации организует ГВЦ ЦСУ СССР, который фак­ тически и -координирует внедрение технологии в системе. Руководит этой работой в ГВЦ ЦСУ СССР отдел подготовки алгоритмов и программ. Главное управление вычислительных работ ЦСУ СССР

отвечает за координацию работ по применению ЭВМ для обработки статистической информации.

Электронная обработка статистической информации предъяв­ ляет ряд новых требований к проектированию ее технологии. Уже отмечалось, что в составлении проектов участвуют многие вычисли­ тельные центры системы. Причем наряду со специалистами по ма­ шинной обработке активно участвуют экономисты-методологи. Они осуществляют постановку задачи.

При использовании ЭВМ проект составляется не на одну ста­ тистическую форму, а на ряд (комплекс) форм, объединенных вза­ имосвязанными показателями. Рабочий проект предусматривает си­ стемную машинную обработку комплекса статистических форм, т. е. обработку их на различных уровнях системы: областном, рес­ публиканском и союзном. Технологический процесс комплекса элек­ тронной обработки охватывает все уровни системы; при его про­ ектировании особое место уделяется выбору машинных носителей. Машинные носители здесь используются не только для переноса информации со статистических отчетов, но и для передачи инфор­ мации с одного уровня на другой.

Комплексные проекты предусматривают однократный перенос данных статистических отчетов на машинные носители. Эта опера­ ция производится только в пунктах поступления информации в систему. Пунктами поступления могут быть различные уровни. В качестве машинных носителей для переноса данных со статисти­ ческого отчета используются перфокарты и перфоленты.

В дальнейшем при разработке статистических отчетов в каче­ стве машинных носителей будут применяться бланки для автома­ тического считывания информации. При системной обработке для передачи результатов с одного уровня на другой используются на­ ряду со сводными таблицами, получаемыми на ЭВМ, и различные

машинные носители, на которых зафиксированы сводные статисти-

72

чеекие данные в различных группировках или первоначальные дан­ ные. В качестве таких машинных носителей при пересылке данных по почте используются магнитные ленты, а при передаче данных по каналам связи — перфоленты. На следующий уровень поступают уже готовые машинные носители, которые применяются для не­ посредственной обработки на ЭВМ. Здесь результаты обработки также могут быть одновременно выданы на машинные носители и переданы на следующий уровень. Чтобы передаваемые машинные носители были пригодны для совместной обработки, в проектах предусматривается их совместимость: единые служебные коды на перфолентах, способы внесения в них изменений, единые структуры записи информации на магнитных лентах и ее маркировки, а так­ же контроль достоверности данных, записанных на машинные но­ сители.

Электронная обработка статистической информации может так­ же изменить схемы потоков информации. Например, отчетные до­ кументы, поступившие в вычислительную установку статистического управления области, края и частично обработанные там, могут быть переданы непосредственно в ГВЦ ЦСУ СССР. В других слу­ чаях отчетные документы поступают в вычислительную установку статистического управления области, края или в кустовой вычисли­ тельный центр, здесь предварительно обрабатываются и направ­ ляются в республиканский вычислительный центр. В республикан­ ском вычислительном центре происходит дальнейшая обработка статистических документов, после чего они поступают в ГВЦ ЦСУ

СССР. Иногда сводные данные, полученные при централизованной обработке в каком-либо центре разработки, могут поступать в ни­ жестоящий уровень системы, т.-е. здесь движение потоков инфор­ мации обратное. В ряде случаев в проектах предусматриваются кустовые пункты обработки статистической информации. Кустовым пунктом обычно является вычислительный центр статистического управления области (края), где обрабатываются статистические отчеты нескольких других областей.

Один из важных этапов проектирования электронной обработки статистической информации — создание массивов постоянной ин­ формации, хранение, использование и обновление. Сейчас созда­ ние массивов постоянной информации не получило большого раз­ вития ввиду отсутствия ЭВМ с большим объемом запоминающих устройств на магнитных дисках. Как правило, постоянная инфор­ мация создается для каждого вычислительного центра отдельно и используется для решения некоторых задач.

При установке ЭВМ третьего поколения с большими объемами памяти и возможностью обмена информацией между ЭВМ, уста­ новленными на разных уровнях системы, можно будет создать мас­ сивы постоянной информации, ' так называемые «банки данных». Пользоваться «банком данных» смогут вычислительные центры любых уровней.

При составлении проекта машинной обработки следует пре-

73

дусматривать использование многопрограммного режима решения задач, а также широко применять алгоритмические языки при программировании. Методы программирования должны ориентиро­ ваться на системную обработку статистической информации. Это значит, что комплекс машинных программ должен обеспечить свое­ временную выдачу всех сводных статистических таблиц на любом уровне, а также контроль машинных носителей, передаваемых с одного уровня на другой, их совместимость при последующей об­ работке.

Итак, рассмотрены некоторые моменты проектирования комп­ лекса электронной обработки статистической информации: органи­ зация потоков информации, проектирование системной обработки задачи на всех уровнях, выбор вида машинного носителя и одно­ кратный способ его ручного изготовления и др. Все это позволяет ликвидировать ряд ручных операций обработки и приближает тех­ нологический процесс к требованиям автоматизированной системы.

С оснащением системы ЭВМ третьего поколения при проекти­ ровании статистических задач будут возникать новые, более слож­ ные вопросы. К их числу можно отнести проектирование интегри­ рованной обработки статистической информации, обмен информа­ цией между ЭВМ, организацию «банка данных», вопросы информа­ ционного сопряжения с другими автоматизированными системами управления и др.

§ 2. ПРОЕКТИРОВАНИЕ КОМПЛЕКСОВ ЭЛЕКТРОННОЙ ОБРАБОТКИ

СТАТИСТИЧЕСКИХ ДАННЫХ

Проекты комплексной электронной обработки статистических данных в вычислительных центрах системы ЦСУ СССР состав­ ляются в соответствии с «Положением о координации работ по внедрению ЭВМ в обработку статистической информации в усло­ виях создания автоматизированной системы государственной ста­ тистики (АСГС)». В комплексах электронной обработки реали­ зуется технологическое, методологическое и математическое един­ ство системы. Разработка проекта комплексной электронной обработки включает несколько этапов: постановку задачи и унифи­ кацию форм и таблиц; составление технического задания; состав­ ление рабочего проекта; прием рабочего проекта; внедрение ра­ бочего проекта.

Постановка заключается в экономико-статистическом описании комплекса: состава отчетов и показателей, входящих в комплекс; взаимосвязи показателей в комплексе и их использования для формирования выходных таблиц для каждого уровня системы.

Постановка задачи осуществляется отраслевыми отделами (уп­ равлениями) ЦСУ СССР, которые являются заказчиками на раз-

74

работку комплекса, и отделами подготовки и выпуска статистиче­ ских материалов ГВЦ ЦСУ СССР. Оба эти подразделения ответ­

схеме описания. Стандартная схема описания постановки задачи содержит ряд пунктов, которые следует осветить в определенной последовательности. Причем отраслевые отделы (управления) ЦСУ

СССР в постановке задачи определяют уровни, для которых дол­ жен быть разработан комплекс, периодичность, способ получения отчетов; разрабатывают перечень и описание входных и выходных документов; выполняют описание взаимосвязи показателей; уни­ фицируют формы и таблицы, приспосабливают их к машинной об­ работке. После этого отделы подготовки и выпуска статистических материалов ГВЦ ЦСУ СССР в постановке задач определяют пра­ вила логического и арифметического контроля входных и выход­ ных документов, процент заполняемости отчетов, значность пока­ зателей.

Изложенная по установленной схеме описания постановка за­ дачи должна быть подписана руководителями подразделений, уча­ ствующих в ее составлении. Затем постановка задачи направля­ ется в ГВЦ ЦСУ СССР, Главмехсчету ЦСУ СССР и ЦСУ союзной республики — соисполнителю по данной теме.

Для обсуждения постановки задачи привлекаются ЦСУ союз­ ных республик, статистических управлений областей (краев, АССР) для выявления дополнительных требований местных руководящих органов, союзно-республиканских и республиканских министерств и ведомств. Составленнное с учетом указанных выше требований, описание постановки задачи утверждается заместителем началь­ ника ЦСУ СССР.

Составление технического задания. Техническое задание выпол­ няется Главным вычислительным центром ЦСУ СССР на основа­ нии постановки задачи.

ГВУ ЦСУ СССР ответствен за составление технических заданий -на разработку комплексов машинных программ для всех уровней системы ЦСУ СССР.

Техническое задание включает:

1.Общее положение*Здесь указываются состав статистических форм, входящих в комплекс, уровни разработки, порядок и сроки представления отчетов, основные группировки разработки, макси­ мальное количество отчетов на каждом уровне, модель ЭВМ, а также метод программирования.

2.Принципиальную структуру и технологию получения машин­ ных носителей информации. Указывается вид машинного носи­ теля, устройства для его подготовки, способ контроля, наличие контрольных сумм, перечисляются данные отчета, подлежащие пер­ форации.

75

3.Способ передачи информации от одного, уровня к другому, используемые при этом машинные носители.

4.Технологическую схему обработки информации. Указывается последовательность операций технологического процесса на каждом уровне (прием отчетов, шифровка и комплектация, подсчет конт­ рольных сумм, подготовка машинных носителей и их контроль, ввод, контроль и запись информации на магнитную ленту, струк­ тура протокола расхождения, порядок корректировки данных, фор­ мирование сводных итогов для каждого уровня).

5.Основные требования к оформлению выходных таблиц (пе­ чать сказуемого, подлежащего и номеров страниц, возможность разделения таблицы на два листа с указанием граф на каждом ли­

изменений в шифры, использование кодозащиты, последователь­ ность ввода документов, контроль полноты массива, справки о со­ стоянии массива, возможность распечатки с магнитной ленты, обеспечение контроля сохранности информации на магнитной лен­ те, дублирование массива на магнитных лентах, запись на магнит­ ной ленте промежуточных данных и т. д.).

К техническому заданию прилагается ориентировочная смета расходов на разработку комплекса машинных программ и прове­ дение экспериментальной разработки. Техническое задание согла­

ботка проекта может быть поручена областным ВЦ, подведомст­ венным республиканскому вычислительному центру. Вычислитель­ ный центр, производящий составление рабочего проекта, будем называть разработчиком. Рабочий проект оформляется в соответ­ ствии с «Инструкцией по оформлению комплекса машинных про­ грамм» и высылается Главмехсчету ЦСУ СССР, ГВЦ ЦСУ СССР,

вычислительным центрам-оппонентам и членам комиссии по приему

Рабочий проект комплекса электронной обработки статистиче­ ской информации состоит из нескольких разделов. В оглавлении приводится наименование организации — разработчика проекта и организации-заказчика, почтовый адрес организации-разработчика, фамилии, имена, отчества лиц, подготовивших постановку данного комплекса, техническое задание и составивших комплекс машин­ ных программ. Указывается тип ЭВМ 'Л требуемая конфигурация для каждого уровня, дается точное название задачи (шифр), для решения которой составлен рабочий проект.

76

поненты, где производится апробация проекта, и состав комиссии, принимающей проект. В состав комиссии входят представители Главмехсчета ЦСУ СССР, Главмехсчетов ЦСУ РСФСР и ЦСУ УССР, НИИ ЦСУ СССР, ВГПТИ ЦСУ СССР, ГВЦ ЦСУ СССР,

соответствующего управления (отдела) ЦСУ СССР, РВЦ ЦСУ

Для сдачи проекта вычислительный центр-разработчик подготав­ ливает конкретный рабочий пример на предварительно согласо­

ваются все замечания и предложения по проекту. Проекты, приня­ тые комиссией, представляются Главмехсчетом ЦСУ СССР и ГВЦ ЦСУ СССР по согласованию с отраслевыми отделами (управле­

организуют на местах размножение материалов проектов, дубли­ рование машинных программ и рассылают их другим вычислитель­ ным центрам ЦСУ СССР.

сроками внедрения проекта. При внедрении проекта ведется «про­ токол внедрения», где фиксируются ход решения задачи, замечен­ ные сбои, фактически затраченное время. Внедрение комплекса оформляется актом внедрения.

По законченным комплексам машинных программ вычисли­ тельные центры-разработчики составляют краткие аннотации и на­ правляют алгоритмы и программы в Главмехсчет ЦСУ СССР для включения их в отраслевой фонд алгоритмов и программ и пере­ дачи в государственный фонд алгоритмов и программ.

В последующих разделах будут рассмотрены некоторые этапы проектирования комплекса электронной обработки статистической информации, непосредственно связанные с экономистами: проек-

78

тирование кодов и шифров, постановка статистических задач, про­ ектирование первичных и сводных статистических отчетов, машин­ ных носителей информации и операций технологического процесса.

§ 3. ПРОЕКТИРОВАНИЕ КОДОВ И ШИФРОВ

Экономическая информация фиксируется в статистических до­ кументах в виде цифр и букв. Количественно-суммовые основания показателей имеют цифровое выражение, а их признаки — бук­ венно-цифровое. К таким признакам можно отнести, например, название предприятия, название министерства, которые не всегда удобно использовать для машинной обработки, особенно на вычи­ слительных перфорационных машинах. В этом случае, чтобы сде­ лать информацию понятной машине, названия необходимо заши­ фровать определенными символами: цифровыми или буквенно-циф­ ровыми. Как правило, в документах шифруют названия группировочных признаков.

При составлении проекта комплекса электронной обработки проектирование шифров имеет важное значение. В то же время работа облегчается тем, что в системе ЦСУ СССР действует ряд постоянных кодов: форм подчинения, министерств и ведомств, тер­ риторий, отраслей народного хозяйства и др. Постоянные коды мо­ гут быть использованы при составлении проекта любого комплек­ са; заново разрабатываются лишь те коды, которые не встреча­ лись при других разработках. Большая часть кодов как раз и яв­ ляется постоянной. Единые для всей системы ЦСУ СССР коды составляются отраслевыми отделами (управлениями) ЦСУ СССР

совместно со специалистами по машинной обработке. Списки но­ менклатур (классификаторы) составляют экономисты, а шифры присваивают специалисты по машинной обработке. Изменения в номенклатуру кодов вносятся отделом технологии машинной об­ работки статистической отчетности ГВЦ на основании соответст­ вующих извещений, поступающих от управлений (отделов) ЦСУ. Об изменениях немедленно сообщается всем статистическим уп­ равлениям и их вычислительным установкам.

Шифры и коды проектируются в определенной последователь­ ности. Вначале определяются номенклатуры, подлежащие шиф­ ровке. При статистических разработках это названия министерств, форм подчинений, отрасли народного хозяйства, номенклатуры промышленной и сельскохозяйственной продукции, территории, оборудования, профессии и т. д. Затем по каждой номенклатуре устанавливают полный список, т. е. составляют перечень всех по­ зиций, подлежащих шифровке, в определенной последовательности. Например, при составлении списка министерств и ведомств сна­ чала располагают промышленные союзные и союзно-республикан­ ские министерства и ведомства, затем непромышленные, и, нако­ нец, республиканские министерства и ведомства. При составлении

79