Организация решения статистических задач с помощью комплекса средств новой технологии для обработки статистической информации

Одной из главных особенностей автоматизированной обработки статистической информации является новая технология, обеспечивающая более эффективную обработку на основе достижения технической, программной, информационной и методологической совместимости.

Новая технология разрабатывается в качестве единой и типовой для всех срочной и почтовой статистической отчетности. Она предполагает постепенный переход от технологии функционирования относительно самостоятельных отраслей статистики (на базе отдельных трудоемких статистических работ, выполняемых с помощью КЭОИ) к построению интегрированной информационной системы, охватывающей не только систему государственной статистики, но и информационные базы предприятий и организаций, а также различных отраслевых и региональных органов.

Новая технология намечает изменение традиционных потоков информации, способов формирования статистической отчетности на первичных объектах статистического наблюдения и представления ее в органы государственной статистики. Предполагается в отчитывающихся организациях создание автоматизированных банков данных и включение в них интегрированных систем статистических показателей, которые по каналам связи либо на технических носителях должны поступать в органы государственной статистики.

Новая технология ориентирована на активное участие экономистов и статистиков в процессе обработки данных в регламентированном режиме и в режиме информационно-справочного обслуживания. При этом обеспечивается не только разработка текущей статистической отчетности, но и выполнение комплекса аналитических работ, связанных с составлением бюллетеней, докладов, справок и т. п.

Комплекс средств новой технологии включает системные комплексы сбора, обработки и передачи по каналам связи статистических данных, созданные по новой технологии (КНТ), базы данных (БД), разработанные по единой логической структуре в среде АБД, автоматизированные рабочие места экономиста-статистика для выдачи аналитической информации во взаимодействии с базами данных (АРМ).

Он обеспечивает автоматизацию обработки статистической информации на всех этапах технологического процесса: сбор данных, их контроль и подготовка для обработки, обработка, выдача результатов и передача на вышестоящий уровень. Состав комплекса средств новой технологии единый для регионального и федерального уровней ГКС РФ. Составные части, входящие в комплекс средств новой технологии, взаимоувязаны между собой и разработаны в единой программно-технологической среде, т. е. фактически происходит интеграция различных программно-технологических средств решения задач.

Под КНТ понимается совокупность информационных, программно-технологических и технических средств, обеспечивающих автоматизацию сбора, контроля, корректировки, обработки и передачи статистической информации на региональном и федеральном уровнях.

Создание комплексов новой технологии предполагает использование базового программного обеспечения, включающего СУБД типа «Триада», АБД, типовые АРМы ввода, контроля, обработки, средства передачи данных по каналам связи. Использование единой программно-технологической среды обеспечивает совместимость различных программно-технологических средств, используемых в КНТ.

Технология обработки статистической информации в КНТ стандартна и состоит из следующих процедур: ввод, контроль, корректировка, обработка, выдача результатов.

Реализация указанных процедур многовариантна, т.к. разработанные в единой среде программно-технологические средства предопределяют их различные сочетания с учетом возможностей имеющихся технических средств, объемно-временных параметров обрабатываемой, хранимой и передаваемой информации и требований пользователей к стоимостным и временным характеристикам обрабатываемых данных.

Операции ввода, контроля, корректировки в ряде КНТ реализуются с помощью типового АРМа, на ППЭВМ типа ЕС-1840, (ЕС-1841), а операции по обработке и выдаче результатов осуществляются с использованием типового АРМа на ППЭВМ типа ЕС-1840 (ЕС-1841) или же с использованием базового языка запросов АБД АСИС.

Взаимодействие в КНТ носит характер как межуровневого так и внутриуровнего обмена выходной информацией.

С вышестоящим уровнем обмен реализуется средствами дистанционного сбора (СДС), системы телеобработки статистической информации (СТОСИ), СДС ПЭВМ, СТОСИ или передачей магнитных носителей (МЛ, дискет).

Внутриуровневый информационный обмен между КНТ и базой данных осуществляется в режиме скомплексированных ЕС ЭВМ и ППЭВМ.

Рассмотрим типовой технологический процесс сбора, обработки и передачи статистической информации на примере обработки срочной отчетности.

Комплекс новой технологии сбора, обработки и передачи данных на примере срочной отчетности, итоговых и разработочных таблиц на областном и федеральном уровнях базируется на использовании программных средств АРМ обработки на ПЭВМ ЕС-1840 (ЕС-1841) во взаимосвязи с БД АБД.

Программное обеспечение КНТ включает прикладное программное обеспечение на ПЭВМ ЕС-1840 (ЕС-1841) (АРМ обработки), обеспечивающее прием, обработку, выдачу статистических таблиц, формирование массива по структуре СДС СТОСИ для передачи данных на вышестоящий уровень и формирование «загрузочного массива» по структуре, требуемой АБД для загрузки фонда данных.

Создание метаданных АБД на ЕС ЭВМ, загрузка фонда данных, обработка информации с выдачей статистических таблиц обеспечиваются базовым программным обеспечением АБД.

Эксплуатация КНТ на ПЭВМ должна осуществляться экономистами-статистиками, ответственными за разработку соответствующей срочной статистической отчетности.

Информационная база КНТ на ПЭВМ состоит из справочных массивов и фонда данных. В справочных массивах хранятся характеристики показателей и объектов статистического учета, график отчетных дат, наименования и макеты статистических таблиц и информация для реализации алгоритма их формирования. В фонде данных хранятся значения показателей на отчетные даты за два года (текущий и предыдущий).

Передача фактических данных текущего периода по уровням район-область-федерация производится средствами СТОСИ.

Хранение значений показателей в фонде данных КНТ производится по кодам показателей (условным обозначениям) и кодам территории.

В результате обработки данных на ПЭВМ формируются статистические таблицы для представления руководящим органам региона, выходные массивы «файл-телеграмма» для передачи сводных данных на вышестоящий уровень и «загрузочный массив» для перезаписи данных в фонд данных БД АБД. Метаданные БД АБД на региональном и федеральном уровнях включают показатели срочной отчетности обычно месячной периодичности.

Загрузка данных в БД АБД из файла, сформированного на ПЭВМ, обработка загруженных данных с выдачей статистических таблиц производится базовым программным обеспечением АБД.

В связи с функционированием в системе ГКС РФ автоматизированного банка данных (АБД) создается единый информационный фонд системы показателей, включающий взаимосвязанные информационные массивы (базы данных) многоцелевого использования, что существенно повышает уровень автоматизации статистических задач.

База данных по статистике промышленности включает показателей, характеризующих стоимость основных фондов, среднесписочную численность промышленно-производственного персонала, оплаты труда, фондоотдачу, фондои энерговооруженность в разрезе отраслей, ведомств, территорий.

База данных по статистике сельского хозяйства включает наименований показателей, характеризующих государственные закупки сельскохозяйственной продукции в натуральном и стоимостном выражении в разрезе общественного сектора, колхозов, совхозов и госхозов, хозяйств населения по территориям.

База данных по статистике строительства включает наименований показателей, характеризующих объем капитальных вложений.

В паспорте сосредоточены показатели различных отраслей статистики, разносторонне характеризующие социальное и экономическое развитие конкретной территории (области, республики, края). Он заполняется на основе данных годовой статистической и бухгалтерской отчетности, единовременных учетов и переписей. Структурно паспорт состоит из нескольких разделов.

Из общего раздела можно получить информацию о размере территории, плотности населения, наличии автономных образований, районов, поселков. В основном разделе сконцентрированы общеэкономические показатели: развития территории.

Заключительный раздел паспорта содержит показатели, характеризующие состояние и развитие различных отраслей хозяйства территории — промышленности, сельского хозяйства, строительства, транспорта и связи, социальной сферы и др.

Разработка логической структуры баз данных АБД ведется на основе показателей субсистем с использованием системы классификации и кодирования технико-экономической информации. Такой системный подход позволил: во-первых, создать распределенные по уровням ГКС РФ базы данных регионального отраслевого характера; во-вторых, уйти от разработки программных средств обработки отдельных форм статистической отчетности; в-третьих, четко разграничить этапы проектирования баз данных и разработки базового программного обеспечения; в-четвертых, избежать внесения изменений в программное обеспечение в связи с изменением набора показателей в формах статистической отчетности, т.к. все изменения методологического характера осуществляются на этапе проектирования.

Для решения аналитических задач в ГКС РФ широко используются АРМ экономиста-статистика АРМ представляет собой комплекс программных средств на ПЭВМ, обеспечивающих автоматизацию решения аналитических задач пользователя непосредственно на его рабочем месте на основе автоматизации трудовой деятельности экономиста-статистика.

АРМ экономиста-статистика представляет собой комплекс подсистем, обеспечивающих автоматизацию процедур, необходимых для решения аналитических задач: подсистема «Интерфейс», подсистема «Табличный процессор», подсистема «Математическая статистика», подсистема «Подготовка метаинформации на ПЭВМ для АБД».

Подсистема «Интерфейс» обеспечивает связь с внешними системами и между подсистемами АРМ. Данная подсистема выполняет следующие функции: ведение локальной базы АБД на ПЭВМ (создание локальной базы, ввод, корректировка, печать); загрузка в локальную базу обменного массива АБД; ввод и корректировка информации локальной базы на ПЭВМ; экономический анализ массива данных за любой период, совокупности объектов, анализ динамических рядов; (средних и др.).

При анализе динамических рядов рассчитываются базисные и цепные индексы, абсолютные и относительные приросты, абсолютные и средние значения за определенный период.

Для оформления результатов на экране дисплея и в твердой копии можно получить горизонтальные гистограммы и графики, выборку информации из локальной базы в форматах подсистемы «Табличный процессор».

Подсистема «Интерфейс» состоит из двух управляющих модулей — «Вариант пользователя», «Вариант администратора базы» и ряда прикладных программ, реализующих конкретные режимы работы.

Подсистема «Табличный процессор» обеспечивает преобразование данных локальной базы или описанных таблиц в выходные формы, содержащиеся в текстовом файле для дальнейшей их распечатки.

На основании данных текущей локальной базы, описания таблиц, установленного фильтра подсистема «Табличный процессор» получает выходные формы в текстовом файле для дальнейшего распечатывания.

Табличная форма получается на полной локальной базе или ее подмножестве. Для этого вводится «фильтр», т. е. признаки ограничивающие параметры базы.

Выходной информацией подсистемы является текстовый файл, содержащий полученную таблицу.

Входной информацией подсистемы являются: локальная база; описание таблиц (фильтр в базе, описание шапки, боковика, формул расчета граф).

Подсистема «Математическая статистика» обеспечивает анализ данных методами математической статистики.

Данные поступают из подсистемы «Интерфейс» или вводятся вручную.

Анализ данных методами математической статистики осуществляется с помощью 3-х подсистем: динамический ряд, факторный анализ, корреляционный анализ. 30 Подсистема «Динамический ряд» осуществляет построение полигона, гистограммы частот и кумулятивной линии; подбирает тренд из выбранного класса функций; производит сглаживание исходного динамического ряда; строит прогноз на основе выбранного тренда и на основе авторегрессионной модели; производит анализ остатков на автокорреляцию и нормальность.

Подсистема «Факторный анализ» позволяет получить линейную модель, описанную небольшим числом фундаментальных единиц, факторов, содержательная интерпретация которых является прерогативой квалифицированного пользователя. Кроме того здесь рассчитываются значения «нагрузок на общие факторы» и сами общие факторы.

Подсистема «Подготовка метаинформации на ПЭВМ для АБД» предназначена для формирования файлов, содержащих информацию для программ формирования и обновления файлов базы данных АБД в пакетном режиме автономно на ПЭВМ.

При этом от пользователя не требуется знание сложного языка АБД, информация вводится в диалоговом режиме, а соответствующие служебные записи для АБД формируются автоматически.