Комп'ютерні технології розробки матеріалів перепису населення

Комп'ютерні технології розробки матеріалів перепису населення

Переписи населення, відбиваючи досягнення народу країни, є важливим політичним і економічним заходом. Проведення переписів населення завжди сприяло розвитку засобів обчислювальної техніки та технологій її використання. Навіть під час проведення першого Всеросійського перепису в 1891 р. застосовувались електричні лічильні перфораційні машини, а в 1926 р. частина матеріалів перепису опрацьову-валася на спеціально створеній першій машинолічильній станції. За реко-мендацією Постійної комісії Ради економічної взаємодопомоги зі статистики, перепис населення слід проводити не рідше, як один раз на 10 років. Кожні 10 років знаменуються досягненнями в розвитку засобів обчислювальної техніки для перепису населення. Зокрема, в 2001 р. вперше застосовувалися сканери для зчитування інформації з переписних бланків і технологія децентралізованої обробки даних.

Для проведення всіх заходів з організації підготовки, проведення перепису населення та розробки його матеріалів задовго до її початку в органах державної статистики створюються підрозділи, які забезпечують програмно-методичну, організаційну і масово-роз'яснювальну роботу, матеріально-фінансову підготовку, а також здійснюється проектування автоматизованої обробки результатів перепису населення.

З метою створення законодавчої бази для проведення Всеукраїнського перепису населення 2001 р. відповідно до вимог Конституції України було підготовлено та прийнято Закон України «Про Всеукраїнський перепис населення», який встановлює правові, економічні та організаційні засади проведення перепису населення, права, обов'язки та взаємну відповідальність суб'єктів перепису населення, а також гарантії держави щодо захисту отриманої у процесі опитування конфіденційної інформації. Розроблена та узгоджена з усіма зацікавленими організаціями програма перепису населення - вичерпний перелік питань, за якими здійснювалося опитування респондентів під час перепису населення, підготовлювалися звітно-статистична документація та переписний інструментарій.

Переписи проводяться обліковцями шляхом опитування населення і запису відомостей у списки проживаючих у приміщенні й у переписні лис-ти. Заповнення відомостей за питаннями переписного листа проводиться або у вигляді запису словами чи цифрами, або у вигляді міток. Для забезпечення нормальної роботи зчитувального пристрою при введенні переписних листів за допомогою сканера необхідно, щоб мітки були закреслені правильно, тобто відповідно до взірця, вказаного в правому верхньому кутку переписного листа. Загальна структура органів, які проводять перепис населення, включає лічильні дільниці; інструкторські дільниці; переписні відділи; районні та міські відділи статистики; обласні управління статистики (відділи перепису населення); Управління Всеукраїнського перепису населення Державного комітету статистики.

Перепис населення проводиться протягом 10 днів шляхом обходу обліковцями житлових приміщень, опитування населення і запису відомостей у списки проживаючих у приміщенні і в переписні листи. На другий день після закінчення перепису обліковець здає переписну докумен-тацію з вихідними формами, укомплектованими в портфелі, інструктору-контролеру, який у визначені терміни передає ці матеріали завідувачу переписного відділу. Відповідальні за перепис населення в Держкомстаті Автономної Республіки Крим, обласних, Київському та Севастопольському міських управліннях статистики приймають переписну документацію, укомплектовану в портфелі, від районних (міських) відділів статистики, проводять перевірку повноти та якості цих матеріалів, кодування вхідних форм, готують матеріали перепису до їх автоматизованої обробки згідно з Інструкцією з підготовки переписних листів Всеукраїнського перепису населення 2001 року до автоматизованої обробки. Ввод переписних листів здійснюється з пристроїв оптичного вводу за допомогою програмного забезпечення. Це програмне забезпечення виконує сканування, контроль інформації з переписних листів і перетворення даних у базову систему. Як бачимо, технологічний процес автоматизованої обробки матеріалів перепису населення починається з моменту надходження переписних листів до регіональних управлінь статистики. На регіональному рівні технологічний процес охоплює такі етапи:

-        реєстрація портфелів у регіональних управліннях статистики, перевірка та кодування даних переписних листків, формування звітної документації про перебіг здачі переписних листів;

-        введення даних з паперових носіїв за допомогою сканерів Fujitsu M4099 D з проведенням контролю в обмеженому обсязі, підготовка файлів переписних листків для завантаження в базу даних, формування архіву графічних зображень, формування звітної документації про перебіг обробки матеріалів перепису населення, реєстрація та повернення оброблених портфелів переписних листів;

-        завантаження файлів переписних листів до БД згідно з макетом (додаток 9), формування протоколів завантаження, контроль переписних листів, формування протоколів контролю переписних листів, коригування даних переписних листів на основі протоколу контролю з використанням архіву графічних зображень, виконання повторного контролю, формування звітної документації про перебіг обробки даних перепису;

-        формування зведених даних (вихідних таблиць) у розрізі районів, проведення їх внутрішньотабличного, міжрозрізного та міжтабличного контролю, формування звітної документації про перебіг обробки даних перепису;

-        формування територіального файлу (ТФ) для відсилання (передачі) на державний рівень, створення архівних копій. Після завершення внутрішньотабличного, міжрозрізного та міжтабличного контролю в цілому по регіону (у розрізі районів) шляхом вивантаження даних з БД формуються територіальні файли для передачі на державний рівень. ТФ на державний рівень передаються кур'єром на машинних носіях або засобами електронної пошти по комутованих телефонних каналах загального користування. Технологічний процес обробки матеріалів перепису населення на державному рівні має такі етапи:

- перший етап — отримання від регіональних управлінь статистики, реєстрація та антивірусний контроль територіальних файлів на державному рівні, складання довідок про перебіг надходження територіальних файлів, підготовка територіальних файлів для завантаження в базу даних;

- другий етап — завантаження територіальних файлів до центральної бази даних перепису, формування протоколів завантаження;

-третій етап — виконання контролю переписних листів, що входять до територіальних файлів, формування протоколів переписних листів, коригу-вання територіальних файлів згідно з протоколами контролю, проведення повторного контролю, формування звітної документації про перебіг обробки даних перепису;

-четвертий етап — формування зведених даних (вихідних таблиць), прове-дення їх внутрішньотабличного, міжрозрізного та міжтабличного контролю;

- п'ятий етап — друк вихідних таблиць з переліку в додатку 10;

- шостий етап — формування інформації для керівних органів країни;

-сьомий етап — формування регіональних фрагментів Центральної бази даних перепису зі зведеними даними та відсилання (передавання) їх в ОУС для подальшого використання, Друк зведених даних в ОУС;

-восьмий етап — підготовка матеріалів Всеукраїнського пе репису населення для розповсюдження друкарськими засобами, засобами Internet і формування файлів на магнітних та оптичних дисках.

На державному рівні матеріали Всеукраїнського перепису населення готуються для розповсюдження у вигляді друкарських видань, на магнітних та оптичних носіях інформації. Узагальнену схему проходження переписних документів наведено на рис. 6.3.

Під час кожного технологічного етапу обробки матеріалів перепису населення на державному рівні передбачається можливість повного або часткового повторного запиту територіальних файлів або їхніх фрагментів (графічних файлів переписних листів) з регіонального рівня.

Програмно-технічний комплекс орієнтований на створення технологічних дільниць обробки матеріалів перепису населення в складі діючих у системі державної статистики локальних обчислювальних мереж регіонального та державного рівнів.

Для обробки матеріалів Всеукраїнського перепису населення технічні засоби організаційно об'єднані в локальну мережу і включають: пристрої оптичного зчитування інформації; робочі станції для управління сканерами і розпізнавання інформації — від 3 до 17; мережеві файл-сервери для зберігання програмного та інформаційного забезпечення — по одному на регіон; мережевий принтер — 1-2 на регіон; мережеві засоби; пристрої створення копій; оптичний пристрій зчитування інформації; робочі станції для керування сканерами і розпізнавання інформації.

Варто зауважити, що в складі програмно-технологічного комплексу обробки даних Всеукраїнського перепису населення використано сертифіковані технічні та програмні засоби, які відповідають вимогам відкритих систем взаємодії. Технологію обробки даних побудовано з використанням принципів технології «клієнт-сервер». Усе це забезпечує обробку даних у терміни, визначені календарним планом, а також їх розповсюдження в необхідних і достатніх обсягах.

ЛД — лічильна дільниця;

ІД — інструкторська дільниця даних Всеукраїнського перепису населення

ПВ — переписний відділ перепису населення

Рис. 6.3. Узагальнена схема проходження матеріалів Всеукраїнського перепису населення