Процес 1 – Визначення потреб      

Розпочинається, коли виникає потреба в новій статистичній інформації або відбувається перегляд існуючої. На цьому процесі органи державної статистики визначають, чи є в даний час незадоволена потреба користувачів (зовнішня та/або внутрішня) у конкретній статистичній інформації та чи можуть органи державної статистики задовольнити її.

 Для цього органи державної статистики:

- визначають та уточнюють потреби користувачів у статистичній інформації;

- перевіряють, наскільки існуючі джерела даних можуть задовольнити потреби користувачів статистичної інформації;

- готують пропозиції до планів робіт органів державної статистики. Цей процес включає 6 підпроцесів.

Підпроцес 1.1. Виявлення потреб

Початкове дослідження та визначення того, яка статистична інформація є необхідною і які ресурси необхідні для її виробництва.

- вивчення національних законодавчих, нормативних, організаційно-правових, окремих рішень Уряду,  міжнародних стандартів, нормативних документів ЄС у сфері статистики;

- запозичення досвіду;

- виявлення можливих змін в організації державних статистичних спостережень (далі - ДСС) за результатами Інвентаризації державних статистичних спостережень (далі - Інвентаризації) попереднього року;

- вивчення змін у ресурсному забезпеченні органів державної статистики;

- вивчення потреб внутрішніх користувачів статистичної інформації;

- вивчення результатів анкетних опитувань користувачів статистичної інформації та респондентів;

- вивчення пропозицій співвиробників статистичної інформації та постачальників адміністративних даних;

- опрацювання запитів та звернень, які надійшли  на адресу Держстату;

- моніторинг актуальності існуючої статистичної інформації для потенційних користувачів статистичної інформації;

- визначення потреби в інформації та пріоритетності задоволення потреб.

Задокументовані потреби зовнішніх та внутрішніх користувачів статистичної інформації та постачальників адміністративних даних, співвиробників та респондентів.

Підпроцес 1.2. Проведення консультацій та підтвердження потреб

Консультації із зацікавленими сторонами та детальне підтвердження потреб в статистичній інформації. Усвідомлення потреб користувачів статистичної інформації: що, як, коли та для чого вони очікують отримати. Основна увага повинна приділятися визначенню змін раніше ідентифікованих потреб.

- підготовка та проведення консультацій, зустрічей, нарад та засідань щодо потреби в отриманні інформації із ключовими користувачами статистичної інформації;

- формування інформації про стан погодження/врахування/неврахування отриманих пропозицій та облік уточнених потреб.

Протокольні рішення, звіти за результатами консультацій, зустрічей, нарад, засідань, рішення експертної ради користувачів щодо підтвердження їх потреб

Підпроцес  1.3. Визначення цілей формування вихідної статистичної інформації

Визначення вихідної статистичної інформації, необхідної для задоволення потреб користувачів, підтверджених у підпроцесі 1.2. Узгодження вихідних даних з потребами користувачів статистичної інформації.

- формування переліків статистичних продуктів відповідно до потреб користувачів.

Пропозиції щодо переліку статистичних продуктів.

Підпроцес  1.4. Визначення понять

Визначення  необхідних понять, які з точки зору користувачів, мають бути виміряні. У цьому підпроцесі ідентифіковані поняття можуть не приводитися у відповідність з існуючими статистичними стандартами. Таке приведення у відповідність, а також вибір чи визначення статистичних понять та змінних значень, які використовуватимуться, відбувається під час підпроцесу 2.2.

- уточнення потреб користувача щодо характеристик, статистичних одиниць, охоплення явища тощо.

Набір понять, які, з точки зору користувачів, мають бути виміряні (характеристики, статистичні одиниці, охоплення явища тощо).

Підпроцес  1.5. Перевірка наявності даних

Перевірка існуючих джерел даних, а також умов, за яких їх можна отримати, включаючи будь-які обмеження щодо використання. Оцінка альтернатив, дослідження можливостей застосування потенційних джерел адміністративних даних для  статистичних цілей. Узагальнення оцінки правових рамок, в яких будуть збиратися та використовуватися дані.

- перевірка наявності даних: статистичної інформації, адміністративних даних та інформації з інших джерел;

- визначення умов, за яких можна отримати статистичні/адміністративні дані та іншу інформацію для потреб ДСС;

- визначення необхідності у розробленні процедури збирання/доступу до даних для потреб нового/удосконаленого ДСС;

- підготовка пропозицій щодо необхідності внесення змін до існуючої нормативно-правової бази;

- підготовка та проведення консультацій, зустрічей, нарад та засідань із співвиробниками статистичної інформації, постачальниками адміністративних даних, респондентами ДСС.

Перелік статистичної інформації, адміністративних даних та інформації з інших джерел, які можуть бути використані для задоволення потреб користувачів.

Пропозиції щодо внесення змін до нормативно-правових актів.

Пропозиції щодо запровадження нового ДСС.

Підпроцес  1.6. Підготовка пропозицій до планів

Документальне оформлення результатів інших підпроцесів цього процесу для отримання рішення щодо впровадження нового чи зміненого ДСС.

- узагальнення результатів попередніх підпроцесів;

- підготовка пакету документів щодо проведення ДСС для розгляду на інвентаризаційній/методологічній комісії;

- підготовка пропозицій до Плану ДСС;

- визначення необхідного штатного, фінансового та матеріального забезпечення ДСС;

- формування звіту за результатами процесу визначення потреб.

Пакет документів щодо проведення ДСС для розгляду на інвентаризаційній/ методологічній комісії.

Звіт за результатами процесу "Визначення потреб".

Процес 2 – Проектування

Діяльність з проектування ДСС, а також будь-які пов’язані з цим практичні дослідні роботи, необхідні для визначення вихідної статистичної інформації, понять, методології, механізмів, збору та робочих процесів. Цей процес містить всі елементи проектування, необхідні для визначення чи уточнення вихідної статистичної інформації, зазначеної у пакеті документів щодо проведення ДСС. У цьому процесі чітко визначаються всі відповідні метадані, готові для використання під час проведення ДСС, а також процедури забезпечення якості. Також широко використовуються міжнародні і національні стандарти, для скорочення тривалості та вартості процесу проектування і підвищення співставності отриманої вихідної статистичної інформації. Для вихідної статистичної інформації, що виробляється на постійній основі, цей етап звичайно відбувається кожного разу, коли ідентифікуються заходи для удосконалення на процесі 8 "Оцінка". Процес складається із 6 підпроцесів:

Підпроцес  2.1. Проектування результатів

Детальне проектування вихідної статистичної інформації, продуктів та послуг, включаючи пов'язану з цим діяльність по проектуванню та підготовці систем та механізмів, які використовуються в процесі 7 "Поширення". Також проектуються методи контролю розкриття інформації та порядок доступу до конфіденційної статистичної інформації. Вихідна статистична інформація має бути спроектована, за можливості, відповідно до існуючих стандартів, тому вхідна інформація для цього процесу має включати метадані, отримані в результаті аналогічних ДСС, або попередніх циклів проведення цього ДСС, міжнародні стандарти та досвід інших статистичних організацій,  описані в підпроцесі 1.1.

- визначення переліку вихідної статичної інформації та її складу;

- планування необхідності перегляду вихідної статистичної інформації;

- визначення способів та форматів надання вихідної статистичної інформації користувачам;

- формування пропозицій до плану ДСС, каталогу статистичних публікацій;

- проектування методу контролю конфіденційності статистичної інформації розкриття та порядок доступу до неї;

- створення/оновлення метаданих щодо вихідної статистичної інформації.

Перелік вихідної статистичної інформації та її склад (перелік показників, пояснювальні, констатуючі тексти, графічні матеріали тощо).

Визначені способи поширення статистичної інформації.

Перелік конфіденційної статистичної інформації, методи контролю її розкриття та порядок доступу до неї.

Метадані щодо вихідної статистичної інформації.

Пропозиції до плану ДСС щодо складу та періодичності оприлюднення вихідної статистичної інформації.

Пропозиції щодо каталогу статистичних публікацій.

Підпроцес  2.2. Проектування описів показників

Опис показників, які збиратимуться визначеними способами збору даних, а також будь-яких розрахункових та вихідних показників, які будуть отримані з них у підпроцесі 5.5, та будь-яких класифікацій, що будуть застосовуватися. Може виникнути необхідність у здійсненні цього підпроцесу паралельно з підпроцесом 2.3, оскільки визначення показників, які будуть збиратися, та вибір способу збору даних можуть бути взаємозалежними до певного ступеня. Підготовка метаданих щодо вхідних, розрахункових та вихідних показників і класифікацій є важливою передумовою для подальших процесів робіт.

- опрацювання понять ДСС, переліку та визначень показників, складу класифікацій та довідників;

- проектування нових/зміни до класифікацій та довідників, та таблиць відповідності;

- підготовка метаданих щодо показників, класифікацій та довідників для ДСС.

Перелік визначених та описаних понять ДСС.

Перелік показників та їх визначень.

Перелік класифікацій та довідників для ДСС.

Опис нових класифікацій і довідників,  зміни до них, таблиці відповідності.

Метадані щодо показників, класифікацій та довідників.

Підпроцес  2.3. Проектування методів збору даних

Визначення найбільш прийнятних методів та механізмів збору даних. Роботи у цьому підпроцесі залежать від того, які методи та механізми збору, які можуть включати опитування за допомогою комп’ютера, друковані опитувальні листи, інтерфейси адміністративних даних та методи інтеграції даних. Цей підпроцес передбачає проектування механізму збору, типових запитань та відповідей відповідно до показників та класифікацій, спроектованих у підпроцесі 2.2. Він також передбачає проектування будь-яких офіційних угод, пов'язаних з постачанням даних, і підтвердження правової бази для збору даних.

Цей підпроцес також включає проектування систем управління зв’язками з постачальниками.

- опрацювання методів збору/отримання, механізмів збору, переліку стандартних запитань/відповідей;

- підготовка пропозицій про потребу в укладанні/актуалізації угод щодо взаємообміну інформаційними ресурсами;

- вивчення прямого підключення механізмів збору даних до системи статистичних метаданих.

Визначені методи збору/отримання даних.

Визначені механізми збору.

Перелік стандартних запитань і відповідей.

Пропозиції до бібліотеки стандартних запитань і відповідей.

Пропозиції з укладання/актуалізації угод щодо взаємообміну інформаційними ресурсами.

Визначені можливі канали обміну/отримання даних.

Підпроцес  2.4. Проектування генеральної сукупності та вибірки

Цей підпроцес виконується для ДСС із прямим збором даних від респондентів. Його використовують для виявлення, визначення та опису сукупності, яка представляє інтерес, генеральної сукупності, джерел її формування, проектування плану/порядку та дизайну сукупності, що безпосередньо буде обстежуватися (вибірки, встановлення критеріїв та методів її формування, методів поєднання джерел (за необхідності). Cукупності, що безпосередньо будуть обстежуватися, створюються під час підпроцесу 4.1 "Формування генеральної сукупності та вибірки" на основі методології, визначеної у цьому підпроцесі.

- опрацювання питань щодо визначення статистичних одиниць ДСС;

-  визначення меж генеральної сукупності та аналіз питання щодо охоплення нею сукупності, яка представляє інтерес, та обсягів сукупностей, що безпосередньо будуть обстежуватися;

- проектування методології формування сукупностей, що безпосередньо будуть обстежуватися;

- проектування методики та методологічних положень щодо формування вибіркових сукупностей.

Визначені статистичні одиниці для ДСС.

Перелік джерел формування сукупності одиниць ДСС.

Результати аналізу питання щодо охоплення генеральною сукупністю ДСС сукупності, яка представляє інтерес.

Опис формування сукупності ДСС та переліків респондентів.

Методики та методологічні положення щодо формування вибіркових сукупностей.

Підпроцес  2.5. Проектування обробки та аналізу

Під час цього підпроцесу проектується методологія, яка використовується під час процесу 5 "Обробка даних" та процесу 6 "Аналіз". Він включає методи і порядок кодування, редагування, імпутації, оцінювання, інтегрування, підтвердження та оформлення наборів даних.

- визначення методів обробки та аналізу статистичної інформації (кодування, редагування, імпутації, оцінювання, інтегрування, підтвердження та оформлення наборів даних);

- визначення методів і порядку розрахунку статистичних показників;

- проектування/актуалізація методики та методологічних положень щодо оброблення даних та отримання результатів ДСС.

Опис методів і порядку кодування, редагування, імпутації, оцінювання, інтегрування, підтвердження та оформлення наборів даних.

Опис методів і порядку розрахунку статистичних показників.

Методики та методологічні положення щодо оброблення даних та отримання результатів ДСС.

Підпроцес  2.6. Проектування систем виробництва та технологій

Підпроцес визначає, чи всі підпроцеси від збору даних до поширення спроектовані цілісно та послідовно.

Під час проведення ДСС виникає необхідність у різноманітних системах та базах даних. Загальний принцип – повторне застосування процесів та технології в багатьох ДСС. Тому спочатку існуючі системи та бази даних перевіряються для встановлення того, чи підходять вони для досягнення цілей цього ДСС, а потім, якщо виявлено недоліки, проектуються нові рішення. На цьому підпроцесі також визначається відповідальність персоналу щодо взаємодії із системами.

- визначення методів забезпечення статистичної конфіденційності;

- визначення системи виробництва статистичної інформації для оброблення даних ДСС та вимог до них;

- підготовка постановки задачі на проектування системи виробництва статистичної інформації та розгляд на Раді ІТ;

- узгодження та затвердження методологічної/методичної документації та звітно-статистичної документації, в тому числі за участю заінтересованих учасників;

- опис взаємодії персоналу із системами і розподілу відповідальності за виконання ДСС;

- формування звіту за результатами процесу проектування.

Методологічні положення щодо проведення ДСС.

Програми тестування та апробації.

Постановки задачі на обробку даних ДСС.

Технічне завдання на розроблення/удосконалення інструментів збирання, обробки, аналізу та поширення даних.

Опис обробки даних ДСС у разі використання прикладних програм.

Регламентні документи для персоналу щодо проведення ДСС.

Пропозиції до технологічної програми в частині ДСС.

Пропозиції щодо регламентних документів для персоналу щодо проведення ДСС.

Звіт за результатами процесу "Проектування".

Процес 3 – Створення

Формування та випробовування систем виробництва та технології до моменту, доки вони не будуть готовими для використання в "живому" середовищі. Результати "Проектування" визначають вибір рішень, механізмів, технологій та інформації багаторазового використання, які компонуються та комплектуються на цьому процесі, для того щоб створити робоче середовище для проведення ДСС. В основному це послідовні процеси, але іноді вони відбуваються паралельно і можуть бути багатократними. Процес складається із 7 підпроцесів:

Підпроцес  3.1. Створення інструменту збору даних

Створення механізму збору даних для використання на процесі 4 "Збирання". Механізм збору даних виробляється чи створюється на основі технічних вимог на проектування, створених під час процесу 2 "Проектування". Під час збору може використовуватися один чи декілька способів отримання даних, наприклад, опитування при особистому спілкуванні чи по телефону; паперові, електронні чи інтернет-анкети. Механізмами збирання можуть бути звичайні методи отримання даних, з існуючих статистичних або адміністративних наборів даних. Цей підпроцес також включає підготовку та тестування змісту та функціонування такого інструменту (наприклад перевірка запитань у формах ДСС). Здійснюється перевірка прямого підключення механізмів збору даних до системи статистичних метаданих таким чином, щоб метадані можна було легше отримувати на процесі збирання. Зв’язок метаданих та даних у момент отримання може зекономити час та зусилля на останніх етапах. Забезпечення збирання метричних даних (параданих) також є важливим елементом цього підпроцесу.

- створення звітно-статистичної документації;

- створення статистичного інструментарію звітно-статистичної документації (форм ДСС, Загального табеля (переліку) форм ДСС, інструкцій тощо);

- опрацювання та тестування каналів збирання даних;

- опрацювання способів зв'язку з респондентами;

- опрацювання способів отримання інформації про збирання статистичної інформації (параданих);

- перевірка прямого підключення механізмів збору даних до системи статистичних метаданих;

- друк форм;

- створення шаблонів форм електронної звітності;

- підготовка/актуалізація угод з постачальниками адміністративних даних/даних з альтернативних джерел.

Звітно-статистична документація.

Опрацьовані і протестовані канали збирання даних (паперова та електронна звітність, тощо).

Опрацьовані способи зв'язку з респондентами.

Програмне забезпечення для збирання даних та шаблони форм електронної звітності.

Задокументовані способи отримання інформації про збирання статистичної інформації (параданих).

Угоди з постачальниками адміністративних даних/даних з альтернативних джерел.

Підключені механізми збору даних до системи статистичних метаданих.

Підпроцес  3.2. Створення/удосконалення інструментів обробки даних

Створення нових та покращення існуючих інструментів, необхідних для процесів 5 та 6, які розобляються відповідно до   вимог, визначених у процесі 2 "Проектування". Серед інструментів можуть бути процедури та функції інтерактивної взаємодії, сховища даних, засоби трансформації, компоненти структури робочого процесу, засоби управління зв’язками з постачальниками та засоби управління метаданими.

- розроблення/удосконалення  програмних комплексів для обробки та аналізу даних;

- розроблення/удосконалення експлуатаційної документації;

- інсталяція програмно-технічних засобів;

- розробка засобів управління зв'язками з постачальниками та засобів управління метаданими.

Програмні комплекси для обробки та аналізу даних. Експлуатаційна документація.

Підпроцес  3.3. Створення та удосконалення компонентів поширення

Розроблення нових і удосконалення існуючих компонентів та послуг, необхідних для поширення статистичної продукції, визначених у підпроцесі 2.1. Сюди входять усі компоненти та послуги з поширення, починаючи від тих, що використовуються для традиційних паперових публікацій, і закінчуючи тими, які забезпечують веб-послуги, виробництво відкритих даних або доступ до мікроданних.

- створення/зміна макетів статистичних публікацій та їх окремих компонентів; розробка структур файлів відкритих даних і файлів мікроданих та їх опису; розробка шаблонів таблиць, графіків, діаграм, інфографіки тощо;

- створення/доопрацювання інформаційної системи та/або спеціалізованих програмних засобів для підготовки статистичних продуктів.

Макети вихідної статистичної інформації (статистичних продуктів).

Структури файлів відкритих даних і файлів мікроданих з описом.

Підпроцес  3.4. Налаштування робочих процесів

Налаштування робочих процесів та систем, які застосовуються в рамках ДСС, починаючи зі збору даних та завершуючи поширенням. Він гарантує, що технологія, визначена в підпроцесі 2.6,  діє на практиці.

- формування/модифікація, документування та затвердження технологічної програми статистичного виробництва ДСС;

- розробка етапів послідовності проведення ДСС;

- розробка проектів регламентних, організаційних, навчальних документів щодо проведення ДСС.

Проект Технологічної програми.

Проекти регламентних, організаційних, навчальних документів щодо проведення ДСС.

Підпроцес  3.5. Тестування системи виробництва

Технічне тестування нових програмних комплексів, інструментів та стандартних процедур, а також підтвердження можливості застосування існуючих процедур, які використовуються в інших процесах. Тестування взаємодії між компонентами різних процесів та забезпечення того, щоб система виробництва працювала як злагоджений комплекс процесів, інформації та послуг.

 - проведення апробації проектів методологічної/методичної документації або пробного (пілотного) державного статистичного спостереження за участю респондентів;

 - тестування розробниками програмного забезпечення програмних комплексів для збирання, обробки, аналізу та поширення даних, а також об’єктів метаданих;

- внесення змін до програмного забезпечення та експлуатаційної документації за результатами тестування;

- тестові випробування оновлених версій програмного забезпечення та/або об’єктів метаданих і інсталяційної, технічної (технологічної) документації;

- документування результатів тестування;

- розгляд результатів тестування системи виробництва на засіданнях дорадчих органів.

Програмні комплекси для збирання, обробки, аналізу та поширення даних, готові для проведення дослідної експлуатації.

Оформлені документи про результати тестування системи виробництва.

Підпроцес  3.6. Тестування державного статистичного спостереження

Діяльність, пов'язана з управлінням тестуванням і апробацією процесу проведення ДСС. Проведення обмеженого збору даних для випробування механізму збору даних, подальша обробка та аналіз зібраних даних для забезпечення очікуваних результатів проведення ДСС. Після тестування і апробації може виникнути необхідність повернутися до попереднього кроку та налаштувати інструменти, системи чи компоненти.

 - поставка програмних комплексів для збирання, обробки, аналізу та поширення даних для проведення дослідної експлуатації;

- дослідна експлуатація програмних комплексів для збирання, обробки, аналізу та поширення даних;

- узагальнення, оформлення та затвердження результатів дослідної експлуатації;

- внесення змін до програмного забезпечення та експлуатаційної документації за результатами дослідної експлуатації.

Звіти про результати тестування/ апробації ДСС, розглянуті дорадчими органами.

Підпроцес  3.7. Завершення створення системи виробництва

Впровадження створених/удосконалених інструментів та компонентів процесу у виробниче середовище та забезпечення їх належного функціонування при проведенні ДСС (ця діяльність може також бути частиною підпроцесу 3.5).

- поставка системи виробництва для промислової експлуатації;

- початок промислової експлуатації системи виробництва;

- навчання персоналу;

- технічна підтримка програмних комплексів для збирання, обробки, аналізу та поширення даних;

- формування звіту за результатами процесу створення.

Функціонуючі згідно з вимогами програмно-апаратні комплекси та інформаційно-телекомунікаційні системи.

Експлуатаційна документація.

Регламентні (організаційні) документи щодо проведення ДСС.

Звіт за результатами процесу "Створення".

Процес 4 – Збирання

Збирання усіх необхідних даних за допомогою різних методів збору (у тому числі витяги з адміністративних та статистичних реєстрів та баз даних) та завантаження їх у відповідне інформаційне середовище. Цей процес не передбачає будь-яке трансформування зібраних даних, оскільки це відбувається на процесі 5 "Обробка даних". Щодо вихідної статистичної інформації, що виробляється регулярно, цей процес відбувається при кожному повторі. Процес Збирання даних поділяється на 4 підпроцеси:

Підпроцес 4.1. Формування генеральних сукупностей та вибірок

Формування генеральних сукупностей та здійснення вибірки для збору даних методами й правилами, визначеними у підпроцесі 2.4 (Проектування генеральної сукупності та вибірки). Координація вибірок між окремими випадками одного й того ж ДСС (наприклад, у випадку співпадінь чи повторень), а також між різними ДСС, які використовують спільну основу чи реєстр (наприклад, для управління співпадіннями або звітним навантаженням).

- формування генеральних сукупностей (основ вибірки) одиниць для ДСС;

- формування сукупностей одиниць для ДСС (вибірок) та переліків респондентів, їх актуалізація (включаючи ротацію);

- формування територіального розміщення мережі респондентів для проведення вибіркових обстежень населення (домогосподарств);

 - координація звітного навантаження на респондентів у державних статистичних спостереженнях, формування матриці участі респондентів у ДСС.

Сформовані сукупності одиниць ДСС та переліки респондентів ДСС. Сформована мережа респондентів для проведення вибіркових обстежень населення (домогосподарств).

Підпроцес 4.2. Організація збирання даних

Забезпечення готовності до збору даних всіма запланованими методами. Стратегія планування до конкретних випадків ДСС. У разі регулярного повторення процесу деякі (або усі) ці заходи можуть не вимагатися для кожного повтору. Для одноразових та нових процесів ці заходи тривають довше.

- формування складу, територіального розміщення та організація діяльності фахівців з інтерв'ювання та економістів, які займаються реєстрацією даних;

- навчання персоналу зі збору даних;

- технічне забезпечення збору даних;

- підготовка інструментів збору даних (наприклад, попереднє заповнення форм ДСС за допомогою існуючих даних, завантаження даних форм ДСС у комп’ютери тих, хто проводить опитування, тощо);

- здійснення заходів по забезпеченню безпеки даних, що збираються;

- підтримка електронних сервісів для респондентів.

Підготовлені інструменти для забезпечення збору даних. Навчений персонал. Сформований склад та територіальне розміщення фахівців з інтерв'ювання та економістів, які займаються реєстрацією даних.

Підпроцес 4.3. Збирання даних

Власне збір даних з використанням різних методів та механізмів збору. Налагодження зв’язку з постачальниками та будь-які подальші дії, які з цього випливають. Управління зв’язками з постачальниками даних. У разі, якщо збір даних відповідає встановлений меті (звичайно виходячи з відсотка отриманих відповідей), збір даних завершується і складається звіт про результати збору даних.

- надання консультативної підтримки респондентам державних статистичних спостережень щодо заповнення статистичних формулярів;

- повідомлення/нагадування респондентам про участь у державних статистичних спостереженнях;

- приймання форм ДСС від респондентів, та отримання інформації від постачальників адміністративних даних;

- проведення опитувань респондентів, відібраних для участі у вибіркових обстеженнях населення (домогосподарств);

- контроль якості роботи фахівців з інтерв'ювання;

- збирання інформації про причини неподання респондентами форм державних статистичних спостережень;

- отримання даних з інших ДСС;

- реєстрація цін (тарифів) на споживчі товари (послуги).

Паперові та електронні звіти, отримані від респондентів, заповнені статистичні формуляри, передбачені для обстежень домогосподарств, реєстрації цін.

Інформація, отримана від постачальників адміністративних даних; дані інших ДСС.

Результати контролю якості роботи фахівців з інтерв'ювання.

Інформація про причини неподання респондентами форм державних статистичних спостережень. Звіт про результати збору даних.

Підпроцес 4.4. Завершення збирання

Завантаження зібраних даних та метаданих у відповідне електронне середовище для подальшої обробки на процесі 5 процес – "Обробка даних". Цей процес може включати автоматичний прийом даних або перетворення форматів файлів даних. У випадках застосування фізичного інструменту збору даних, такого як паперова анкета, яка не підлягає подальшій обробці, під час цього процесу здійснюється архівування таких матеріалів.

- виявлення, виправлення та узагальнення помилок;

- введення даних та статистичних метаданих у відповідне електронне середовище для подальшої обробки;

- оформлення до архіву паперових форм ДСС;

- підготовка масиву даних та програмного забезпечення для передачі до архіву;

- моніторинг участі респондентів ДСС;

- узагальнення та аналіз усіх напрямів контролю роботи фахівців з інтерв'ювання;

- збирання параданих та формування звіту за результатами процесу "Збирання".

Дані введені до відповідного електронного середовища.

Звіт за результатами процесу "Збирання".

Процес 5 – Обробка даних

Очищення даних та їх представлення до аналізу. Цей процес складається з підпроцесів, під час яких перевіряються, очищаються та трансформуються зібрані дані, і може повторюватися кілька разів. Щодо вихідної статистичної інформації, яка виробляються на регулярній основі, цей процес відбувається при кожному повторі. Підпроцеси цього процесу можуть застосовуватися для даних як зі статистичних, так і з інших джерел. Процеси "Обробка даних" та "Аналіз" можуть бути ітеративними та паралельними. "Аналіз" може розкрити більш широке розуміння даних, і може виявитися необхідність у додатковій обробці. Діяльність у рамках процесів "Обробка даних" та "Аналіз" може розпочинатися ще до завершення процесу "Збір даних". Це дозволяє проводити розрахунок попередніх результатів, коли своєчасність є критичною для користувачів статистичної інформації, а також збільшує час для аналізу. Ключова різниця між цими процесами полягає в тому, що "Обробка даних" має справу з перетворенням мікроданих, у той час як "Аналіз" передбачає обробку зведених даних. Цей процес поділяється на 8 підпроцесів:

Підпроцес 5.1. Інтеграція даних

Здійснення інтеграції даних, отриманих з кількох джерел. Вхідні дані можуть отримуватися із сукупності зовнішніх чи внутрішніх джерел даних та за допомогою різноманітних методів збору даних. Інтеграція даних може відбуватися в будь-який момент процесу, до чи після будь-яких інших підпроцесів. Може бути ще кілька випадків інтеграції. Після інтеграції, в залежності від вимог до захисту даних, дані можуть набувати статусу анонімних, тобто використовуватися без ідентифікаторів, таких як ім’я та адреса, з метою забезпечення конфіденційності.

- інтеграція даних з різних інформаційних джерел (у т.ч. адміністративних);

- знеособлення даних відповідно до вимог щодо їх захисту.

Інтегрована інформаційна база даних.

Підпроцес 5.2. Класифікація та кодування

Проведення класифікації та кодування вхідних даних. Стандартні процедури кодування, які здійснюються автоматично або вручну, можуть присвоювати цифрові коди текстовим відповідям згідно з попередньо визначеною схемою класифікації.

- класифікація та кодування первинних даних.

Вихідні дані, закодовані відповідно до визначених процедур.

Підпроцес 5.3. Перегляд та валідація

Перевірка зібраних мікроданих, при цьому розглядається кожний запис, щоб спробувати ідентифікувати (і у разі необхідності виправити) потенційні проблеми, помилки та невідповідності, такі як побічні елементи, пункти без відповідей та неправильне кодування. Цей процес також може називатися – "Підтвердження даних". Він може відбуватися багатократно, підтверджуючи правильність даних, виходячи з попередньо встановлених правил редагування, звичайно у визначеному порядку.

- контроль/перевірка повноти, узгодженості, правильності кодування даних, виявлення невідповідності виконання мікро- та макроредагування даних.

Перевірений масив даних. Інформація про виявлені помилки.

Підпроцес 5.4. Редагування та імпутація

Додавання нових значень даних, якщо дані визнані неточними, відсутніми чи ненадійними. Поняття редагування та імпутації охоплюють широке коло методів, зокрема із застосуванням підходу нормування.

- виявлення неточних (ненадійних) та відсутніх даних;

- вибір методу розрахунку нових значень даних замість неточних (ненадійних) та відсутніх даних;

- розрахунок нових значень даних замість неточних (ненадійних) та відсутніх даних;

- запис умовних (розрахункових) даних до набору даних;

- виробництво метаданих процесу редагування та імпутації.

Відредагований масив вхідних даних.

Роз'яснення щодо редагування інформації.

Підпроцес 5.5. Отримання нових розрахункових показників та статистичних одиниць

Отримання похідних змінних та статистичних одиниць, які не були отримані на процесі збору даних, але які необхідні для досягнення потрібного результату. Вироблення розрахункових показників шляхом застосування арифметичної формули до одного чи кількох змінних, які вже присутні у наборі даних, або використання різних модельних припущень. Може виникнути необхідність у повторі, оскільки деякі похідні змінні можуть самі базуватися на інших похідних змінних. Таким чином, важливо забезпечити, щоб похідні змінні вироблялися у правильному порядку. Одиниці можуть бути отримані шляхом агрегування чи розділення даних для статистичних одиниць або з використанням інших різних методів оцінки.

- обчислення значень розрахункових показників з первинних даних;

- автоматизоване формування значень нових розрахункових показників;

- виконання компіляцій вхідних даних. 

Масив даних з урахуванням розрахункових показників з первинних даних.

Підпроцес 5.6. Розрахунок ваг

Створення вагових коефіцієнтів для індивідуальних масивів даних відповідно до методології, розробленої у підпроцесі 2.5 "Проектування обробки та аналізу". У випадку вибіркових обстежень статистичні ваги використовуються для перерахунку результатів у загальний показник з метою забезпечення їх репрезентативності за цільовою сукупністю або коригування підсумків на відсутні відповіді.

- здійснення розрахунку системи статистичних ваг. 

Система статистичних ваг.

Підпроцес 5.7. Розрахунок агрегованих показників

Створення агрегованих даних та підсумків по всій сукупності на основі мікроданих та агрегованих показників більш низького рівня. Цей підпроцес передбачає підсумовування первинних даних, які мають спільні визначені характеристики, а також розрахунок середніх показників та дисперсії із застосуванням статистичних ваг із підпроцесу 5.6. для отримання відповідних підсумків. У випадку вибіркових обстежень цей підпроцес дозволяє розрахувати похибку вибірки та зіставити її з відповідними агрегованими показниками.

- розповсюдження даних вибіркових державних статистичних спостережень на генеральну сукупність;

- розрахунок агрегованих показників;

- розрахунок стандартної, граничної похибок та коефіцієнта варіації.

Інформація щодо похибок вибірок, система агрегованих показників.

Підпроцес 5.8. Завершення формування масивів даних

Об'єднання результатів інших підпроцесів цього процесу в один процес даних (зазвичай макроданих), який може застосовуватись в якості вхідних даних на процесі 6 "Аналіз".

- формування масивів даних, вихідних файлів, баз даних за результатами державного статистичного спостереження;

- формування й аналіз параданих про перебіг процесу;

- документування проблемних питань, що виникли під час оброблення даних для подальшого формування пропозицій щодо змін до методології, експлуатаційної документації тощо;

- підготовка файлів мікроданих;

- архівування матеріалів;

- формування звіту за результатами процесу обробки даних.

Масив даних, макроданих, файли мікроданих, інформація щодо проблемних питань у процесі обробки виробництва статистичної інформації.

Звіт за результатами процесу "Обробка даних".

Процес 6 – Аналіз

Здійснюється безпосереднє формування вихідної статистичної інформації, її детальна перевірка та підготовка до поширення. Цей етап включає підготовку вмісту вихідних статистичних продуктів, у тому числі коментарів, технічних приміток тощо, а також забезпечення того, щоб продукти "відповідали визначним цілям" перш ніж розпочинати їхнє поширення. Процес включає підпроцеси та заходи, які дозволяють аналітикам в галузі статистики скласти уяву стосовно виробленої статистичної інформації. Щодо статистичної інформації, яка виробляється на регулярній основі, цей процес відбувається при кожному повторі. "Аналіз" та його підпроцеси є типовими для усієї вихідної статистичної інформації, незалежно від джерел її отримання. "Аналіз" поділяється на підпроцеси, які в основному є послідовними, але можуть також відбуватися паралельно та бути ітеративними. Процес включає 5 підпроцесів:

Підпроцес 6.1. Підготовка попередніх матеріалів

Перетворення зібраних даних на вихідну статистичну інформацію. Він передбачає створення додаткових показників, таких як індекси, тренди або скориговані з урахуванням сезонних коливань динамічні ряди, а також реєстрацію характеристик якості.

- розрахунок додаткових показників;

- формування додаткових (крім тих, що автоматично формуються в програмних комплексах обробки інформації) вихідних таблиць для аналізу;

- сезонне коригування даних;

- проведення ретроспективних розрахунків;

- ведення динамічних рядів даних;

- перевірка якості процесу перетворення даних.

Додаткові показники.

Сформовані вихідні таблиці для проведення аналізу.

Сезонно скориговані дані. Результати ретроспективних розрахунків.

Динамічні ряди даних. Інформація щодо якості процесу перетворення даних.

Підпроцес 6.2. Підтвердження вихідної статистичної інформації

Підтвердження якості вихідної статистичної інформації відповідно до загальних норм якості та очікувань. Цей підпроцес також включає діяльність, пов’язану зі збором відомостей та сукупним ефектом з формуванням комплексу знань щодо конкретної галузі. Ці знання застосовуються потім для ідентифікації будь-яких невідповідностей очікуваним результатам та дозволяють здійснювати ґрунтовний, поглиблений аналіз.

- перевірка відповідності показників охоплення сукупності та рівнів коефіцієнтів надання відповідей встановленим вимогам;

- порівняння статистичної інформації з попередніми циклами (якщо доречно);

- порівняння статистичної інформації з іншою статистичною інформацією (як внутрішньою, так і зовнішньою);

- дослідження невідповідностей у статистичній інформації;

- проведення макроредагування;

- підтвердження вихідної статистичної інформації з урахування очікувань та комплексом знань щодо конкретної галузі.

Інформація про ступінь відповідності показників охоплення сукупності та рівнів надання відповідей встановленим вимогам.

Інформація про обсяг та причини невідповідностей даних. Інформація про обсяги та використані методи макроредагування.

Підтверджена вихідна статистична інформація.

Підпроцес 6.3. Тлумачення та пояснення

Досягнення поглибленого розуміння виробленої вихідної статистичної інформації для можливості її тлумачення й пояснення та оцінки того, на скільки добре вона відповідає початковим очікуванням  шляхом її розгляду з усіх можливих точок зору, використовуючи усі можливі механізми й підходи, а також проводячи поглиблений аналіз.

- проведення поглибленого аналізу щодо відповідності вихідної статистичної інформації початковим очікуванням;

- тлумачення та пояснення статистичної інформації відповідно до мети, методології складання і способів її використання;

- підготовка відповідних метаданих.

Підготовлені тлумачення та пояснення до підтвердженої вихідної статистичної інформації.

Відповідні метадані щодо підтвердженої вихідної статистичної інформації.

Підпроцес 6.4. Контроль можливості розкриття статистичної інформації

Забезпечення дотримання правил конфіденційності стосовно вихідної статистичної інформації (та відповідних метаданих). Може включати проведення перевірки первинного та вторинного розкриття інформації, а також застосування методів створення перешкод її розкриттю.

- здійснення контролю за дотриманням правил конфіденційності щодо розкриття інформації, яка прямо чи опосередковано ідентифікує особу чи суб’єкт господарювання;

- застосування до вихідної статистичної інформації методів створення перешкод розкриттю статистичної інформації.

Вихідна статистична інформація (включаючи мікродані). Перевірена на дотримання правил конфіденційності.

Підпроцес 6.5. Завершення формування вихідної інформації

Забезпечення відповідності вихідної статистичної інформації та пов’язаних з нею метаданих (інформації) меті та встановленому рівню якості і таким чином придатності до поширення.

- перевірка повноти й узгодженості відповідності вихідної статистичної інформації;

- визначення ступеня деталізації та застосування застережень;

- формування повного набору допоміжної інформації, у т.ч. тлумачень, коментарів, технічних приміток, довідок, інших потрібних метаданих;

- обговорення та схвалення складу вихідної інформації;

- збирання параданих формування звіту за результатами процесу "Аналізу".

Вихідна статистична інформація, підготовлена до поширення у статистичних продуктах, у тому числі файлах мікроданих.

Звіт за результатами процесу "Аналіз".

Процес 7 – Поширення

Надання статистичних продуктів користувачам. Для вихідної статистичної інформації, яка виробляється регулярно, цей процес відбувається при кожному повторі її виробництва. Він складається з підпроцесів, які звичайно відбуваються один за одним, але можуть відбуватися і паралельно, і бути ітеративними.  Процес складається з 5 підпроцесів:

Підпроцес 7.1. Оновлення системи поширення вихідної інформації

Оновлення систем, в яких зберігаються дані та метадані, призначені для поширення. Перевірка, чи всі необхідні метадані підготовлені до поширення. Форматування, завантаження та прив’язування метаданих бажано проводити на ранніх етапах.

- підготовка даних і метаданих до розміщення у вихідних базах даних;

- завантаження даних і метаданих у вихідні бази даних;

- забезпечення прив’язування даних до відповідних метаданих.

Дані та метадані, завантажені у бази даних для поширення

Підпроцес 7.2. Виробництво продуктів для поширення

Виробництво продуктів, які були заплановані (у підпроцесі 2.1), для задоволення потреб користувачів. Це можуть бути: електронні та друковані продукти, прес-релізи, файли мікроданих, статистичні таблиці тощо.

- верстка та коректура публікацій, форматування та заповнення таблиць;

- переклад і літературне редагування;

- перевірка на відповідність стандартам публікування;

- підготовка електронних версій, друк;

- підготовка файлів мікроданих, підготовлених у підпроцесі 6.5, підрозділу, відповідальному за поширення.

Статистичні продукти, підготовлені для поширення.

Підпроцес 7.3. Управління поширенням

Оприлюднення вироблених статистичних продуктів із забезпеченням наявності усіх елементів для поширення, включаючи дотримання термінів. Організація брифінгів для різних груп користувачів статистичної інформації, у т.ч. представників засобів масової інформації, посадових осіб тощо.

- підготовка Каталогу офіційних статистичних публікацій;

- оприлюднення статистичних продуктів, у тому числі на веб-сайтах, друк і розсилка паперових видань;

- надання файлів мікроданих користувачам для дослідницьких цілей за відповідною угодою;

- моніторинг виявлення помилок у статистичних продуктах, внесення виправлень та повідомлення про це користувачів статистичної інформації (за потреби з поверненням до підпроцесів 4.4, 5.4, 6.2).

Каталог офіційних статистичних публікацій.

Статистичні продукти (інформація на веб-сайтах, електронні та друковані публікації, файли мікроданих).

Підпроцес 7.4. Просування продуктів для поширення

Активне просування вироблених статистичних продуктів, з метою сприяння їх поширенню серед максимально широкої аудиторії. Застосування інструментів управління зв’язками із користувачами для забезпечення  більш ефективної роботи з потенційними користувачами продуктів із використанням різних каналів комунікацій для різних цільових груп (веб-сайти, соціальні медіа тощо) для спрощення процесу донесення статистичної інформації до користувачів

- визначення каналів і способів поширення;

- інформування про порядок та умови доступу до статистичної інформації;

- популяризація, анонсування, рекламування статистичних продуктів;

- поширення інформації на сторонніх веб-сайтах (гіперпосилання), в соціальних мережах і відстеження кількості переглядів.

Розширення кола користувачів.

Рекламна продукція.

Підпроцес 7.5. Підтримка користувачів

Прийняття запитів від користувачів та надання відповідей у визначені терміни. Аналіз запитів для виявлення нових чи змінених потреб користувачів

- моніторинг задоволеності користувачів , у т.ч. проведення анкетних опитувань;

- надання користувачам відповідей на запити та звернення;

- розрахунок індексу задоволеності користувачів статистичної інформації;

- інформування про терміни оприлюднення статистичних продуктів (календар оприлюднення інформації на веб-сайті);

- виявлення нових чи змінених потреб користувачів;

- контент-аналіз: ЗМІ, соціальних мереж, сайтів органів державної влади та міжнародних організацій;

- формування звіту за результатами процесу поширення.

Повідомлення для користувачів за результатами анкетних опитувань, відповіді користувачам на звернення, запити, індекс задоволеності користувачів, календар оприлюднення інформації на веб-сайті.

Звіт за результатами процесу "Поширення".

Процес 8 – Оцінка

Оцінка результатів виконання процесів та підпроцесів базується на вхідних даних кількісного та якісного характеру з метою виявлення пріоритетності потенційних удосконалень, зібраних із різних процесів. Процес складається з 3 підпроцесів:

Підпроцес 8.1. Збір інформації для оцінки

Збирання усіх відповідних даних і забезпечення доступу до них для особи чи групи осіб, які здійснюють оцінку. Інформація для оцінки може вироблятися під час будь-якого процесу чи підпроцесу, у тому числі з пропозицій від користувачів статистичної інформації, метаданих процесу та пропозицій персоналу.

- проведення інвентаризації ДСС, заповнення та аналіз запитальників самооцінки;

- моніторинг виконання рішень дорадчих органів Держстату (Інвентаризації ДСС, Методкомісії, ради ІТ, тощо);

- моніторинг виконання ПДСС.

Результати аналізу запитальників самооцінки

Звіти про виконання рішень дорадчих органів Держстату, ПДСС тощо.

Підпроцес 8.2. Проведення оцінки

Аналіз вхідних оціночних даних та синтез їх у оціночний звіт. У звіті про результати оцінки слід надати рекомендації щодо доцільних змін. Ці рекомендації можуть включати зміни, що стосуються будь-якого процесу чи підпроцесу.

- аналіз інформації для оцінювання, виявлення  наявних проблем у статистичному виробництві даних та підготовка рекомендацій з його покращення;

- підготовка звітів з якості даних, оцінка змін, які відбулися в показниках якості.

Рекомендації та пропозиції щодо удосконалення ДСС за результатами рішень, прийнятих під час виконання підпроцесу 8.1.

Звіти з якості даних.

Підпроцес 8.3. Узгодження плану дій

Розробка та погодження планів дій на основі рекомендацій з підпроцесу 8.2. та механізмів моніторингу їх виконання.

- розгляд та узагальнення пропозицій на засіданнях дорадчих органів щодо подальших дій;

- розробка та погодження планів дій;

- проведення заходів для покращення показників з якості, за якими не вдалося отримати очікуваних змін;

 - прийняття рішення про потреби в модифікації метаданих;

- створення механізмів моніторингу плану дій.

Узгоджені плани дій та механізми їх моніторингу.

Звіт за результатами процесу "Оцінка".