Методологія

Ця частина окреслює принципи побудови індексу, використані в поточній версії параметри, а також вказує на особливості збору та аналізу даних.

Принципи

  • всеохопність: охоплює всі сфери, в яких у ОДА є реальні повноваження, визначені законом

  • гнучкість: можна довільно змінювати перелік параметрів нижнього рівня, а також вагу параметрів у кінцевому індексі

  • нормалізованість: всі вхідні параметри нормалізуються, що дозволяє включати до індексу будь-які показники

  • версійність: наявні принципи визначення версій індексу, що дозволяє зберігати тяглість у оцінках

  • можливість інтеграції зовнішніх параметрів із інших індексів

Індекс працює як конструктор, що дозволяє змінювати перелік параметрів та навіть способи розрахунку без шкоди загальній структурі.

З версії 0.5 зберігаються також сирі ненормалізовані дані, що дозволить порівняти динаміку області за показником протягом декількох періодів.

Параметри

Структурно індекс складається з верхнього та нижнього рівнів.

Верхній рівень розраховуватиметься за галузевим принципом розподілу повноважень, нижній - на основі набору параметрів для оцінки діяльності у кожній галузі, що можуть змінюватися за потреби.

Верхній рівень

Параметри верхнього рівня формуються на основі таких статей ЗУ «Про місцеві державні адміністрації»:

  • \(P_1\): Соціально-економічний розвиток (Стаття 17)

  • \(P_2\): Бюджет та фінанси (Стаття 18)

  • \(P_3\): Управління майном, приватизація, сприяння розвитку підприємництва та здійснення державної регуляторної політики (Стаття 19)

  • \(P_4\): Містобудування, ЖКГ, побутове, торговельне обслуговування, транспорт і зв’язок (Стаття 20)

  • \(P_5\): Використання та охорона земель, природних ресурсів і охорона довкілля (Стаття 21)

  • \(P_6\): Наука, освіта, охорона здоров’я, культура, фізкультура і спорт, материнство і дитинство, сім’я та молодь (Стаття 22)

  • \(P_7\): Соціальне забезпечення та соціальний захист населення (Стаття 23)

  • \(P_8\): Зайнятість населення, праця та заробітна плата (Стаття 24)

Вінницька область: приклад розподілу значень параметрів верхнього рівня

Розподіл значень верхнього рівня

Сірим кольором позначена середня оцінка за параметром за усіма областями

Нижній рівень

Параметри нижнього рівня є операціоналізацією параметрів верхнього рівня. Сукупність показників нижнього рівня \(p_2\__{01}-p_2\__{10}\), наприклад, мають опосередковано вимірювати галузевий показник \(P_2\).

Створюючи проксі-індикатори, ми в першу чергу керувалися:
  • чіткістю (для уникнення різночитань та хибних інтерпретацій під час збору даних)

  • наявністю даних

  • точністю (проксі-показник вимірює те, що покликаний виміряти, а не інше)

Деталізований опис параметрів нижнього рівня, що включає інформацію про тип нормалізації, межі та вагу параметрів, можна знайти в цій таблиці.

Параметр

Опис параметру (показника) нижнього рівня

Розпорядник

p1_01

сума коштів актуальних (діючих) проєктів міжнародної допомоги, бенефіціаром яких є ОДА, у розрахунку на душу населення

Кабінет міністрів України

p1_02

сума коштів, залучених за новими проєктами міжнародної допомоги, бенефіціаром яких є ОДА, що почали діяти з початку року до кінця звітного періоду

Кабінет міністрів України

p1_03

рівень використання коштів державного фонду регіонального розвитку

Міністерство розвитку громад та територій

p1_04

частка коштів, затверджених КМУ на виконання конкретних проєктів ДФРР, відносно загальної суми виділених на область коштів

Міністерство розвитку громад та територій

p2_01

рівень надходжень податку на доходи фізичних осіб на одну особу наявного населення станом на 1 січня звітного року

Міністерство фінансів

p2_02

рівень виконання доходів загального фонду зведеного бюджету області, мм. Києва та Севастополя (без міжбюджетних трансфертів)

Міністерство фінансів

p2_03

обсяг доходів зведеного бюджету області, мм. Києва та Севастополя (без міжбюджетних трансфертів) порівняно з аналогічним періодом минулого року

Міністерство фінансів

p2_04

обсяг капітальних видатків зведеного бюджету області, мм. Києва та Севастополя

Міністерство фінансів

p2_05

рівень надходження плати за землю (земельного податку та орендної плати) до зведеного бюджету області, мм. Києва та Севастополя

Міністерство фінансів

p2_06

частка вартості закупівль, проведених за процедурою відкритих торгів відносно загальної вартості закупівель, проведених обласними, Київською та Севастопольською міськими держадміністраціями, їх структурними підрозділами та підприємствами, установами, організаціями, які належать до сфери їх управління

ДП «Прозорро»

p2_07

недоотримано державних фінансових ресурсів за результатами аудиту (грн)

Державна аудиторська служба

p2_08

рівень незаконних витрат державних ресурсів за результатами аудиту (грн)

Державна аудиторська служба

p2_09

рівень нецільових витрат державних ресурсів за результатами аудиту (грн)

Державна аудиторська служба

p2_10

недостача державних ресурсів за результатами аудиту (грн)

Державна аудиторська служба

p3_01

оголошена вартість майна, що реалізується в рамках малої приватизації у регіоні протягом звітного періоду

ДП «Прозорро»

p3_02

дохід від малої приватизації у регіоні протягом звітного періоду

ДП «Прозорро»

p4_02

наявність генеральних планів у містах та селищах міського типу

Обласна державна адміністрація

p4_03

наявність генеральних планів у селах

Обласна державна адміністрація

p4_05

протяжність автомобільних доріг загального користування місцевого значення, на яких проведено капітальний ремонт, реконструкцію, відносно загальної довжини доріг

Обласна державна адміністрація

p4_06

рівень використання коштів дорожнього фонду, передбачених для будівництва, реконструкції, ремонту та утримання автомобільних доріг загального користування місцевого значення, вулиць і доріг комунальної власності у населених пунктах

Секретаріат КМУ

p4_07

середній рівень будівельної готовності об’єктів Великого будівництва (за касовими видатками)

Обласна державна адміністрація

p4_08

середній рівень освоєння коштів, виділених на об’єкти Великого будівництва з усіх джерел

Обласна державна адміністрація

p5_01

обсяги виявлених незаконних вирубок лісів

Обласна державна адміністрація

p5_02

частка земель лісового фонду, на які оформлені правовстановлюючі документи

Обласна державна адміністрація

p5_03

площа об’єктів природно-заповідного фонду області відносно загальної площі області

Міністерство енергетики та захисту довкілля

p5_07

частка площі заповідної території із затвердженими проектами землеустрою від площі заповідної території

Міністерство енергетики та захисту довкілля

p6_01

частка укладених декларацій про вибір лікаря, який надає первинну медичну допомогу відносно загальної кількості населення в області

Національна служба здоров’я України

p6_02

рівень охоплення щепленнями відповідно до річного календаря профілактичних щеплень в Україні

Секретаріат КМУ

p6_03

частка лікувально-профілактичних закладів, що мають статус некомерційних комунальних підприємств

Секретаріат КМУ

p6_04

частка лікувально-профілактичних закладів, підключених до системи e-health

Секретаріат КМУ

p6_05

середній розмір класу у сільських закладах загальної середньої освіти (ЗЗСО)

Інститут освітньої аналітики

p6_06

частка ЗЗСО, у яких навчається менше 100 учнів, за винятком ЗЗСО І та ІІІ ступеня

Інститут освітньої аналітики

p6_07

кількість учнів, що навчаються індивідуально не за станом здоров’я

Інститут освітньої аналітики

p6_08

частка ЗЗСО ІІ та/або ІІІ ступеня, у яких бракує профільних вчителів з двох чи більше предметів (української мови та літератури, історії, фізики, математики, основ інформатики, хімії, географії, біології)

Інститут освітньої аналітики

p6_09

частка кількість дітей віком від трьох до п’яти років, охоплених дошкільною освітою

Секретаріат КМУ

p6_10

частка ліжок, забезпечених подачею кисню, виділених для госпіталізації хворих з COVID-19

МОЗ

p7_01

кількість виданих одиниць технічних та інших засобів реабілітації у розрахунку на одну особу з інвалідністю

Фонд соціального захисту інвалідів

p7_02

частка дітей, що перебуває на обліку в інклюзивно-ресурсних центрах

Обласна державна адміністрація

p7_03

частка дітей-сиріт та дітей, позбавлених батьківського піклування, яких влаштували до сімейних форм виховання або знаходяться під опікою, піклуванням

Міністерство соціальної політики

p7_06

частка дітей, що здобуває освіту в інклюзивних групах ЗДО та інклюзивних класах ЗЗСО

Обласна державна адміністрація

p7_07

кількість наданих соціальних послуг центрами обліку бездомних громадян

Міністерство соціальної політики

p8_03

кількість нещасних випадків на виробництві

Міністерство розвитку економіки, торгівлі та сільського господарства України

p8_04

частка неформально зайнятого населення

Міністерство розвитку економіки, торгівлі та сільського господарства України

p8_05

прострочена кредиторська заборгованість з виплати заробітної плати (з нарахуваннями) працівникам бюджетних установ, які утримуються за рахунок коштів місцевих бюджеті

Секретаріат КМУ

Приклад розподілу значень після проміжних розрахунків

Розподіл значень нижнього рівня

Коробковий графік вище відображає розподіл значень кожного параметру нижнього рівня через їхні квантилі. Такий спосіб візуалізації дозволяє побачити незбалансовані параметри, що мають викиди, як-от \(p_3\__{02}\) або \(p_5\__{07}\) (відповідно, такі параметри ймовірно слід замінити).

Отже, перелік параметрів нижнього рівня може змінюватися з кожною наступною версією індексу (у першу чергу – щоб зменшити кількість незбалансованих та слабких індикаторів).

Дивись також

Версійність: зміни параметрів нижнього рівня відображені у файлі з версійністю

Як визначається вага параметрів

За інших рівних умов вага параметрів нижнього та верхнього рівня дорівнює 1.

На кожному з рівнів є свій основний принцип для зміни ваги:
  • На верхньому рівні слід керуватися перш за все важливістю відповідного галузевого параметру у структурі повноважень ОДА (наприклад, у бюджетній політиці ОДА має значно суттєвіші повноваження, ніж у сфері розвитку підприємництва, тому ваги становлять відповідно 2 та 0.5, тобто бюджетні показники впливають на остаточне значення індексу в 4 рази сильніше)

  • На нижньому рівні найважливішою є потреба групувати показники так, щоб кілька однотипних показників не переважували інші в межах окремого галузевого параметру (наприклад, вага кожного з 4 показників, що стосується виявлених Держаудитслужбою порушень, становить 0.25 або ¼)

Вага галузевих показників верхнього рівня

Показник

Вага

\(P_1\)

2

\(P_2\)

2

\(P_3\)

0.5

\(P_4\)

1

\(P_5\)

1

\(P_6\)

2

\(P_7\)

1

\(P_8\)

0.5

Перелік коефіцієнтів для параметрів нижнього рівня можна знайти в цій таблиці

Збір даних

Звідки ми беремо дані:
  1. Публічні джерела (в пріоритеті АРІ)

  2. ОДА

  3. Інші розпорядники

Основні проблеми:
  • Складно отримати актуальні дані, особливо це стосується даних у публічному доступі

  • Затримки з отриманням даних, зокрема від міністерств та ЦОВВ

  • Можливі проблеми із якістю даних, зокрема це стосується даних, що збираються вручну

Примітка

Слід розіслати форми якомога швидше, оскільки на заповнення часто йде більше 2 тижнів. Також слід запланувати час на зведення та валідацію даних, що збираються вручну (як-мінімум, це 5 датасетів з кожної області).

У цей вільний проміжок часу слід опрацювати дані з публічних джерел: (openbudget, prozorro, нсзу, ВБ, міжнародно-технічна допомога, аудиторські звіти тощо)

Формули

У цій секції окреслені формулу для розрахунку індексу

Нормалізація

Min-max normalization означає перетворення набору значень до певної шкали за такою формулою:

\[{x}' = a + \frac{(x-min(x))(b-a)}{max(x)-min(x)}\]

де

  • \(x\) - набір значень

  • \(a\) та \(b\) - межі шкали нормалізації

Для розрахунку індексу використовується декілька способів такої нормалізації.

Способи нормалізації

  1. Нормалізація не потрібна у тих випадках, коли показник сам по собі визначений у межах [0;1]

  2. Відносна нормалізація: межі визначаються, як максимальний та мінімальний показник серед регіонів

  3. Нормативна нормалізація: межі задаються на основі цільових показників

  4. Змішана нормалізація: одна з меж задається за відносним принципом, інша - за нормативним

Зворотна нормалізація використовується для будь-яких способів нормалізації у випадках, коли вище емпіричне значення означає нижче значення нормалізованого показника (як у випадку з рівнем безробіття чи кількістю нещасних випадків)

У чинній версії індексу переважно використовується відносна нормалізація, проте потрібно докладати зусиль для того, щоб більше показників можна було нормалізувати на основі цільових показників, визначеними конкретними документами – наприклад, Державною стратегією регіонального розвитку.

Способи нормалізації (для нормативної шкала [500, 5000], для змішаної - [мін, 5000]

Область

Обсяг видатків

Відносна

Обернена

Нормативна

Змішана

Львівська

2141.394

1.0

0.0

0.365

0.384

Закарпатська

739.349

0.213

0.787

0.053

0.082

Волинська

728.099

0.207

0.793

0.051

0.079

Херсонська

542.0

0.102

0.898

0.009

0.039

Чернівецька

360.268

0.0

1.0

-0.031

0.0

Середнє зважене

Кожен галузевий параметр рахується як середнє зважене відповідних параметрів нижнього рівня. У свою чергу, індекс оцінки є середнім зваженим галузевих параметрів.

\[\bar{x} = \frac{\sum_{i=1}^{n} w_ix_i}{\sum_{i=1}^{n} w_i}\]

де \(x\) є значенням, \(w\) - його вагою

Параметр нижнього рівня

\[P_i = \frac{\sum_{j=1}^{m} k_{ij}p_{ij}}{\sum_{j=1}^{m} k_{ij}} \times 10\]

де:

  • \(P_i\) - галузевий параметр

  • \(p_{ij}\) - нормалізований на проміжку [0;1] параметр нижнього рівня (докладніше про принципами нормалізації нижче)

  • \(k_{ij}\) - коефіцієнт важливості (за замовчанням дорівнює 1)

  • \(m\) - кількість параметрів нижнього рівня, що використовуються для розрахунку галузевого параметру

Параметр верхнього рівня

\[I = \left [ \frac{\sum_{i=1}^{n} K_iP_i}{\sum_{i=1}^{n} K_i} \times 10 \right ]\]

де:

  • \(I\) - індекс оцінки діяльності ОДА

  • \(P_i\) - галузевий параметр

  • \(K_i\) - коефіцієнт важливості (за замовчанням дорівнює 1)

  • \(n\) - кількість галузевих параметрів (наразі, згідно із ЗУ «Про місцеві державні адміністрації», їх 8)

Дивись також

src package: Вихідний код з втіленням формул в Python