Інформація та ресурси

MEAL Це абревіатура від Monitoring, Evaluation, Accountability and Learning (моніторинг, оцінка, підзвітність та навчання) - комплексна практика відстеження ходу реалізації програми, оцінки її досягнень, забезпечення підзвітності перед людьми, яким вона служить, та використання всіх цих даних для вдосконалення.

У гуманітарній та розвитковій діяльності MEAL - це те, що перетворює діяльність на факти. Моніторинг відстежує прогрес у міру його досягнення, оцінка дозволяє об’єктивно оцінити результати відповідно до критеріїв, підзвітність надає постраждалим громадам реальну можливість висловитися, а навчання дозволяє використовувати отримані висновки для прийняття кращих рішень.

Це важливо, оскільки донори все частіше фінансують те, що, як можна довести, дає результати. Ефективне управління результатами (MEAL) - це спосіб, яким організація доводить свою економічну ефективність та постійно вдосконалюється, а не паперова робота заради самої паперової роботи.

Консультант з M&E (моніторингу та оцінки) допомагає організації виміряти, чи працюють її програми, і переконливо довести це донорам. На практиці це означає розробку системи результатів - логічної матриці (logframe) або теорії змін (ToC) - вибір індикаторів, налаштування збору даних, проведення базових (baseline) і підсумкових (endline) досліджень, а також підготовку незалежних оцінок та звітів. Для гуманітарних програм і програм розвитку в Україні хороший консультант також робить ці системи придатними до роботи там, де доступ, безпека та строки звітності перебувають під тиском.

MEAL M&E, а також дві речі: підзвітність перед постраждалим населенням та структуроване навчання. M&E (Monitoring and Evaluation) - це більш давня та вузька дисципліна, що полягає у вимірюванні того, чи відбуваються заходи згідно з планом та які результати вони дають.

MEAL зберігає все це і додає обов’язок перед людьми, яким служить програма - надаючи їм інформацію, право голосу та можливість подавати скарги - а також свідому звичку враховувати отримані результати при прийнятті рішень. В Україні в цьому секторі М&Е часто пишуть як МіО (моніторинг і оцінка).

На практиці ці терміни перетинаються, і багато донорів досі використовують термін M&E. Ми вільно працюємо в обох контекстах і підлаштовуємося під те, що використовує ваш донор.

Теорія змін - це схема того, як і чому програма, як очікується, спричинить зміни, з чітким викладенням кожного кроку та припущення. Вона будується у зворотному напрямку: від бажаного довгострокового результату до заходів, які ви будете вживати, щоб його досягти.

Хороша теорія змін (ToC) визначає передумови для змін, докази, що лежать в основі кожного ланцюжка, та припущення, які мають виправдатися. Це робить її одночасно інструментом планування та перевіркою на правдивість - вона показує, де план є сильним, а де ґрунтується на сподіваннях.

Ми розробляємо Теорії змін разом із вашою командою, щоб вони відображали, як зміни насправді відбуваються у вашому контексті, а потім пов’язуємо їх із логічною матрицею та індикаторами.

Логічна матриця - це таблиця, яка пов’язує мету, результати, продукцію та заходи проєкту з вимірюваними показниками, джерелами даних для них та припущеннями, на яких вони ґрунтуються. Це логіка результатів програми, викладена на одній сторінці.

Більшість інституційних донорів - ECHO, EU, агентства UN та інші - очікують, що пропозиція міститиме логічну матрицю (або тісно пов’язану з нею матрицю результатів). Якщо вона складена правильно, вона допомагає зосередити проєкт: кожна діяльність веде до результату, а кожен результат має показник, що його підтверджує.

Ми розробляємо логічні рамки, які є достатньо ретельними, щоб задовольнити донорів, і достатньо чіткими, щоб ваша команда могла фактично використовувати їх під час реалізації проєкту.

Базове опитування (baseline) вимірює ситуацію до початку програми, а підсумкове (endline) - знову після її завершення, щоб порівняти два виміри й показати, що змінилося. Базове опитування задає відправну точку для кожного індикатора - наприклад, частку домогосподарств із надійним джерелом води - а підсумкове повторно вимірює ті самі індикатори тим самим методом. Різниця між ними, з поправкою на те, що сталося б і без втручання, і є виміряним внеском програми.

Моніторинг третьою стороною - це незалежний моніторинг, що здійснюється зовнішньою організацією від імені донора або виконавця; нейтральна перевірка того, що заявлені заходи та допомога дійсно відбулися, яку застосовують насамперед там, де донор або виконавець не можуть бути присутніми особисто.

Це корисний інструмент у наборі MEAL, і донори все частіше його вимагають. Але TPM - лише одна складова робочої системи MEAL, і це не те, чим займається Umeal.

Umeal будує вашу власну систему MEAL: стратегію, інструменти, канали даних, логічні матриці (logframes) та механізми підзвітності, які дають вашій команді змогу впевнено вести моніторинг, оцінку та звітування. Ми не є стороннім постачальником моніторингу і не розгортаємо польові команди. Коли дійсно потрібні дистанційні дані, єдина послуга польового типу, яку ми надаємо, - це моніторингові опитування по телефону із залученням підготовлених інтерв’юерів.

Оцінка якості даних - це систематична перевірка того, чи є ваші дані достатньо надійними для прийняття рішень та складання звітів для донорів. Вона перевіряє дані за стандартними критеріями: валідністю, надійністю, точністю, своєчасністю та повнотою.

Спеціаліст з оцінки якості даних (DQA) простежує цифри з звіту до їхнього джерела - реєстраційного листа, опитування, бази даних - і шукає місця, де виникають помилки. Результатом є як висновок щодо поточних даних, так і набір практичних заходів для виправлення системи, яка їх створила.

Ми проводимо DQA, щоб не просто оцінити ваші системи даних, а й зміцнити їх, щоб наступний цикл звітності був більш чітким.

Ми не є постачальником польового моніторингу і не відправляємо команди до прифронтових чи важкодоступних районів. Те, що ми робимо, - це проєктуємо системи MEAL, які продовжують працювати за обмеженого доступу.

На практиці це означає адаптивні інструменти та показники, що гнучко реагують на зміни доступу, канали даних, якими можуть керувати ваші співробітники й партнери, і дистанційні методи, коли особистий контакт неможливий, - насамперед моніторингові опитування по телефону із залученням підготовлених інтерв’юерів. Результат - дані, які ви можете обґрунтувати під час аудиту донорів, не наражаючи персонал на ризик.

Так. Ми працюємо з програмами по всій Україні, поєднуючи дистанційну розробку й аналіз MEAL із локальними партнерами зі збору даних на місцях. Оскільки наша основна робота - це розробка систем, оцінка та якість даних, а не польове анкетування, більшість завдань можна виконувати дистанційно й безпечно, і підтримка не зупиняється навіть там, куди складно дістатися. Коли потрібен первинний збір даних, ми плануємо його та забезпечуємо контроль якості разом із перевіреними локальними партнерами.

Ми працюємо відповідно до вимог щодо дотримання стандартів основних донорів у сфері гуманітарної допомоги та розвитку, зокрема агентств та об’єднаних фондів, що входять до складу ECHO, EU, FCDO та UN, а також відповідно до галузевих стандартів, таких як критерії оцінки OECD-DAC та «Core Humanitarian Standard» (CHS).

Серед наших клієнтів - міжнародні та національні НУО. Ми досконало володіємо термінологією, форматами звітності та вимогами щодо підзвітності, які використовують ці партнери, що забезпечує готовність ваших оцінок та систем MEAL до аудиту.

Ми за своєю суттю є незалежними та неупередженими - це є необхідною умовою для проведення оцінок та розбудови систем MEAL, яким можуть довіряти як донори, так і громади.

Ми повністю працюємо українською та англійською. Інструменти збору даних, інтерв’ю та матеріали для громад ми готуємо українською (за потреби - і російською), а звітні продукти для донорів - оцінкові звіти, логічні матриці та дашборди - рідною англійською. Завдяки цьому нічого не втрачається в перекладі в жодному напрямку: польові дані залишаються вірними тому, що люди справді сказали, а звітність для донорів читається так, ніби її писав носій англійської, - бо так і є.

Ми визначаємо вартість кожного завдання за його обсягом - зазвичай це фіксована плата за конкретний результат або денна ставка за консультаційну підтримку. Після короткої розмови для уточнення завдання ми надсилаємо письмову пропозицію з чітко описаними активностями, строками та вартістю, тож жодних несподіванок. Для багатоетапних робіт - наприклад, базове дослідження зараз і підсумкове наступного року - ми можемо узгодити весь пакет наперед або законтрактувати кожен етап окремо.