РУКОВОДСТВО ПО ГЕНДЕРНО-ЧУВСТВИТЕЛЬНЫМ ИНДИКАТОРАМГЛАВА 3 | |||||||||||||||||||||||||||||||||
|
Большинство учреждений (агентств) расценивают свои возможности для осуществления мониторинга и оценки, в том числе и возможности по разработке и применению индикаторов, как недостаточные. (CIDA 1994b; (Мировой Банк - World Bank 1994a). Обзор литературы доноров также показывает, что терминология, используемая при применении индикаторов, - противоречива. В следующих четырех группах суммированы способы использования индикаторов агентствами (учреждениями):
В настоящее время не существует гендерно-чувствительных систем или моделей, находящихся в применении на уровне проекта, которые доказали бы свою эффективность. Однако за последние несколько лет ряд учреждений уже провели исследования и продолжают работать над индикаторами, которые соответствуют требованиям КАМР. Некоторые из них приведены ниже.
Мировой Банк (МБ) в последнее время занимался изучением проблемы расширения возможностей для применения Ключевых Индикаторов Работы на уровнях проекта и направлений (разделов) как составной части процессов мониторинга и оценки. МБ располагает (в качестве части своей индикаторной программы "Следующие шаги") развитой серией индикаторов для разделов, включая индикаторы в области народонаселения, образования, сельского хозяйства, бедности и жилья, некоторые из них - гендерно-чувствительные. (Мировой Банк 1995). Раздел по индикаторам бедности (также опубликованные отдельно, например, Карвалхо и Уайт 1994), является хорошим подспорьем для общей дискуссии по проблемам индикаторов.
USAID в соответствии со своей Программой Оперативной (Рабочей) Информации для Стратегического Менеджмента (PRISM) разработал методологию для применения гендерно-чувствительных индикаторов, включив в нее и некоторые примеры (USAID 1994). Однако подход отличается предварительным характером. Кроме того, наблюдается определенное противоречие в типологии индикаторов, а качественные индикаторы в основном игнорируются.
Британская ОДА (British ODA, 1993a, b) разрабатывает с учетом гендерного подхода Систему Критериев Политики Информации для оценки целей проекта, используя простую счетную систему, основанную на требованиях КРП (DAC) оценивать степень соответствия проекта целям программы Женщин в развитии.
GTZ разработал ZOPP (немецкая аббревиатура для названия "Целенаправленное Планирование Проекта"), которое включило некоторые индикаторы по развитию участия. (Мировой Банк 1994а).
ПРООН - Программа Развития ООН (UNDP) распространила свою работу на Индекс человеческого развития для включения индекса гендерного развития на уровне страны. Уровень индекса страны определил меру содействия гендерному саморазвитию. (ПРООН 1995). Индекс гендерного развития сравнивает жизненные ожидания женщин и мужчин, достижений в сфере образования и доходах. Меры по поддержке гендерного саморазвития отталкиваются от гендерных различий в доходах, доступе к рабочим вакансиям, квалифицируемым как профессиональные, технические, административные и управленческие должности, и соотношения парламентских мест, занимаемых женщинами и мужчинами.
Проводимая работа носит преимущественно экспериментальный характер. Ни одна из работ не была подготовлена в стиле "участия", не считая немецких публикаций. Однако эти и другие последние исследования индикаторов, предпринимаемые агентствами по развитию, предоставили полезные сведения для разработки индикаторов для данного Руководства. Читателям следует взять на заметку информацию о том, что Отделом контроля за исполнением КАМР составляется объемное Пособие по индикаторам, построенное по принципу страны, разделу и проекту, и снабженное надлежащей информацией по каждому индикатору. Раздел 3.2., 3.3 и 3.4 посвящены некоторым практическим аспектам отбора и применения гендерно-чувствительных индикаторов с акцентом на качественные и количественные индикаторы, постановке целей, и различных стадий применения индикаторов.
|
Главная стратегия, базируемая на гендерно-чувствительных индикаторах, состоит в комбинированном применении количественных и качественных методов для измерения перемен в гендерном статусе общества, происходящих с течением времени. |
Почти вся литература КАМР по методологии индикаторов, включая материалы по вопросам политики Канадского агентства международного развития, подчеркивает необходимость использования как количественных, так и качественных индикаторов для измерения гендерной справедливости. (например, CIDA 1994c). Однако полное единодушие в отношении содержания понятий "количественные" и "качественные" индикаторы отсутствует.
В настоящем Руководстве мы определяем количественные и качественные индикаторы следующим образом:
|
Количественный индикатор можно определить как меру количества, такую как численность людей, которые владеют швейными машинами в деревне.
|
В то время как эти дефиниции (определения) относительно просты, они скрывают более сложные способы использования данных двух типов индикаторов. Например, индикаторы "качества жизни", которые прослеживают изменения в области здравоохранения населения, образования или занятости, часто путают с качественными индикаторами, потому что оба типа индикаторов направлены на "качество". В действительности, здоровье, образование или другие явления могут измеряться либо количественными, либо качественными индикаторами. Иногда происходит также значительное совпадение количественных и качественных подходов, затрудняя выявление различия между ними. Два способа отличия между данными типами индикаторов лежат: первый - в плоскости их источников информации; второй - в характере толкования и применения этой информации.
Различные источники используемой информации являются одним из полезных способов отличия между качественными и количественными индикаторами в сфере развития. Количественные индикаторы фокусируются на областях, которые легко поддаются подсчету, такие как уровень зарплаты или уровень образования. По этой причине такие количественные индикаторы обычно извлекают из переписей, перечислений и административных документов, т.е. количественные индикаторы базируются на более формальных исследованиях.
С другой стороны, качественные индикаторы, будучи представлениями и взглядами людей, обычно заимствуются из источников таких как общественные слушания, анализа точек зрения, интервью, оценок участия сельского населения, наблюдений участника и социологических или антропологических работ, т.е. качественные индикаторы полагаются на менее формальные исследования.
Далее, характер толкования и область применения двух типов индикаторов служит средствами отличия между ними. Поскольку количественные индикаторы концентрируются на формальных исследованиях, их обычно интерпретируют, используя формальные методы, такие как статистические анализы. Затем результаты таких анализов используются для рекомендаций корректировок политики. Количественные индикаторы часто оказываются удаленными от событий, которые они описывают. Например, анализ роста уровня грамотности вряд ли может много рассказать вам о невероятных усилиях, потребовавшихся от женщин для того, чтобы стать грамотными. Количественные индикаторы часто выдают за "неопровержимые" или "объективные", поскольку они отдалены от событий и выражены языком цифр.
С другой стороны, большинство качественных индикаторов при анализе сферы развития порождено неформальными исследованиями, результаты которых часто изложены в описательной форме больше, чем аргументированы статистически или другими формальными методиками, хотя они являются предметом для измерения4. Поскольку они описывают мнение людей, эти типы индикаторов также известны как "субъективные" или "мягкие" индикаторы. Значение этих индикаторов обсуждается в следующем разделе.
Два типа индикаторов на самом деле дополняют друг друга, и оба типа - важны для эффективного мониторинга и оценки. Это обуславливается тем, что они могут подтверждать и указывать пересекающиеся друг с другом проблемы (см. ниже Пример 1).
Как только индикатор избран, он должен соответствовать двум требованиям, т.е. выдержать проверку на "достоверность" и "убедительность". "Убедительность" означает, что информация, которую индикаторы обеспечивают, должна быть близкой к реальности, которая при помощи их измеряется. Способы обеспечения индикатору убедительности следующие: 1) здравый смысл; 2) выявление индикатором одинаковых результатов в различных ситуациях; 3) выявление различными инструментами исследования или вскрытия тех же самых индикаторов. В целом убедительность индикатора можно подкрепить использованием многочисленных источников информации и данных. Количественные и качественные подходы было бы полезно совмещать именно в таком контексте.
"Достоверность" означает, что используемые индикаторы должны быть точными и последовательными. Индикатор достоверен, если многократное использование одного и того же инструмента (интервью, обзор и т.д.) приносит те же самые или сходные результаты. Если количественные или качественные индикаторы избраны, они должны отвечать этим двум критериям, чтобы быть полезными.
Значимость количественных индикаторов - например, уровень смертности или занятости - понятна, хотя, как отмечено в разделе 3.1.2, такие критерии подвергались критике со стороны специалистов по гендеру за их гендерную предубежденность. Важность мнений или взглядов людей - качественных индикаторов - менее ясна. Пользователи качественных индикаторов часто подчеркивают, что эти индикаторы существенны, потому что они делают акцент на собственном опыте людей. По этой причине качественные индикаторы особенно полезны для понимания мнений и приоритетов местного населения в отношении развития и проектов в области развития. Сторонники качественных индикаторов часто заинтересованы в определении таких индикаторов как части формата для развития участия, которое включает точку зрения людей на местах.
Нередко утверждается, что применение качественных индикаторов - проблематично, поскольку их достоверность и убедительность - сомнительны. Однако, достоверность и убедительность качественных индикаторов может быть обеспечена при помощи тщательного исследовательского инструментария. Качественные индикаторы, должным образом разработанные и истолкованные, могут сыграть существенную роль при выявлении сложностей в реализации и препятствий на пути к успеху, которые не всегда очевидны. Часто жалуются, что качественные индикаторы, особенно в отношении бедных женщин, малопродуктивны, поскольку такие женщины необразованные или их взгляды менее важны, чем мнение мужчин. Однако, значимость разнообразных типов местных знаний, включая знания малоимущих женщин, находит все большее понимание по мере осознания того факта, что игнорирование подобных познаний - главная причина провала проектов и программ развития.
Использование качественных индикаторов может, следовательно, играть важную роль в продвижении и понимании взглядов основных участников, особенно женщин, и способствовать ускорению процесса участия. Разработка гендерно-чувствительных индикаторов в стиле "участия" требует внимания к проблеме включения индикаторов развития, принадлежащих населению.
|
Количественные и качественные индикаторы обеспечивают методологический ключ, что может привести лишь к определенному уровню анализа. Функционируя на достигнутом уровне, они определяют возможное место нахождения будущих вопросов и проблем. При работе с индикаторами обычно возникает потребность в продолжении качественного анализа для выяснения причин сложившейся ситуации. Качественный анализ используется для понимания социальных процессов, почему и как специфическая ситуация, которую измеряют индикаторы, стала реальностью, и как ее можно скорректировать в будущем. Качественный анализ может и должен применяться ко всем стадиям цикла проекта. Причем он используется наряду с количественными и качественными индикаторами. |
Пример качественного анализа - исследование гендерных ролей, т.е. различных ролей, которые женщины и мужчины играют в обществе в соответствии с тем, как это сложилось, и каковы пути их изменения. Качественные и количественные индикаторы могут выявить некоторые аспекты различных гендерных ролей, но они могут следовать лишь по определенному пути в выявлении причин возникновения данных ролей и в определении того, как их можно изменить.
Имеется два полезных Руководства по качественному анализу: Международный институт Коуди (1991) и СС1С et al (1991). Они широко доступны для читателей, которым следует обратиться к ним для дальнейшей информации по этому важному вопросу.
Два примера уточнят процесс анализа индикаторов:
ПРИМЕР 1. Индикаторы перемен в сельских районах Индии
Джодха (1989) осуществил новаторское исследование уровня бедности в двух индийских деревнях за двадцатилетний период с 1964 по 1984 г.г. Джодха собрал количественные показатели о доходах домохозяйств и использовал их для фиксации состояния различных домохозяйств. В результате оказалось, что 38% домохозяйств стали беднее в течении этого двадцатилетнего периода. Своеобразие заключалось в том, что Джодха также собрал качественные индикаторы (показатели) у фермеров, которым, как предполагалось, придется стать беднее. Качественные индикаторы бедных семей или представления о переменах за двадцатилетний период были выражены не с точки зрения упадка доходов, а в смысле ослабления ожиданий, связанных с руководителями, уменьшения степени зависимости от низкооплачиваемой работы, усиления мобильности и улучшения активов. Даже обедневшие фермеры (с точки зрения финансового положения) считали, что их качество жизни стало лучше.
Затем Джодха использует качественный анализ для понимания причин того, почему в деревнях в условиях социальных перемен малоимущие люди ощущали изменение условий к лучшему. Главными факторами, как оказалось, было обретение большей независимости, мобильности, и исчезновение необходимости "кланяться" местной элите. Исследование Джодха - одна из наилучших работ, демонстрирующая возможности количественных и качественных показателей служить аргументами, отлично подтверждающими друг друга, и свидетельствующими о возможных различиях, которые существуют между этими двумя категориями индикаторов.
ПРИМЕР 2. Количественные, качественные индикаторы и количественный анализ: женщины и политическое представительство
Численность женщин-парламентариев - часто используемый количественный индикатор. Данный индикатор можно проследить во времени. Он используется как аргумент для женского политического участия и содействия саморазвитию (например, UNISEF 1995).
Хотя этот индикатор полезен для оценки гендерного неравенства, однако применение только его недостаточно для измерения политического участия, поскольку упускаются ключевые моменты. Качественные показатели можно использовать для выявления взглядов женщин-парламентариев на проблемы своего политического представительства, например, для выяснения вопросов о том, чувствуют ли они себя сами маргиналами, или растет ли их влияние на процесс принятие решений.
Качественный анализ можно использовать для исследования взаимозависимости между численностью женщин-парламентариев и степенью их воздействия на процесс принятия решений. Например, его можно применять для выяснения ряда обстоятельств: сколько раз вопросы, касающиеся гендерной справедливости, поднимались в высшем законодательном органе; какое законодательство, связанное с гендерной справедливостью, прошло или получило дальнейшее законодательное развитие; оказывают ли влияние выступления женщин на законодательный процесс; как можно поддержать женщин в их деятельности по достижению цели гендерной справедливости, впрочем, как и другие их политические инициативы. Качественный анализ как никогда уместен для выяснения влияния женского политического представительства на более широкие социальные проблемы и на функционирование правительства.
Поскольку индикаторы представляют собой инструменты по извлечению результатов, они связаны с целями, дающими начало развитию инициативы.
При использовании индикаторов цели должны быть четко артикулированы. Цели должны быть определены по отношению к основным направлениям исследований, с которыми результаты будут соизмеряться.
Базовое исследование, включающее в обязательном порядке статистические данные, обработанные в свете половых различий, социально-экономических групп и этнической принадлежности, вскроет ситуацию в проектной сфере перед донорским вторжением. Это исследование может быть использовано для сравнения при применении индикаторов на протяжении проектного цикла.
Доноры сталкиваются с трудностями при постановке четких целей в своем планировании по различным политическим и институциональным причинам. Однако постановка четких целей - критическая точка для функционирования менеджмента, ориентированного на результат, потому что цели имеют существенное воздействие на стиль применяемой политики. Подобно индикаторам, цели должны быть развиты с помощью средств и ресурсов всех основных участников на непрерывной основе.
Цели также служат вехами для стадий проектного цикла в двух важнейших аспектах:
Цели могут быть выражены в различных категориях, им могут присвоить разные ярлыки (цели, задачи, направления и т.д.) Однако независимо от способа их группировки или определения, пять следующих критических требований применяются к четкому заявлению о целях:
|
Таким образом, цели должны быть реалистичными, функциональными и пригодными для измерения. Их следует увязать с намеченным планом реализации, который стыкует ход действия с промежуточными задачами и с ожидаемыми финальными результатами.
Однако мы должны признать, что не всегда доноры в силах тщательно определить цели, что связано, частично с тем, что конечная цель проектов и программ в сфере развития может не поддаться строгому очертанию, особенно там, где цели развития повторяются, и в тех областях, которые относятся к сфере развития человека. Анализ различных проектов, ориентированных на конечного пользователя, выявил два типа наиболее часто намечаемых целей, которые мы сгруппировали следующим образом:
| Тип 1: | Результаты относительно легко поддаются подсчету |
| Тип 2: | Результаты, нелегко поддающиеся количественному учету, касаются социальных процессов и требуют акцента на качественный анализ при их измерении. |
Проекты часто прибегают к использованию комбинации типов 1 и 2 в процессе выработки цели, при этом отдавая большее предпочтение одному из них. Если ваши цели проекта нельзя с определенностью отнести к одному из типов, осмысление их с точки зрения предлагаемой типологии (цели типа 1 и типа 2) окажется полезным при разработке индикаторов.
Пример цели типа 1:
"Рост уровня общего зачисления в начальную школу до 50% в районе, охватываемом проектом, обеспечивая гендерную и социально-экономическую справедливость в течении двадцати лет".
Пример цели типа 2:
"Поддержка бедных сельских жителей в районе, охватываемом проектом, таким образом, чтобы они стали способными внести свою лепту в процесс принятия решения в своих деревнях"
Относительно легко измерить новые элементы в уровне охвата в данном районе (смотри: Приложение 5). Но гораздо труднее определить, получили ли малоимущие поддержку, и как они вносят свой больший вклад в принятие решений. Если цели вашего проекта ближе к типу 1, вы, возможно, используете стандарты качественных индикаторов образования, занятости или здравоохранения, и сконцентрируетесь на индикаторах результатов. Если они ближе к типу 2, вы, вероятно, с большим рвением сосредоточитесь на индикаторах содействия саморазвитию или участия, и сконцентрируетесь, по меньшей мере первоначально, на процессе индикаторов. Цели типа 1 также тесно соотносятся с изменениями, связанным с практическими потребностями женщин, а цели типа 2 имеют непосредственное отношение к изменениям женских стратегических интересов. Для определения женских практических потребностей и стратегических интересов смотри CCIC (1991).
На практике большинство заявлений о целях находится где-то между этими двумя примерами, однако типология будет полезной при определении индикаторов, и должна стать пищей для размышлений. Руководство содержит ряд примеров двух различных типов целей.
Индикаторы, отобранные для целей развития, также должны соответствовать семи областям деятельности (Lines of Business - LOBs), связанным со стадиями цикла двухстороннего проекта, установленных в Дорожной Карте Территориальных Программ КАМР. Похоже, что наиболее часто используемые области станут детальным планом и повторяющимися моделями.
Модель точного плана требует существенного исследования, анализа и планирования перед одобрением, и в значительной степени привлечет проекты, связанные с инфраструктурой, усилением институциональных возможностей и развитием людских ресурсов.
Повторяющаяся модель также требует значительного изучения, анализа и планирования, хотя уровень будет ниже, чем модель точного плана. Она зиждется на философии обучения практикой, цели могут быть обозначены на короткий период, но они находятся под усиленным процессом управленческого контроля, который определяет среднесрочные цели и действия. Это позволяет включать приобретенный опыт в моделирование проекта. Вероятно цели в модели точного плана будут ближе к целям типа 1, цели в повторяющейся модели будут ближе к целям типа 2. В случае повторяющейся модели цели могут изменяться со временем, однако на определенных стадиях проектного цикла окончательные цели будут установлены, и затем индикаторы могут быть разработаны для них.
Таблица внизу представляет примеры, индикаторы и модели
| Модель | Цель | Индикатор | Пример цели |
| Точного плана | Тип 1 | Относительно прямые | Подъем грамотности до 50% в регионе "х" в течении 5 лет |
| Повторяющаяся | Тип 2 | Более сложные | Увеличение участия малоимущих в принятии решений до 50% в регионе "х" в течении 5 лет |
Смысл применения индикаторов - в необходимости ощущения пульса проекта в процессе его продвижения к реализации своих целей. Для достижения этого необходимо, чтобы каждая существенная стадия проектного цикла обладала соответствующими индикаторами, а типы индикаторов должны быть осмысленны с разных сторон. После изучения целого ряда систем индикаторов, обнаруженных в материалах и документах доноров и академических публикациях, настоящее Руководство рекомендует гибкое использование типологии, (приводится ниже), которая представляется как наиболее часто встречающаяся типология индикаторов.
В данной типологии полезно осмыслить применение индикаторов в цепи, начиная с этапа средств и ресурсов и до окончательных результатов. Краткие определения (дефиниции) даны каждому типу, которые сопровождаются более детальной дискуссией и примерами5.
| Риск/Благоприятные факторы: | измеряют воздействие внешних факторов на проект программы |
| Средства и ресурсы: | касаются ресурсов, выделенных проекту или программе |
| Процесс: | измеряют деятельность по распределению ресурсов, предназначенных для программы или проекта. Они отслеживают успехи в период реализации,, которые способствуют прежде всего продвижению в главном направлении к достижению намеченных целей. |
| Промежуточные результаты: | определяют промежуточные результаты, например, стадию, когда вовлеченность донора близка к завершению. |
| Окончательные результаты: | относятся прямо к долгосрочным результатам проекта и после завершения донорской причастности. |
| Число индикаторов может быть весьма невелико, правило заключается в том, чтобы выбрать до 6 индикаторов для каждого из указанных выше типов. | |
Практика показывает, что на всех стадиях своего цикла проект может испытывать на себе влияние различных неблагоприятных (рисков) или благоприятных факторов. Таким образом, под индикаторами риска/благоприятных факторов мы подразумеваем такие обстоятельства, которые по отношению к проекту являются внешними, и которые вносят свой вклад в успех проекта или, напротив, подталкивают его к провалу.
Индикаторы риска/благоприятных факторов включают социально-экономические и факторы внешней среды, такие как функционирование и работа институтов, юридической системы, социально-культурную практику. Например, в проектах, нацеленных на рост доходов, индикаторами риска может быть отношение местных институтов или локальных элит, или потенциал для маркетинга производимых товаров. Подобно всем индикаторам, они должны быть разработаны совместно с основными участниками, так как конечные пользователи лучше осведомлены о потенциальных благоприятных и неблагоприятных факторах для проекта.
Представляется целесообразным изучение возможностей учета факторов риска/благоприятных обстоятельств на уровне проекта для определения сферы ответственности КАМР за успех. Например, благоприятные факторы и факторы риска могут быть подсчитаны по шкале от 1 до 5 баллов. В проектах по поддержанию доходов в особенном регионе основная политическая проблема или нестабильность окружающей среды в данной местности, которые отрицательно сказываются на проекте, могли бы обозначиться "5" баллами. Менее разрушительные беспорядки, например, наводнения, которые привели в негодность дороги в течении трех месяцев, могли бы получить "1" или "2" балла. Определенная экспериментальная работа необходима на уровне проекта прежде, чем станет ясно, что такая система реальна.
Необходимо определиться со связанными друг с другом вопросами относительно того, какие результаты в районе, охваченном проектом, обусловлены факторами, находящимися вне контроля за проектом, и какое воздействие оказывает сам проект на сферу вне проекта. Например, как может вмешательство другого донора в тот же самый сектор, где работает КАМР, быть учтено в оценке. Краткое Пособие не может иметь дело с этими важными вопросами, и читателю следует обратиться за специальным советом по данной проблеме, который вы найдете у Бэмбергера и Валадеза (1994).
Показатели, также известные как индикаторы "ресурсов", относятся к ресурсам, предназначенным для проекта или программы, например, финансирование, людские или материальные ресурсы, инфраструктура, строительство института. Они относятся и к другим средствам, с помощью которых программа или проект реализуются. Индикаторы "ресурсов" играют важную роль в определении возможных проблем и обнаружении их причин, однако индикаторов средств и ресурсов недостаточно для выявления того, будет ли проект или программа успешной или неуспешной.
В проектах в области образования индикаторы средств и ресурсов могли бы включать: распространяемый курс, приобретенные и адаптируемые материалы, мнение общины по поводу реалистичности характера проекта или мнение об участниках, отобранных для обучения.
Сбор базовых данных, которые используются для сравнения при измерении результатов, также критически важен в начале финансирования проекта и применения индикаторов средств и ресурсов. Информацию об уровне грамотности и зачислении, обработанную в свете полового, этнического и социально-экономического различий, можно взять как пример базовых данных проекта в области образования.
Показатели, также известны как индикаторы "пропускной способности" или "активности", отражают распределение ресурсов, выделяемых программе или проекту на длительной основе. Как таковые они являются наилучшими индикаторами реализации и используются для мониторинга проекта. Хотя данные показатели отражают достигнутые результаты, однако они не должны подменять измерение долгосрочных окончательных результатов. Процесс может быть успешным, в то время, как успех окончательному результату еще не гарантирован. Как говориться в одной народной юмористической мудрости: "Операция была успешной, но пациент умер" или "Школы построены вовремя, учителя наняты, родители активны, уровень зачисленных учащихся и окончивших учебу также был высок. Однако выпускники не годились для найма на работу, поскольку им не хватало соответствующих навыков".
Некоторые проекты, например, проекты, ориентированные на усиление роли, или проекты, которые концентрируются на развитии способностей и увеличении возможностей институтов, склонны более полагаться на индикаторы процесса, поскольку они включают долгосрочное изменение в течении многих лет. Фокус на оценке после завершения донорского финансирования должен быть на результатах даже в этих проектах.
Индикаторы процесса в проекте в области образования включают: мнение местной общественности относительно помещений, которые строятся; число оборудования, находящегося в рабочем состоянии; уровень зачисления девочек и мальчиков, или сумма расходов на стипендию.
Индикаторы промежуточных результатов часто используются в оценках проекта, однако они менее полезны, чем индикаторы окончательных результатов, поскольку такие показатели не отслеживают долгосрочных результатов. Это происходит потому, что данные индикаторы измеряют промежуточные результаты, касающиеся продукта и услуг, которые появляются в ходе реализации программы или проекта, и не показывают окончательные результаты.
Проведение оценки окончательных результатов, также как и оценки на уровне промежуточных результатов - одна из важнейших задач применения индикаторов.
В проекте в области образования индикаторами промежуточных результатов могли бы стать: число обученных девочек; мнение учителей по поводу используемых помещений для занятий; или число оборудования, находящегося в рабочем состоянии.
Индикаторы окончательных результатов касаются эффективности, часто долгосрочной, программы или проекта, которая выявляется при помощи поддающихся измерению достигнутых перемен, способствующих улучшению качества жизни получателей. Они также известны как индикаторы "воздействия".
В большинстве случаев первостепенное внимание при использовании индикаторов должно быть уделено окончательным результатам, поскольку они - наилучшее измерение долгосрочных результатов.
Примерами индикаторов окончательных результатов проектов в области образования являются: мнение родителей по поводу пособий для обучения в школе; число девочек и мальчиков, добившихся рабочих мест из школ, охватываемых проектом; типы занятости; или влияние занятости на усиление роли женщин.
Во многих оценках программ и проектов гораздо чаще используют индикаторы средств и ресурсов или показатели процесса, чем индикаторы окончательных результатов. Это обусловлено недостатком ресурсов, предназначенных для оценки и нехваткой институциональных возможностей для оценки. Использование индикаторов окончательных результатов потребует привлечения тех, кто причастен к долгосрочным результатам, и углубленного качественного анализа. Но это не должно рассматриваться в качестве веских аргументов против применения индикаторов окончательных результатов.
Расходы на применение индикаторов окончательных результатов обычно доступны, и будут компенсированы позже, если наглядные уроки, полученные из практики применения данных индикаторов, смогут оказаться полезными для других программ и проектов.
Как стало очевидно из приведенных выше примеров, типы индикаторов иногда трудно отделить один от другого, особенно индикаторы процесса и промежуточных целей. Ряд других индикаторов также доступны для использования. Например, Отдел контроля реализации КАМР (CIDA, 1995b) предложил использовать в работе такую же цепь индикаторов, состоящую из четырех фрагментов, основанную на логическом рамочном анализе, в котором используется та же терминология - "средства и ресурсы, промежуточные результаты, окончательные результаты и воздействие". На практике ясно, что обозначение, например, "процесс" или "промежуточные результаты", присоединенное к индикаторам, - не так важно, как четкое понимание предмета измерения с помощью индикаторов. Другим ключевым моментом, о котором надо помнить, является то обстоятельство, что индикаторы должны охватывать все этапы мониторинга и оценки на протяжении проектного цикла.
Временные рамки, связанные с индикаторами, должны быть четкими и реалистичными. Установление четких временных рамок легче в проектах с целями типа 1, т.к. данные цели определяют очевидные фазы проекта, которые надо завершить. Задача усложняется в случаях с теми проектами, которые ставят цели типа 2. В этих случаях сами цели и впоследствии временные рамки могут быть подвижны по мере того, как проект развивается. Но даже в проектах с целями типа 2 окончательные цели должны быть сформулированы на каком-то этапе проектного цикла, после чего можно установить приблизительные сроки.
Вопрос состоит в том, какие индикаторы использовать и на какой стадии проектного цикла? В идеале индикаторы средств и ресурсов следует применять на начальной стадии или близкой к началу проекта, на которой базовые данные собираются. С целью мониторинга индикаторы процесса должны использоваться в ходе реализации проекта вплоть до окончания участия в нем донора.
Индикаторы промежуточных результатов следует применять ближе к концу причастности донора к проекту, а индикаторы окончательных результатов следует задействовать после того, как участие донора завершено. Показатели процесса, промежуточных и окончательных результатов затем можно сравнить друг с другом и с базовыми данными, чтобы определить степень продвижения к намеченным целям. В некоторых случаях один и тот же индикатор используется для отслеживания хода реализации, промежуточных и окончательных результатов (например, данные списков, обработанные в свете половых различий, уровень грамотности или уровень удовлетворенности местной общины проектом), отличия, происходящие в показателях, используются в соответствии со временем в разные моменты цикла.
Правило повторения гласит: окончательные результаты определяются спустя три-пять лет после завершения финансовой поддержки со стороны донора с использованием индикаторов окончательных результатов. Период ожидания от трех до пяти лет после окончания донорского финансирования позволит оценить: смог или нет проект добиться устойчивых результатов. В случае более крупных и сложных проектов возможно понадобится навестить тот район, где проект реализовывался через пять лет после прекращения финансирования, с целью оценки устойчивости. Но помните, что применение индикатора со временем может оказаться не столь четким, поскольку проекты часто не имеют понятных начал и окончаний.
Очевидно, что не существует набора универсальных индикаторов. Пользователи должны разрабатывать и приспосабливать индикаторы для своих собственных целей.
Наиважнейшими критериями, о которых надо всегда помнить, являются:
Детальная информация по каждому из выше обозначенных пунктов представлена в Приложении 2.