4.6. Иные методы и методики оценки эффективности деятельности организаций и учреждений культуры 4.6.1. Методы оценки эффективности деятельности бюджетных учреждений на основе интегральных показателей
Метод предложен доцентом кафедры бухгалтерского учета и аудита Ульяновского государственного университета О.А. Заббаровой и описан в [13]. Главной идеей этого метода является использование интегральных показателей, которые обеспечивают учет основных аспектов производственной и финансовой деятельности бюджетной организации, содержащихся в годовых и квартальных бухгалтерских отчетах. 15
В качестве основного интегрального показателя рассматривается прагматический критерий оценки деятельности бюджетного учреждения:
 (6)
где,
Коу – показатель, характеризующий объем предоставленных услуг;
Кку – показатель, характеризующий качество услуг бюджетного учреждения;
R – затраты на оказание бюджетных услуг.
Для целей анализа затраты R делятся на условно-минимальные Rmin, необходимые для базового обеспечения жизнедеятельности учреждения, и условно-дополнительные ΔR, направленные на повышение эффективности его деятельности:
 (7)
Качество услуги Кку предлагается оценивать методом целеполагания, т.е. посредством сопоставления цели деятельности бюджетной организации A с полученным результатом S:
 (8)
где,
S – результат, полученный бюджетной организацией;
A – цель деятельности бюджетной организации;
W – затраты на реализацию услуги, если бы ее предоставляли коммерческие организации (в год);
r – показатель альтернативности, характеризующий важность стоимостного фактора и доступность альтернативных способов предоставления услуг.
В формуле (8) показатель S/A = 1, если обеспечивается максимальное достижение организацией поставленных перед ней целей. Показатель r определяется экспертным путем. Он равен нулю, если отсутствует возможность предоставления услуги коммерческими организациями. В случае, если затраты ниже, чем стоимость предоставления услуги альтернативным способом, Кку > 1. Если же затраты бюджетного учреждения высоки, то Кку < 1. Эффективной считается деятельность учреждения, если Кку ≥ 1.
 (9)
где,
ΔКоу – изменение объема предоставленных услуг в сравнении с предыдущим периодом.
Если дополнительные затраты не увеличивают коэффициент объема предоставленных услуг, а уменьшают его, следует говорить о неэффективности расходов бюджетного учреждения.
Оценка использования дополнительных доходов может выявить неудовлетворительное качество предоставления услуги посредством низкого коэффициента Кку. К этому приводит несовпадение цели деятельности учреждения и результата, широкая возможность альтернативности предоставления данной услуги.
Для проведения дополнительного анализа автором метода О.А. Заббаровой предлагается использовать второй интегральный показатель, обеспечивающий оценку эффективности труда специалистов данного учреждения:
 (10)
где,
Ппрагм2 – коэффициент оценки труда специалистов бюджетного учреждения;
Oтр – фактический объем труда, выполняемый специалистом в часах;
Oнорм – объем труда, который должен быть выполнен специалистом по норме.
4.6.2. Методика сравнительной оценки деятельности организаций и учреждений культуры Л.Э Зелениной и Г.Л. Тульчинского
Методика позволяет проводить многофакторный сравнительный анализ различных организаций и учреждений культуры вне зависимости от их типа, вида, категории и ведомственной принадлежности (например, библиотеку, музей, клуб, парк культуры и отдыха, книжный магазин, учебное заведение и т.д.). При этом в основе сравнения лежат показатели результатов работы, специфичные для каждого вида учреждений. 16 Сравнение осуществляется в несколько этапов (см. [39], с.494 – 503):
1. Группировка учреждений культуры в соответствии с типами их деятельности (музеи, библиотеки, клубы, парки, концертно-зрелищные организации, учебные заведения и т.д.).
2. Формирование для каждой группы учреждений показателей работы. Эти показатели формируются по трем направлениям:
показатели объема работы;
показатели качества работы;
показатели эффективности работы.
Показатели выбираются в соответствии со следующими требованиями:
они должны учитывать специфику деятельности учреждений данной группы;
они должны быть легко проверяемы с помощью данных учета;
они должны быть существенными с точки зрения целей инстанции, производящей сравнение (т.е. набор показателей выбирается исходя из наиболее важных аспектов работы на данный момент).
Количество показателей в каждой из трех групп показателей (у каждого типа учреждений) может быть произвольным — главное, чтобы они были важны для целей сравнения и управления. Примерный вариант распределения показателей приведен в табл.6-9.
Табл. 6. Базовые показатели по группе музейных учреждений
№№ п/п
|
Показатели
|
Значение показателя
|
Базовое количество баллов
|
Фактическое количество баллов
|
План
|
Факт
|
%
|
1.
|
Показатели объема работ
|
|
|
|
(50)
|
|
|
-
|
Количество экскурсий, лекций для населения
|
|
|
|
10
|
|
|
-
|
Количество выставок, организованных в музее
|
|
|
|
10
|
|
|
-
|
Количество выставок вне музея
|
|
|
|
10
|
|
|
-
|
Количество районных акций, в которых участвовал музей
|
|
|
|
20
|
|
2.
|
Показатели качества работ
|
|
|
|
(50)
|
|
|
-
|
Количество постоянных лекториев
|
|
|
|
20
|
|
|
-
|
Количество новых форм работы
|
|
|
|
20
|
|
|
-
|
Отсутствие зафиксированных жалоб
|
|
|
|
10
|
|
3.
|
Показатели эффективности
|
|
|
|
(50)
|
|
|
-
|
Выполнение финансового плана
|
|
|
|
20
|
|
|
-
|
Доля самоокупаемости
|
|
|
|
30
|
|
|
Итого: 150
|
Итого____
|
Табл. 7. Базовые показатели по группе библиотечных учреждений
№№ п/п
|
Показатели
|
Значение показателя
|
Базовое количество баллов
|
Фактическое количество баллов
|
План
|
Факт
|
%
|
1.
|
Показатели объема работ
|
|
|
|
(50)
|
|
|
-
|
Книговыдача
|
|
|
|
15
|
|
|
-
|
Количество передвижных библиотек
|
|
|
|
20
|
|
|
-
|
Прирост читателей
|
|
|
|
15
|
|
2.
|
Показатели качества работ
|
|
|
|
(50)
|
|
|
-
|
Прирост книжного фонда
|
|
|
|
20
|
|
|
-
|
Новые формы
|
|
|
|
20
|
|
|
-
|
Отсутствие зафиксированных жалоб
|
|
|
|
10
|
|
3.
|
Показатели эффективности
|
|
|
|
(50)
|
|
|
-
|
Количество читателей на одного штатного работника
|
|
|
|
15
|
|
|
-
|
Книговыдача на одного штатного работника
|
|
|
|
10
|
|
|
-
|
Обращаемость
|
|
|
|
15
|
|
|
-
|
Численность
|
|
|
|
10
|
|
|
Итого: 150
|
Итого____
|
Табл. 8. Базовые показатели по группе клубных учреждений
№№ п/п
|
Показатели
|
Значение показателя
|
Базовое количество баллов
|
Фактическое количество баллов
|
План
|
Факт
|
%
|
1.
|
Показатели объема работ
|
|
|
|
(50)
|
|
|
-
|
Количество кружков, коллективов
|
|
|
|
10
|
|
|
-
|
Объем свободного времени
|
|
|
|
20
|
|
|
-
|
Количество общерайонных мероприятий
|
|
|
|
20
|
|
2.
|
Показатели качества работ
|
|
|
|
(50)
|
|
|
-
|
Количество народных коллективов
|
|
|
|
20
|
|
|
-
|
Количество новых форм работы
|
|
|
|
20
|
|
|
-
|
Отсутствие зафиксированных жалоб
|
|
|
|
10
|
|
3.
|
Показатели эффективности
|
|
|
|
(50)
|
|
|
-
|
Количество массовых мероприятий на одного штатного работника
|
|
|
|
10
|
|
|
-
|
Количество кружков, объединений штатного работника
|
|
|
|
10
|
|
|
-
|
Сумма доходов на одного работника
|
|
|
|
20
|
|
|
-
|
Сумма доходов на 1 кв.м.
|
|
|
|
10
|
|
|
Итого: 150
|
Итого____
|
Табл. 9. Базовые показатели по группе парковых учреждений
№№ п/п
|
Показатели
|
Значение показателя
|
Базовое количество баллов
|
Фактическое количество баллов
|
План
|
Факт
|
%
|
1.
|
Показатели объема работ
|
|
|
|
(50)
|
|
|
-
|
Количество мероприятий для населения
|
|
|
|
10
|
|
|
-
|
Количество организованных выставок
|
|
|
|
10
|
|
|
-
|
Количество районных акций
|
|
|
|
10
|
|
|
-
|
Количество дней активной работы парка в году
|
|
|
|
20
|
|
2.
|
Показатели качества работ
|
|
|
|
(50)
|
|
|
-
|
Количество аттракционов, игровых и спортивных площадок
|
|
|
|
10
|
|
|
-
|
Наличие баз проката, лекториев, танцплощадок, библиотек
|
|
|
|
10
|
|
|
|
Количество новых форм работы
|
|
|
|
20
|
|
|
-
|
Отсутствие зафиксированных жалоб
|
|
|
|
10
|
|
3.
|
Показатели эффективности
|
|
|
|
(50)
|
|
|
-
|
Процент используемых фондов
|
|
|
|
20
|
|
|
-
|
Размер превышения доходов над расходами
|
|
|
|
30
|
|
|
Итого: 150
|
Итого____
|
3. Каждой из групп показателей (в рассматриваемом случае: объема, качества и эффективности работы) присваивается базовая сумма баллов. В приведенных таблицах каждой из трех групп показателей присвоено по 50 базовых баллов. Базовая сумма баллов распределяется внутри каждой конкретной группы по типам учреждений. Иначе говоря, каждому конкретному показателю присваивается определенное количество базовых баллов. Процедура по своей сути является распределением весов базовых баллов. Конкретный вес показателя (количество базовых баллов) определяется в зависимости от важности данного показателя. Главное, чтобы у всех групп учреждений сохранялась сумма базовых баллов по основным трем группам показателей (в рассматриваемом примере – равнялась 50 баллам).
4. Подводятся итоги деятельности за определенный период по каждому показателю.
5. Определяется количество фактически набранных баллов по каждому показателю – пропорционально выполнению плановых заданий (процентом от базовых баллов) по каждому показателю. Сумма набранных баллов каждым учреждением будет характеризовать его рейтинг (ранг) по сравнению с другими учреждениями вне зависимости от их типа.
Помимо экономической оценки деятельности организаций и учреждений культуры большое значение придается анализу социальных результатов, которые отражают степень достижения основных целей деятельности организации культуры. К показателям социальной эффективности относится социальный индекс Вайсброда и коэффициент социальной рентабельности.
Социальный индекс PI (publicness index) был введен американским ученым Вайсбродом для определения уровня производства социальных эффектов в некоммерческих организациях. Социальный индекс рассчитывается как отношение финансовых поступлений от создания общественных благ к доходам от выпуска частных благ.
Доходы от создания общественных благ выступают в организации культуры в форме благотворительных вкладов, грантов, государственных дотаций и т.п. К выпуску организацией культуры частных благ относятся реализация товаров, услуг и работ; а также членские и спонсорские взносы. Членские и спонсорские взносы являются своеобразной формой реализации товаров, услуг, работ в организации культуры. В ответ на спонсорский вклад организация культуры предлагает рекламу, PR-мероприятия и др., тогда как в обмен на членские взносы — набор своих товаров и услуг. В качестве единиц измерения индекса выступают его абсолютные значения. Социальный индекс принимает значения от нуля до бесконечности. Если индекс равен нулю, то организация культуры специализируется исключительно на выпуске частных благ, находясь на полном самофинансировании без поддержки со стороны стейкхолдеров. Чем больше значение социального индекса, тем выше уровень выпуска общественных благ, по сравнению с частными благами, и больше оснований для поддержки со стороны стейкхолдеров.
Другим показателем социальной эффективности является коэффициент социальной рентабельности SR. Он рассчитывается по аналогии с показателем экономической рентабельности как отношение денежной оценки социального эффекта к затратам на производство данного социального эффекта.
Однако, в отличие от показателя экономической рентабельности, коэффициент социальной рентабельности не всегда поддается исчислению. Измерение денежной оценки социального эффекта и затрат, связанных с его производством, в большинстве случаев является крайне сложной задачей. Проявление социального эффекта от потребления культурных, образовательных и других некоммерческих услуг растянуто во времени и находит свое отражение в различных отраслях экономики. Повышение образовательного, культурного уровня приводит к росту потребления в социально-культурной сфере, повышению производительности труда в сфере материального производства и т.д.
4.6.3. Методика измерения социальной эффективности библиотек по продвижению чтения среди населения Российской Федерации
Данная методика была предложена Кузьминым Е.И., Орловой Э.А., Урминой И.А. в [20]. Авторы позиционируют свою модель как результат инновационных разработок, которые пока не получили массового распространения, но прошли через стадию пилотных проектов. 17
Измерение социальной эффективности деятельности библиотек авторы предлагают проводить с использованием трех групп параметров: социальная необходимость, социальная полезность, социальная привлекательность. Применительно к библиотекам эти группы параметров интерпретируются следующим образом:
социальная необходимость деятельности библиотеки определяет ее вклад в развитие чтения;
социальная полезность функционирования библиотеки указывает на качество работы, ее результаты и последствия;
социальная привлекательность предполагает удовлетворенность работников библиотеки, реальных и потенциальных читателей осуществляемыми здесь мероприятиями.
Оценка деятельности библиотеки осуществляется по всем трем указанным видам измерений, показатели между которыми могут существенно расходиться. В зависимости от ситуации это позволяет определить, по какому из них состояние библиотеки относительно благополучно, а по какому требуется вносить соответствующие изменения. В качестве примера рассматривается следующая ситуация: библиотека провела чтения, посвященные восьмидесятилетию местной знаменитости - краеведа. Это мероприятие социально необходимо, поскольку подчеркивает вклад жителя города, современника в развитие его культуры. Но, как правило, подобные события социально непривлекательны для большей части населения города. Если говорить о социальной полезности мероприятия (в какой степени оно было направлено на повышение культурной компетентности людей, насколько ощутимо снизилось социальное напряжение, отвечало ли оно сегодняшним, острым, горячим проблемам, которые они переживают), то с этой точки зрения оно также не может быть оценено высоко. Иными словами, при всей социальной необходимости мероприятия такого рода оказываются не особенно социально привлекательными и полезными. Возможно и другое: мероприятие может быть привлекательным (карнавал, шествие и пр.), но, как показывает практика, его социальная значимость и полезность будут почти незаметными.
При оценке социальной эффективности на стадии планирования и по завершении мероприятия авторы методики считают необходимым учитывать следующие факторы:
насколько мероприятие считалось необходимым и что оказалось после его проведения;
кому оно было адресовано, было ли оно на самом деле полезно (для кого именно?), как повлияло на процессы, происходящие в более широком социокультурном контексте;
как устроители предполагали привлечь участников и в какой степени мероприятие стало привлекательным, т.е. вызвало массовый интерес, отклик, объединило людей для дальнейших действий в сфере чтения и т.д.
Каждое из измерений представлено в соответствующем ему наборе эмпирических показателей, рассматриваемых ниже.
Социальная необходимость. Каждый из параметров, характеризующих социальную необходимость, имеет свои показатели и критерии их оценки:
улучшение качества социокультурного пространства чтения для читателей;
повышение социального статуса персонала библиотеки, связанного с продвижением чтения.
преодоление тенденций снижения интереса к чтению у читателей библиотеки.
Более подробно критерии социальной необходимости представлены в приложении.
Социальная полезность. Для оценки социальной полезности библиотеки предлагается выделить следующие показатели результатов ее деятельности:
повышение культурной компетентности читателей библиотеки. Работа, связанная с повышением культурной компетентности, заключается в том, чтобы приобщать аудиторию к более серьезному кругу чтения, стимулировать ее к выбору лучших книг из возможных, адекватному восприятию их содержания, помогать ей делать соответствующие выводы;
повышение уровня квалификации персонала библиотеки;
вклад библиотеки в развитие чтения в рамках конкретного сообщества. Если результатами работы по продвижению чтения стали увеличение количества читателей библиотеки и расширение круга чтения, то можно говорить о ее социальной полезности. Если количество читателей не изменилось и качество чтения не улучшилось, то социальная полезность работы библиотеки по продвижению чтения оказывается незначительной.
Исследование показало, что под социальной полезностью в первую очередь следует понимать ориентированность работы библиотеки на повышение качества жизни пользователей посредством продвижения чтения. Основу этого составляет обеспечение доступности и высокого качества предоставляемых услуг. О повышении качества жизни читательской аудитории можно судить по следующим показателям деятельности библиотеки:
ориентированность на помощь читателям в решении жизненно важных проблем в пределах компетенции библиотеки;
доступность и высокое качество предоставляемых услуг как основа для продвижения чтения;
соответствие оказываемых услуг по развитию и продвижению чтения требованиям современного информационного общества;
расширение круга читателей и повышение качества их запросов на литературу;
повышение уровня социального участия читателей в формировании современной читательской среды.
Критерии социальной полезности раскрыты в приложении.
Социальная привлекательность. Социальную привлекательность можно оценить в соответствии со следующими показателями:
удовлетворенность пользователей качеством и количеством услуг;
удовлетворенность персонала рабочим местом;
повышение интереса к чтению различных социальных групп. На вопрос, с какими социальными группами работают сотрудники библиотек, чаще всего они отвечают: с пенсионерами, студентами, творческой интеллигенцией - в общем, со всеми, но чаще всего с социально незащищенными слоями населения. Исследование показало, что они не ориентированы на работу с образованными и богатыми людьми. Научно-техническая интеллигенция, как и ряд других социальных групп с довольно высоким уровнем культурной компетентности, выпадают из сферы специального внимания библиотечных работников. Соответственно, в целом социальная привлекательность функционирования библиотек остается невысокой.
Критерии определения социальной привлекательности представлены в приложении.
|
