Критерии и показатели оценки эффективности технологической модели психолого-педагогического обеспечения социальной работы с семьей

О понятии «критерии и показатели оценки профессиональной деятельности»

Одной из важных предпосылок обоснования модели психолого-педагогической обеспечения социальной работы с семьей является оценка ее эффективности.

Учитывая, что основу любого процесса оценки социального явления составляет серия этапов, определяющих способ составления суждения (плана оценки) особое внимание целесообразно уделять этапу выбора критериев и количественных показателей.

В разработке критериев и им присущих количественных показателей учитывается то, что последние закреплены за отдельными характеристиками и свойствами явления (события), например, таких как воспитательный потенциал семьи, специфический вид обеспечения, реакция на социальную услугу и т. д. Эти характеристики и свойства соответствуют критериям, которые для оценки вида социальной деятельности удобно подразделить на группы. Таким образом, можно выделить группы критериев: ввод, выход, непосредственные результаты, конечные результаты.

К критериям группы «ввод» обычно относятся средства, которые складываются в деятельность (время, представители учреждений образования, персонал социальных служб семьи, диагностические и коррекционные методики, техники, технологии). Критерии «выхода» отражают результат деятельности или социальную услугу (психологопедагогическая консультация, учебная программа, помощь службы семьи).

К критериям, отражающим «непосредственные результаты», относятся результаты деятельности, выражающиеся в определенном изменении состояния знаний, умений, привычек, мотивации или поведения клиента (семьи), специалиста (например, обращение к диагностическим методикам, техникам прогнозирования в моделирования и т. д.). В качестве «конечного результата» принимается мера более глубокого воздействия деятельности на состояние психологического здоровья, социальный статус отдельных лиц, семей (например, снижение числа кризисных семей, увеличение их социальной активности и т. д.).

Измерения критериев вышеназванных групп позволяют получить соответствующую оценку эффективности рассматриваемой модели. Например, эффективность психолого-педагогического обеспечения при рассмотрении ее как «специфического вида деятельности», с точки зрения ее целей может быть рассчитана путем сравнения числа разнообразных услуг, предоставляемых службой семьи с определенным стандартом — запланированным числом таких услуг или нормой, отражающей всероссийский опыт, как указано ниже (см. рис. 12):

Рис. 12. Алгоритм расчета эффективности «специфического вида

деятельности".

В вышеприведенном примере деятельность эффективна, так как обеспечила услугами большее число семей, чем было запланировано. В данном случае используются количественные показатели, которые представляют собой числовую характеристику, закрепленную за предметом или событием согласно установленным правилам.

В учебном пособии они представлены в виде абсолютных цифр, коэффициентов, отношений, процентов, пропорций и индексов.

Кроме того, количественные показатели используются для оценки полезности имплицитных мер, качества исполнения непосредственных результатов и конечных результатов. Например, для определения одного из показателей, характеризующих психологическое здоровье семьи сегодня, такого как «сходство семейных ценностей» целесообразно оценить необходимость семейного консультирования с точки зрения обеспечения стабильности жизнедеятельности семьи. В качестве показателя измерения необходимых результатов обозначается практика внутрисемейного общения. В таком случае напрашивается вывод, что для достижения таких результатов (успешности внутрисемейного общения) необходимо организовать службу семьи с возможностями психокоррекционных и консультационных услуг, а значит, потребуется подходящий количественный показатель для определения выхода, т. е. конкретных результатов деятельности этой службы.

Соотношение количественных показателей и типов оценки показаны на рисунке 13. Ее верхняя часть иллюстрирует последовательность критериев, используемых для оценки необходимости и планов. Рассмотрение целесообразно начинать с критериев, относящихся к конечным результатам, и, следуя через критерии, относящиеся к непосредственным результатам и выходу, приходим к критериям ввода.

Когда определена система мер, то для оценки ее исполнения рассмотрение критериев производится в обратной последовательности, как показано на нижней части схемы: от ввода через выход и непосредственные результаты к конечным результатам.

В выборе количественных показателей обычно исходят из соображений возможности и целесообразности, избирая их для каждого критерия и стандарта. Следовательно возникает проблема точности каждого количественного показателя. В свою очередь точность находится в зависимости от валидности и достоверности показателя, от уровня и масштаба. В данном случае валидность показателя определяется тем, как действительно ли он измеряет то, что должно быть измерено. Достоверность показателя определяется путем проверки его постоянства в течение времени, определяемого признаками проблемной для семьи ситуации и признаками социальной активности (устойчивая тенденция стремления к норме уровня психологического здоровья семьи).

В проводимом опытно-экспериментальном обосновании учитывается то обстоятельство, что количественные показатели, характеризующие ввод и выход, более валидны и достоверны, чем показатели, характеризующие непосредственные и конечные результаты, так как они в большей мере доступны для непосредственного наблюдения. Поэтому для некоторых критериев, таких как ресурс времени, число специалистов, уровень знаний необходимы более точные показатели.

Другие же критерии, например, такие как уровень адаптивности членов семьи, их эмоциональная удовлетворенность и т. д. с большим трудом поддаются измерению, и поэтому в достижении необходимой точности требуется дополнительная проработка инструментариев, вплоть до составления специальных методик, что и предложено в проводимом педагогическом эксперименте в виде «Методики оценки психологического здоровья семьи» [114].

В определении количественных показателей целесообразно больше внимания уделить выбору объектов, к которым относятся критерии оценки активности психолого-педагогического обеспечения социальной работы с семьей. Сложность решения этой задачи связана с особенностями современной социальной ситуации, с неразработанностью данного вопроса, с многоплановостью и вариативностью самой социальной работы с семьей. Определенную трудность составляет работа по определению общих требований к разработке социального инструментария, в частности:

• — основательность — отражение сущности, важнейших сторон исследуемых (диагностируемых) процессов и объектов;
• — определенность — возможность их выражения в конкретных, поддающихся измерению показателях (индикаторах); стабильность — предполагаемая сопоставимость «срезов» на основе используемых критериев;
• — относительность, поскольку абсолютно точных и надежных способов измерения социально-педагогических явлений пока не существует и каждый способ дает результаты нуждающиеся в проверке [70].

Рис. 13. Соотношение между критериями количественными показателями и типами оценки основных элементов психологического здоровья семьи (конечного результата)

Все это придает этапу оценки противоречивый характер и высокую значимость. Исходя из этого, представляются важными ответы на вопросы; «Какие параметры, характеристики технологической модели психолого-педагогического обеспечения социальной работы с семьей необходимо учитывать при вынесении суждения о том, является ли данный объект эффективным: затраты, число клиентов, влияние на здоровье семьи? Каково относительное значение этих критериев: затраты или влияние на психологическое здоровье семьи?

Разрешение этих проблем возможно с помощью аналитико-синтетических процедур существующего опыта оценки внутрисемейных отношений, которые позволяют выявить основополагающие принципы оценки. Их суть сводится к следующему:

• — критерии должны быть соотнесены с объектом, целью и типом оценки; критерии следует выбирать совместно с принимающими решения на социальную защиту семьи лицами;
• — критерии полезно выбирать с учетом структуры психолого-педагогического обеспечения;
• — критерии надо сопоставлять со стандартами, выбранными для программы;
• — критерии должны быть определены для всех разновидностей обеспечения, вызывающих интерес.

И, наконец, важным представляется проверка возможности использования выбранных критериев для данной оценки. В таком случае основное внимание уделяется возможности сбора данных для всех критериев, особенно для критериев, характеризующих непосредственные и конечные результаты.