TEMA 6
EVALUACIÓN DE LA INTERVENCIÓN SOCIOEDUCATIVA
LA EVALUACIÓN EN INTERVENCIÓN SOCIOEDUCATIVA
ü
Permite
explicar y valorar tanto el proceso de ejecución del proyecto como los
resultados de las acciones realizadas en su desarrollo.
ü
La
comparación al analizar los resultados se realizan con los objetivos
propuestos.
ü
Finaliza
con las conclusiones y propuestas, reforzando los aciertos y modificando los
aspectos no satisfactorios.
ü
Puede
ser interna (por el propio equipo) o externa (ajenos al proyecto)
IMPORTANCIA DE LA EVALUACIÓN
Su finalidad según el momento en la que se
realice: evaluación procesual (durante para el adecuado desarrollo) y
evaluación final comprobando su eficacia en los objetivos alcanzados.
Diferentes técnicas para los distintos
elementos:
ü Contexto,
planificación (objetivos, actividades…)
ü Proceso de desarrollo
(actuaciones, temporalización…)
ü Resultados (eficacia,
satisfacción…)
La evaluación es un proceso de mejora que
permite tomar las decisiones adecuadas y pertinentes durante la ejecución del
proyecto y en su finalización
CRITERIOS E INDICADORES EN LA EVALUACIÓN DE PROYECTOS DE
INTERVENCIÓN SOCIOEDUCATIVA
ü
Contexto:
aplicabilidad y viabilidad
ü
Planificación:
coherencia, pertinencia y adecuación
ü
Ejecución:
eficiencia ajuste y satisfacción
ü
Resultados:
eficacia, efectividad y satisfacción
ü
Evaluación
diferida: repercusión, permanencia y proyección
Indicadores para evaluar cada una de las fases del proyecto
Unidades de análisis: indicadores
ü Planificación:
contenidos, objetivos, finalidad, actividades, temporalización y evaluabilidad
ü Metodología:
adecuación a los objetivos, evaluación inicial, identificación de necesidades,
contextualización, temporalización, funcionamiento y ejecución
ü Recursos: cantidad,
calidad, adecuación y disponibilidad (vamos bueno, bonito y barato)
ü Valoración final:
grado de satisfacción general, resultados y logros, valoración de resultados y
posibilidades de continuidad
PROCEDIMIENTOS, TÉCNICAS E INSTRUMENTOS PARA
LA EVALUACIÓN DE LA INTERVENCIÓN SOCIOEDUCATIVA
Los tres elementos
básicos del proceso de evaluación es necesario delimitar el sentido y la
función de cada uno, a la hora de realizar la evaluación.
ü Procedimiento: pasos
y pautar para obtener información para
dicha evaluación, determinando las técnicas e instrumentos necesarios. Nos
indica el modo, el momento y los medios para la obtención de la información
necesaria para la evaluación.
ü Técnica: conjunto de
saberes prácticos para la obtención de resultados deseados. Puede ser aplicado
en cualquier ámbito humano. Requiere destreza manual y/o intelectual
adaptándolo a las necesidades de cada cual. Es la forma y pericia para la
obtener la información por medio de diversos instrumentos según la técnica
utilizada.
ü Instrumento:
herramienta para conseguir un fin, debe ser adecuado a este. En la intervención
socioeducativa está al servicio de una estrategia de intervención para lograr
los objetivos.
El procedimiento se
adecuará al proyecto, la técnica al procedimiento y los instrumentos a la
técnica.
TÉCNICAS E INSTRUMENTOS MÁS USADOS
El éxito y la
fiabilidad de la evaluación van a depender de las técnicas y los instrumentos
seleccionados. La clasificación de las técnicas e instrumentos es la siguiente:
Técnicas para la
recogida de datos:
ü Observación: directa
e indirecta
ü Interrogación:
encuesta bien a los beneficiarios o a los agentes y familias y la entrevista
puede ser estructurada o abierta.
ü Sociometrías:
facilitando la información sobre la estructura interna del grupo
Técnicas para los
análisis de datos:
ü Análisis de contenido
ü Test estandarizados
ü Técnicas de grupo
TÉCNICAS PARA LA RECOGIDA DE DATOS
Observación:
El estudio del
individuo en el propio medio. La recogida de datos se realiza mediante rejillas
de observación, fichas de registros… permitiendo la observación y el análisis de situaciones reales con la recogida de
información in situ y relacionando al individuo con su medio
Según el grado de
implicación del observador puede ser:
ü Participante con la
implicación y la participación del observador en el proceso de observación.
Formando parte del ámbito y del contexto del sujeto observado y en relación con
este. Tiene el inconveniente que el sujeto puede verse observado y por lo tanto
no actuar con naturalidad
ü No participante en la
cual el observador mantiene la distancia con el observado y por lo tanto no
establece ningún tipo de relación
Tipos según las
conductas observadas:
ü Conductas verbales:
contenido de los mensajes, volumen, sintaxis, léxico...
ü Conductas no
verbales: expresión corporal expresión facial movimientos posturales…
ü Conductas
relacionales: modos y formas de relacionarse
Procedimiento a
seguir:
ü Delimitar el
sujeto/objeto de estudio
ü Decisión sobre el
instrumento de registro
ü Recogida de datos
ü Análisis de datos
ü Interpretación de
datos
Modos de observación
según la metodología:
Observación
sistemática en la cual todo el proceso está totalmente sistematizado,
garantizando la fiabilidad y la validez. Los instrumentos utilizados son la
lista de control y escalas de estimación
Observación no
sistemática en la cual no hay tanto control, es muy útil para la observación de
conductas espontáneas y comprender más
que analizas la realidad. Los instrumentos utilizados son el diario, notas de
campo, registros anecdótico…
Interrogación:
Encuesta. Es una técnica de información grupal,
proviene directamente del sujeto y se puede aplicar de forma masiva. Se puede
obtener datos subjetivos. Si es utilizada para obtener información para la
evaluación de un proyecto de intervención educativa se debe dirigir a todos los
agentes implicados, beneficiarios, familiares, educadores… tiene el
inconveniente que el sujeto puede responder según la imagen social deseable.
El procedimiento a
seguir es el siguiente: definir los objetivos, delimitar la población y
muestra, y elaborar el cuestionario
El cuestionario debe
tener una serie de requisitos como son: que las preguntas sean comprensibles,
su formulación neutras y en forma personal. Según el tipo de respuestas pueden
ser dicotómicas con dos repuestas alternativas y excluyentes, categóricas con
alternativas de respuestas categorizadas y abiertas con respuestas de libre
elección
Entrevista. Es una técnica basada en la relación
directa e intencional entre el entrevistador y entrevistado, preestablecida y
asumida por ambos.
Las modalidades más
usadas:
ü E. estructurada.
Formulación y secuencia de preguntas prefijadas, repuestas dirigidas, ofrece
mayor control y fiabilidad de datos y responde al esquema de un cuestionario
ü E. semiestructurada.
Su estructura no es tan rígida y las repuestas no están dirigidas
ü E. abierta. Las
preguntas no se establecen previamente, aunque tiene una finalidad concreta y
las repuestas son libres.
Fases de la
entrevista:
ü Elaboración y
preparación. Se decide el tipo de entrevista y su finalidad
ü Inicio de la
entrevista, exponiendo al entrevistado la finalidad, se garantiza la
confidencialidad y se expone la colaboración esperada
ü Desarrollo de la
entrevista. Se comienza por los aspectos menos comprometidos, se hace referencia a información anterior, se sigue una
secuencia lógica, es decir de genérico a específico y por último se finaliza
con un resumen de la información expuesta
Las entrevistas son
interrogatorios sin intercambio de pareceres. Es importante que en todo momento
impliquemos al interlocutor y que no se convierta únicamente en la transmisión
de información
Sociometría. Permite estudiar la
relación del individuo en su medio, ofreciéndonos el grado de socialización, la
relación con el medio, la integración social…
Su gran utilidad es
la prevención y la evaluación de sujetos o colectivos en riesgo de exclusión
social. Hay un buen numero para su elección por lo que la podemos elegir
adecuándolas a las distintas situaciones y características del sujeto...
Su utilización es muy
habitual en los centros educativos para la valoración de la interacción en el
aula. En la evaluación de proyecto es muy útil cuando los objetivos del
proyecto van dirigidos a integrar o
prevenir la exclusión social.
Los test sociométricos es la técnica de
mayor aplicación, es adecuada para el estudio de interacciones afectivas en
grupos, relaciones interpersonales y comunicaciones, mediante determinadas
preguntas a los miembros del grupo, para que elijan a los que más desearía y a
los que no desearían como compañeros para realizar determinada actividad. Con las
respuestas obtenidas se realizará la matriz
sociométrica y a partir del análisis de resultados podemos elaborar el
sociograma que nos dará una visión de las interacciones del grupo
TÉCNICAS PARA EL ANÁLIS DE DATOS
Análisis de contenido La técnica más
habitual es el análisis de documentos escritos, historia de vida, diario… Es
una técnica muy depurada y precisa, mediante el análisis de unos parámetros
previamente establecidos.
Test estandarizados. Nos ayudan a estudiar
determinadas dimensiones humanas que no son posibles estudiar de forma directa
debido a su complejidad como las actitudes, aptitudes, personalidad,
inteligencia… Son técnicas de investigación social, permite una descripción
cuantitativa del comportamiento ante una situación determinada, tomando como
referencia el comportamiento de los individuos de un grupo definido, colocado
en las mismas circunstancias y situación.
Tienen
una gran utilidad en la educación social para valorar situaciones grupales y
personales y es utilizada en la evaluación inicial en la evaluación de un
proyecto.
Técnicas de grupo. Philips 6x6,
discusión de grupo, brainstormig…
TIPOS DE EVALUACIÓN
Según el
modelo puede estar orientada a los objetivos, a los contenidos y a los valores.
Según la función puede ser optimizadora, sistemática, motivadora…
La más
común que responde a todos los modelos y finalidades es la consideración del
momento de la evaluación.
Momentos:
ü Inicial. Evalúa el
proyecto sus dimensiones son: contenido del proyecto, contextualización y punto
de partida
ü Procesual. Evalúa el
desarrollo del proyecto y sus dimensiones son: ejecución del proyecto,
coherencia, pertinencia y adecuación
ü Final. Evalúa
proyecto y resultados y sus dimensiones son: logros alcanzados, valoración
global, continuidad y repercusión
La evaluación inicial. Informe
de la evaluación diagnóstica
Su
finalidad es diagnostica, es el punto de partida de un proyecto de intervención
socioeducativas. Va a determinar las necesidades de intervención en un ámbito
concreto. Con la evaluación inicial obtendremos datos del conocimiento real de
todos los elementos y de sus características, con lo que podremos diseñar
estrategias y acciones adecuadas y poder justificar la necesidad e idoneidad
del proyecto. Ayudándonos a la toma de decisiones fundamentadas.
Comprende
el análisis y valoración del contexto,
utilizando instrumentos adecuados al caso, análisis de la población diana que
comprenderá el nivel socioeducativo, dificultades, problemas, expectativa… y la
detección de las necesidades.
Reflejándose
el resultado de la evaluación inicial en el informe de evaluación
El
informe de evaluación inicial comprenderá:
ü Justificación de la
intervención a partir de las necesidades detectadas
ü Procedimiento de
recogida de la información
ü Necesidades
detectadas
ü Propuesta de
intervención
ü Población diana
ü Propuestas y
sugerencias
ü Conclusiones
La evaluación procesual.
Informe de la evaluación formativa
Tiene un
carácter formativo, cuya finalidad es analizar y evaluar el proceso de
intervención en distintos momentos de la ejecución del proyecto, con la
finalidad de detectar deficiencias y poder introducir los cambios pertinentes a
modo de estrategia de mejora. Se realiza en todo los elementos del proyecto.
Tiene un carácter provisional y de progreso.
El
informe recogerá:
ü Análisis de la
situación actual del proyecto en relación a la situación de partida
ü Análisis de los
problemas: identificación y búsqueda de soluciones
ü Análisis y control
del seguimiento del proyecto
ü Regulación del
proceso con los cambios necesarios a la vista de los resultados
La evaluación final. Informe
general de la evaluación sumativa
Tiene un
carácter sumativa. Es el resultado de las distintas evaluaciones realizadas a
lo largo del proceso
La
información que aporta es la siguiente:
ü Resultados obtenidos
ü Logros de objetivos y
el nivel del logro
ü Adecuación de las
acciones
ü Adecuación y
suficiencia de los recursos
Los
resultados pueden ser el punto de partida de la evaluación inicial del
siguiente proyecto. El carácter de los resultados puede determinar su extrapolación
y repercusión.
El
informe final tiene un carácter integral, sumativa y definitivo, acredita la
ejecución y determinación del proyecto y resultados logrados
Informe
final:
ü Introducción:
finalidad y estructura
ü Características del
proceso de evaluación: contextualización, metodología, destinatarios, finalidad
y momento de la evaluación
ü Diseño de la
evaluación: objetivos, procedimientos y técnicas de recogida de datos, informe
de evaluación procesual y temporalización de las actividades
ü Resultados: presentación
y comentario
ü Conclusiones:
interpretación y conclusiones
ü Valoración de la
evaluación realizada: resumen de puntos fuertes y débiles y limitaciones
ü Perspectivas de
futuro con las propuestas de mejora
En el
caso de ir dirigido a expertos o a la comunidad científica, debe tener un
carácter más técnico incluyendo especificaciones en cuanto a: procedimiento de
recogida de información, plan de muestreo, planificación de la recogida de
datos, tratamiento y análisis de los datos, presentación de los resultados y anexos
para complementar información