Cómo evaluar el impacto de un taller virtual
Tema
Idioma
Tipo
Uno de los retos de los talleres virtuales es que puede resultar muy difícil evaluar cómo se sienten les participantes, qué están aprendiendo y, en general, qué impacto ha tenido el taller. Al mismo tiempo, el taller virtual ofrece algunas opciones para generar fácilmente datos que puedes utilizar para ayudarte a analizar tu impacto, como transcripciones de chat, datos de encuestas, datos de les participantes, etc. El uso de los datos que ofrecen las herramientas para los talleres virtuales resulta especialmente útil cuando quieres medir el impacto de talleres virtuales masivos.
CÓMO ELABORAR UN PLAN DE EVALUACIÓN DE IMPACTO
Diseñar y dirigir talleres virtuales requiere mucho tiempo y esfuerzo, por lo que vale la pena dedicar algún tiempo a evaluar el impacto que estás teniendo en el cumplimiento de tu objetivo. Para que la evaluación sea lo más útil posible, ¡no esperes hasta después del taller para pensar en cómo lo evaluarás!
Al elaborar un plan de evaluación del impacto, comienza como lo harías al diseñar el taller, es decir, estableciendo claramente los objetivos:
- ¿Cuál es la PETICIÓN de movilización del taller? (Lo que quieres que la gente haga después del taller)
- ¿Cuáles son sus objetivos de impacto? (Los conocimientos, las habilidades y las actitudes que necesitarán para llevar a cabo tu PETICIÓN)
- ¿Qué otros objetivos tienes para el taller, por ejemplo, tienes un objetivo de recaudación de fondos?, ¿un objetivo de garantizar la participación de un público determinado?
Estos son los objetivos en los que debe centrarse tu plan de impacto. Para cada objetivo, pregúntate cómo podrás evaluarlo. Te animamos a que incluyas en tu taller actividades diseñadas específicamente para que te ayuden a hacerte una idea de en dónde están les participantes a la luz de tus objetivos. Después del taller, puedes utilizar los resultados de estas actividades (en la transcripción del chat, en las notas escritas, en los resultados de las encuestas) en tu evaluación. Si utilizas un formulario de evaluación posterior al taller, es importante que también pienses bien qué preguntas incluir en él. Recuerda que el hecho de que a muchas personas «les guste» tu taller no te da mucha información sobre su impacto.
CONSEJO: al iniciar cada actividad durante el taller, puedes poner una fila de caracteres (como el signo igual (=)) antes de formular la pregunta que da paso a una actividad específica. Esto facilita el análisis posterior de la transcripción del chat. Por ejemplo:
===========
Comparte en el chat: en una escala de 1 a 5, ¿qué tan útil es este ejemplo?
===========
La revisión de las estadísticas recopiladas puede hacer parte del informe post-taller y facilitar la comparación entre dos sesiones del mismo taller. ¿Los cambios introducidos en el diseño aumentaron el impacto?
A continuación encontrarás algunos ejemplos y consejos que pueden ayudarte a elaborar y poner en práctica tu plan.
EJEMPLO DE ESTADÍSTICAS
Acá hay algunos ejemplos de los tipos de estadísticas que hemos utilizado en el pasado para analizar el impacto de un taller virtual.
Información a recopilar antes o durante el taller |
|
| Total de asistencias confirmadas (RSVP) | |
| Número máximo de participantes (dispositivos) conectades a la vez | |
| Número de asistentes (teniendo en cuenta si hay personas que comparten un mismo dispositivo) | |
| % de asistencia de las personas que confirmaron asistencia | |
| Ingreso (cuántas personas ingresaron temprano, a tiempo y tarde) | |
| Salida (cuándo se desconectaron las personas) | |
| Participantes (conexiones) que se quedaron después del final oficial para hacer más preguntas | |
| Participantes (conexiones) conectades solo por teléfono |
Información a recoger después del taller |
|
| # y % de conexiones que participaron en el chat al menos una vez | |
| El número promedio de veces que participaron en el chat quienes lo hicieron | |
| Número máximo de participaciones en el chat de una conexión – y quién fue | |
| # y % de personas (conexiones, no individuos) que respondieron a la pregunta: ___________ | |
| Respuesta promedio a la pregunta: ________ | |
| # y % de personas (conexiones, no individuos) que respondieron a la pregunta: ___________ | |
| Respuesta promedio a la pregunta: ________ | |
| Tasa de apertura del correo electrónico de seguimiento (personas que abrieron el correo electrónico de seguimiento) | |
| Porcentaje de clics en el correo electrónico de seguimiento (personas que han hecho clic en los enlaces del correo electrónico de seguimiento) | |
| Número de personas que completaron la petición de movilización |
CONSEJO TÉCNICO PARA EL ANÁLISIS DEL CHAT
Para facilitar el análisis del chat anterior, especialmente en el caso de talleres muy grandes, puede ser útil convertir una transcripción de chat de texto en una hoja de cálculo. Encuentra acá un ejemplo de cómo hacerlo con una transcripción de chat de Zoom y las herramientas de Microsoft Office:
- Abre tu documento de transcripción de chat
- Elimina los chats privados. Consejo: busca la palabra «Directo».
- Copia y pega la transcripción del chat en un documento de Word (para que el siguiente paso funcione debe ser Word, no cualquier editor de texto)
- En la barra de herramientas de Word, ve a Insertar -> Tabla -> Convertir texto en tabla. Elige la opción de separar el texto en Tabulaciones. El resultado será una tabla con dos columnas, la primera columna es la marca de tiempo, la segunda columna empieza por De <nombre>.
- Copia y pega tu nueva tabla en una hoja de cálculo como Google Sheets, Excel, etc.
Ahora que tienes esta hoja de cálculo con dos columnas, puedes hacer cosas como:
- Ordenar toda la hoja de cálculo en función de la columna 2 (nombre) y ocultar todos los chats de las personas que no quieras incluir en tu análisis (por ejemplo, los del equipo).
- Ordenar toda la hoja de cálculo en función de la columna 2 para contar fácilmente cuántas personas diferentes han participado o cuántas veces ha participado cada persona.
- Ordenar toda la hoja de cálculo en función de la columna 1 (marca de tiempo) para contar el número de respuestas o analizar las respuestas a una pregunta concreta.
CONSEJO TÉCNICO PARA EL ANÁLISIS DE LA PARTICIPACIÓN
Las cuentas de Zoom incluyen varios tipos de informes que pueden proporcionarte información útil. Entre ellos están los informes de registro, de asistencia (que incluye el número de minutos que las personas permanecieron conectadas a la llamada) y de sondeo. En el siguiente enlace puedes acceder a un tutorial sobre esta función: https://support.zoom.us/hc/en-us/articles/201363213-Getting-started-with-reports
Si utilizas una plataforma distinta a Zoom, comprueba qué funciones de análisis te ofrece.