Descripción general
Determinar el formato de evaluación (en persona o remoto) que ofrecerá un evento requiere una conversación entre el asesor de jueces y el socio del evento. En última instancia, la decisión sobre el formato de evaluación recae en el socio del evento, pero el asesor de jueces debe sentirse cómodo trabajando en el formato elegido. La evaluación remota puede ayudar a administrar los recursos de voluntarios disponibles para el día del evento, pero los jueces voluntarios deben sentirse cómodos con cualquier requisito adicional de tiempo y/o tecnología que se les pueda exigir.
Todos los equipos evaluados para un evento deben serjuzgados en el mismo formatopara garantizar la coherencia en la experiencia de evaluación y para eliminar la posibilidad de que el sesgo basado en el formato afecte las deliberaciones. Por ejemplo, si los libros de registro de la competencia se envían para su evaluación a través de enlaces antes del evento para algunos equipos, entonces los libros de registro físicos no deben evaluarse en persona el día del evento para otros equipos.
La evaluación remota también debe realizarse lo más cerca posible del evento para que la información del equipo que los jueces observen en las entrevistas iniciales sea lo más cercana posible a lo que se lleva a la competencia.
La evaluación remota sigue todas las pautas de la evaluación en persona. Esta sección tiene como objetivo resaltar las diferencias clave en el proceso de evaluación si algunas de las tareas de evaluación que generalmente se realizan en persona se realizan de forma remota. La evaluación remota puede realizarse en forma de evaluación remota del libro de registro de competencia digital, o entrevistas remotas iniciales del equipo de jueces, o una combinación de ambas, de la siguiente manera:
Evaluación remota del libro de registro de competencia
- Los cuadernos de bitácora de competición digitales se juzgan de forma remota antes del evento.
- Los equipos cargarán enlaces a los documentos de sus libros de registro a través de RobotEvents.com.
- Esta lista de enlaces será proporcionada por el socio del evento al juez asesor.
- Los jueces deben poder ver libremente los libros de registro mediante el enlace. Los equipos deben asegurarse de que los permisos para ver sus cuadernos estén configurados para permitir que los jueces puedan verlos.
- El Juez Asesor organizará a los jueces en grupos para revisar y calificar los cuadernos usandoRúbricadel Cuaderno de Competición
- Los libros de registro digitales deben manejarse de forma remota en circunstancias similares para garantizar la coherencia.
- Varios jueces deben examinar los libros de registro digitales para establecer una clasificación de los libros de registro finalistas.
- Es posible que algunos eventos quieran realizar una variación de este formato de evaluación. El principio primordial sigue siendo que todas las presentaciones de cuadernos de bitácora deben evaluarse utilizando el mismo formato de presentación y en el mismo período de tiempo,de modo que ninguna entrada reciba ninguna preferencia o ventaja real o percibida.
Nota:No está permitido que se solicite a los equipos que envíen libros de registro a través de un método que no sea el enlace RobotEvents o como un tipo de archivo específico. Tampoco se impondrán requisitos adicionales a los cuadernos de bitácora que no aparecen en esta guía.
Nota:Una vez que se carga el enlace del Libro de registro de la competencia a través de RobotEvents, no existe ninguna prohibición para que los equipos actualicen su libro de registro de manera continua, incluso el día del evento. Se espera que el contenido del libro de registro cambie con el tiempo, lo cual es parte del proceso.
Entrevistas remotas iniciales del equipo evaluado
- Las entrevistas iniciales del equipo se realizan de forma remota antes del evento, utilizando la Rúbrica de entrevista de equipo.
- Los participantes del equipo pueden iniciar sesión en la reunión desde una única ubicación compartiendo una cámara web o desde varias ubicaciones.
- El objetivo de las entrevistas iniciales del equipo evaluado a distancia es completar el paso 1 del proceso de deliberación.
- Los jueces asesores deben establecer una forma de recopilar las notas de los jueces para ayudar en las deliberaciones finales.
- Las entrevistas de seguimiento para los nominados al premio final (Paso 2 del proceso de deliberación) deben realizarse en persona para tener en cuenta las observaciones del equipo y los robots en el evento.
- Los jueces en persona de estas entrevistas de seguimiento no deben trasladar a los equipos de una categoría de premio a otra. Hacerlo invalidaría las deliberaciones iniciales de los jueces remotos y efectivamente sería “comenzar de nuevo” el proceso de evaluación sin dar el mismo trato a todos los equipos.
Nota:La evaluación remota no reemplaza las entrevistas y deliberaciones de seguimiento en persona el día del evento; está destinada a brindar flexibilidad a los socios del evento y a los jueces voluntarios para realizar algunas tareas de evaluación antes del evento. día. La evaluación remota puede permitir que un grupo más pequeño de jueces aproveche el período de tiempo más largo al programar la evaluación antes del evento y permite la utilización de jueces voluntarios que tal vez no puedan asistir a un evento en persona.
Protocolos de evaluación remota
- Todos los principios y pautas de evaluación aún se aplican.
- Se debe respetar la protección juvenil: mientras se realizan entrevistas remotas, cada equipo participante debe tener un representante adulto (mayor de 18 años y que no sea un estudiante de secundaria) conectado y visible ante la cámara durante toda la entrevista. Este representante adulto debe unirse a la entrevista antes de que lleguen los estudiantes. El adulto puede estar en la misma habitación que los estudiantes o iniciar sesión por separado en la llamada remota. Este adulto no debe participar ni contribuir al contenido de la entrevista del equipo de ninguna manera. Su presencia garantiza que haya varios adultos involucrados en cualquier reunión por video.
- Un juez nunca debe estar solo en una entrevista remota con un equipo, sino que debe trabajar como parte de un grupo de dos o más jueces. Con la inclusión del representante adulto del equipo, esto eleva a tres el número mínimo de adultos en una entrevista remota.
- Así como las entrevistas en persona no permiten la grabación, ninguna de las partes debe grabar las entrevistas remotas.
Es aceptable que los jueces remotos celebren reuniones de deliberación en línea separadas o compartan hojas de cálculo para ayudar a recopilar información de evaluación, comoEntrevista del equipooRúbrica del libro de registro de la competenciapuntajes yHojas de clasificación de candidatos al premio inicial. Cualquier nota de la reunión u hoja de cálculo de datos debe estar bajo el control del Juez Asesor y la información contenida en ellas debe destruirse al finalizar el evento.
Programación de evaluación remota
Cuadernos de competición
Los enlaces del libro de registro de competencia digital los carga el contacto principal del equipo en su cuenta de Robotevents.com. El socio del evento y el asesor de jueces deben determinar una fecha límite para que todos los equipos tengan sus enlaces cargados, dando así a los jueces tiempo suficiente para comenzar a revisar los libros de registro. El Socio del Evento compartirá esa lista de enlaces con el Asesor de Jueces, quien asignará jueces para revisar cada libro de registro de acuerdo con el proceso de evaluación del libro de registro (consulteGuía para juzgar: Cuadernos de ingeniería de jueces). Todos los cuadernos de bitácora digitales deben evaluarse en condiciones y limitaciones de tiempo similares.
Entrevistas iniciales remotas del equipo
Programación de los voluntarios para juzgar a distancia:La programación de entrevistas requiere coordinación entre el socio del evento y el asesor de jueces, los jueces remotos y los equipos. Se recomienda crear primero un cronograma de horarios de entrevistas y luego asegurarse de que los jueces remotos y el juez asesor estén disponibles para esos horarios. Si bien es posible que el juez asesor no necesite participar en una entrevista, se recomienda encarecidamente que esté disponible para ayudar a gestionar cualquier problema que pueda surgir. Además, si un juez remoto no puede asistir o tiene un problema tecnológico, el juez asesor puede intervenir y actuar como juez remoto para que los equipos puedan ser entrevistados a la hora programada.
Programación de los equipos:Los horarios de inscripción para la entrevista inicial remota del equipo pueden ser programados manualmente por el socio del evento, o un método más sencillo puede ser que los equipos se programen ellos mismos a través de un sistema de registro por orden de llegada. Se recomienda completar las entrevistas remotas unos días antes del evento en caso de que se necesite tiempo adicional debido a un problema de voluntariado o tecnológico que interrumpa el programa.
Si hay suficientes voluntarios de jueces remotos para apoyarlo, se pueden realizar varias entrevistas en paralelo. Por ejemplo, usar un único enlace de evaluación remota con una sala principal para los equipos entrantes y salas de trabajo para cada equipo de jueces remotos. Luego, los equipos se trasladan de la sala principal a una sala de descanso para su entrevista. Puede ser útil que dos adultos (el juez asesor y otro miembro del personal del evento) reciban a los equipos en la sala principal a medida que llegan, se aseguren de que su representante adulto esté visible ante la cámara y se aseguren de que sea el equipo correcto para el horario. antes de mover a los equipos para ver a sus jueces remotos. Tener esta “sala de espera” también evita que los equipos interrumpan inadvertidamente la entrevista de otro equipo.
Nota:La experiencia pasada ha demostrado que los ciclos de entrevistas de media hora funcionan bien. Treinta minutos dan tiempo suficiente para que los equipos ingresen al entorno de evaluación remota, para que los jueces remotos realicen una entrevista de 10 a 15 minutos y para que los jueces remotos tengan tiempo para discutir, calificar la entrevista y completar el premio inicial. Hoja de Clasificación de Candidatos, antes de que llegue el siguiente equipo.