Saltar a contenido

Plantilla: Sistema de Evaluación de Competencias Auditable

Este documento define la estructura general (aplicable a cualquier curso o línea) para que "tener una buena rúbrica" se convierta en "tener un sistema de evaluación de competencias que un acreditador (ICACIT, ABET u otro) puede auditar". Una rúbrica bien escrita es la capa 4 de 7 — necesaria, no suficiente.

El ejemplo ya construido con esta plantilla es pagatu/docs/proyecto-sello/matriz-competencias.md (curso Desarrollo de Aplicaciones Distribuidas) — capas 1-5 completas, capas 6-7 en plantilla vacía porque el curso todavía no tiene una cohorte medida.

Arquitectura del sistema

Figura 1. Arquitectura del Sistema de Evaluación de Competencias Auditable

flowchart TB
    subgraph L1["Nivel institución"]
        SO["1. Student Outcomes<br/>competencias del perfil de egreso"]
    end

    subgraph L2["Nivel programa / línea"]
        MAP["2. Mapa curricular<br/>competencia x curso x Nivel"]
    end

    subgraph L3["Nivel curso — sílabo"]
        PI["3. Indicadores de desempeño<br/>criterios de evaluación por unidad"]
    end

    subgraph L4["Nivel instrumento de evaluación"]
        RUB["4. Rúbrica<br/>criterios literales + etiqueta CE/Nivel por fila"]
    end

    subgraph L5["Nivel curso — consolidado"]
        MATRIZ["5. Matriz consolidada<br/>competencia, sesión, criterio, peso, umbral"]
    end

    subgraph L6["Nivel cohorte — cada semestre"]
        DATA["6. Recolección<br/>calificación obtenida por estudiante y criterio"]
        REPORT["Agregación<br/>% de cohorte en B+ vs. umbral"]
    end

    subgraph L7["Nivel mejora continua"]
        LOOP["7. Cierre del ciclo<br/>acción tomada y verificación en el siguiente semestre"]
    end

    SO --> MAP --> PI --> RUB --> MATRIZ --> DATA --> REPORT --> LOOP
    LOOP -. retroalimenta .-> PI

    classDef falta fill:#fdecea,stroke:#b71c1c,color:#111;
    class DATA,REPORT,LOOP falta

Las tres cajas en rojo (6-7) son las que hoy no existen en ningún curso: no hay una hoja de recolección por cohorte, ni una agregación de resultados, ni un registro de qué se ajustó cuando un criterio quedó bajo el umbral. Todo lo anterior (1-5) ya existe, al menos para DIST.

La flecha punteada de vuelta (7 → 3) es lo que hace al sistema un ciclo y no una lista de pasos: la mejora continua no termina en un informe, vuelve a tocar el indicador de desempeño del curso — por eso ABET y los organismos alineados a Washington Accord (entre ellos ICACIT en Perú) lo llaman closing the loop, no solo "evaluación".

La pirámide de 7 capas

Capa 1 — Student Outcomes / Competencias del perfil de egreso

El catálogo institucional de competencias, definido una sola vez a nivel de todo el programa — no por curso.

Dónde vive: Transcripción de evidencias por competencia + sección "Competencias oficiales por línea" de malla-curricular-2024.md.

Forma de la plantilla: código CEXXX, nombre, definición corta, línea a la que pertenece.

Capa 2 — Mapa curricular (curriculum map)

Qué curso evidencia qué competencia, y en qué Nivel de progresión (1, 2, 3/cierre).

Dónde vive: malla-curricular-2024.md, tablas "Progresión de competencias" y "Tabla — CEXXX [Nombre]" por competencia.

Forma de la plantilla:

| Competencia | Nivel 1 | Nivel 2 | Nivel 3 | Cierre (Nivel 3) |
|---|---|---|---|---|
| CEXXX ... | curso(s) | curso(s) | curso(s) | curso de cierre de línea |

Capa 3 — Indicadores de desempeño (Performance Indicators) por curso

Qué debe demostrar el estudiante, en lenguaje observable, en cada unidad de un curso concreto — cita literal del sílabo, no interpretación.

Dónde vive: cada sílabo, sección "Criterios de evaluación del producto" por unidad.

Forma de la plantilla:

| Nivel | Descripción (verbatim del sílabo) | Curso |
|---|---|---|

Capa 4 — Instrumento de evaluación (rúbrica) con etiqueta de competencia

La rúbrica de cada unidad, con dos reglas no negociables:

  1. Los criterios son cita literal de la Capa 3 — nunca una matriz genérica reusada entre cursos sin verificar que mide lo que ese sílabo específico pide (ver feedback de esta sesión: una matriz común de "Problema/Diseño/Implementación/Sustentación" evalúa forma de proyecto académico, no la competencia técnica del sílabo).
  2. Cada criterio se etiqueta con su competencia y Nivel, dentro de la tabla — no solo en un párrafo aparte. Si los criterios técnicos ya exigen verbos de competencia (Aplica, Define, Justifica) verificados en vivo, un criterio de Sustentación agregado aparte no necesita etiquetarse también con esa competencia técnica: sería contar dos veces la misma evidencia. En ese caso, la Sustentación se etiqueta solo CG y se enfoca en aporte individual y comunicación — no repitas "Defensa técnica" como subaspecto propio, porque confunde al evaluador sugiriendo una segunda evaluación de dominio técnico que ya ocurrió en los criterios anteriores. La excepción es cuando el propio sílabo funde en un único criterio la demostración técnica de cierre con la defensa grupal (ej. Unidad 3 de DIST/Big Data): ahí sí corresponde la etiqueta doble (CE0XX-NX (cierre) + CG), porque no hay otro criterio previo que ya haya evaluado esa demostración de cierre.

Dónde vive: uN-producto.md por unidad (o equivalente).

Forma de la plantilla:

| Criterio | Peso | CE / Nivel | A (20) | B (15) | C (10) | D (5) | Calificación obtenida |
|---|---:|---|---|---|---|---|---:|

Capa 5 — Matriz consolidada por curso

Une las capas 2-4 en una sola vista, con el umbral de logro que falta definir en la rúbrica sola.

Dónde vive: proyecto-sello/matriz-competencias.md (o equivalente por curso).

Forma de la plantilla:

| Competencia | Nivel | Unidad | Sesión | Criterio de rúbrica | Peso | Umbral de logro | Última medición |
|---|---|---|---|---|---:|---|---|

Umbral de logro (lo que la rúbrica sola no define): un porcentaje objetivo de la cohorte que debe alcanzar cierto nivel — ej. "≥70% en nivel B o superior" — independiente de la nota académica de cada estudiante. Se propone parejo al inicio (sin datos históricos que justifiquen variarlo) y se ajusta por criterio después de la primera medición real.

Capa 6 — Recolección y agregación de resultados (la capa que casi siempre falta)

Sin esto, la rúbrica califica individuos pero no genera evidencia de resultados de cohorte — que es lo que un acreditador pide.

Qué necesita existir: un registro (hoja de cálculo o base de datos), separado de la rúbrica, donde el docente vuelca la calificación obtenida de cada estudiante en cada criterio al cerrar cada sustentación — no solo la nota final calculada.

Forma de la plantilla (la hoja de recolección):

| Estudiante | Sección | Semestre | Unidad | Criterio | Calificación obtenida | Puntos |
|---|---|---|---|---|---|---:|

Salida esperada: por criterio, el % de estudiantes en B+ de la cohorte, comparado contra el umbral de la Capa 5 — eso es lo que se escribe en la columna "Última medición" de la matriz consolidada.

Capa 7 — Cierre del ciclo de mejora continua

Cuando un criterio queda bajo el umbral, debe quedar registrado qué se hizo al respecto y si funcionó en el siguiente ciclo — sin esto, medir resultados no tiene consecuencia visible.

Forma de la plantilla:

| Semestre medido | Criterio bajo umbral | Resultado | Acción tomada | Responsable | Semestre de verificación |
|---|---|---|---|---|---|

Piezas adicionales que un acreditador también suele pedir (fuera de las 7 capas)

  • Evidencia física (exemplars): una muestra real de trabajo de estudiante guardada por cada nivel de desempeño (A/B/C/D) de al menos un criterio por curso — justifica por qué algo calificó B y no A, más allá de la descripción de la rúbrica.
  • Evaluación indirecta: encuestas de autopercepción al cierre del curso, o de egresados/empleadores — complementa la evaluación directa (rúbrica), que es la única que este sistema cubre hoy.
  • Gobernanza: quién es responsable de cada capa (¿el docente del curso? ¿un coordinador de línea?) y con qué frecuencia se revisa (¿cada semestre? ¿cada ciclo de acreditación?) — sin esto, las capas 6-7 dependen de que alguien se acuerde de hacerlas.

Estado actual del sistema (auto-diagnóstico, 2026-09)

Capa Estado Dónde
1. Student Outcomes Existe, a nivel institución transcripcion.md, "Competencias oficiales por línea"
2. Mapa curricular Completo para Software (CE02); parcial para Gestión/Infraestructura/CD-IA malla-curricular-2024.md
3. Indicadores de desempeño por curso Existe en cada sílabo verificado sílabos individuales
4. Rúbrica con criterios literales Construida para ADS, LP2, BD2, DIST, Big Data uN-producto.md por curso
4b. Etiqueta CE/Nivel dentro de la tabla Cerrada en ADS, DIST, Big Data, LP2 y BD2 (9 rúbricas) uN-producto.md por curso
5. Matriz consolidada por curso Cerrada para Unidad 1 de ADS, LP2 y BD2, y para las 3 unidades de DIST y Big Data pagatu, lambda26, bomerp/docs/proyecto-integrador/u1/{ads,lp2,bd2}-matriz-competencias.md
6. Recolección agregada por cohorte No existe en ningún curso pendiente
7. Cierre del ciclo de mejora No existe en ningún curso pendiente
Evidencia física (exemplars) No existe pendiente
Evaluación indirecta No existe pendiente
Gobernanza documentada No existe pendiente

Nota sobre ADS: su rúbrica de Unidad 1 (bomerp/docs/proyecto-integrador/u1/ads-producto.md, Tabla 7) ya fue entregada/comunicada a los estudiantes antes de agregarle las columnas CE / Nivel y Calificación obtenida — el cambio se aplicó después, de forma visible (no retroactiva a una evaluación ya cerrada), cerrando el mismo hueco que tenían LP2 y BD2. Su Competencia General es "Servicio y misión" (confirmada, sin inconsistencia entre secciones del sílabo — a diferencia de BD2) — el criterio 6 (Sustentación) etiqueta CG. Su trazabilidad sigue siendo la más completa de las cinco: además de CE021-N2 (parcial) en los criterios 1-5, documenta que la Sección 2 (Atributos de calidad) es insumo no calificado del Nivel 1 de CE024 — un matiz que ninguna otra rúbrica tiene todavía.

Siguiente paso más barato y de mayor impacto: extender la Capa 5 a Unidad 2 y Unidad 3 de ADS/LP2/BD2 cuando esas evaluaciones tengan su propia rúbrica (hoy solo tienen el documento de producto, sin rúbrica). Las Capas 6-7 no se pueden avanzar en ningún curso hasta que exista al menos una cohorte real que rinda una sustentación.