[curriculum-eval] curriculum_assessment.py: checkpoint_quality — regexes miss `:white_check_mark:` and `:clipboard:` headings, depressing 93 pages

Abierto Apto para principiantes
#5,776 0 comentarios 0 reacciones 0 asignados Ver en GitHub

Los mantenedores suelen responder en 1 día

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
2/5
Tiempo estimado
1-3 horas
Aptitud para principiantes
88/100
Tipo de issue
Error
Claridad
Bien especificado
Estado de actividad
Activo
Stack tecnológico
github-actions, python
Área
testing

Línea de trabajo

Empieza por .github/skills/curriculum-quantitative-assessment/curriculum_assessment.py, donde el issue identifica CHECKPOINT_RE y la expresión regular de la sección de requisitos previos. Lee esos patrones e inspecciona el encabezado de ejemplo en workshop/04-github-actions-intro.md. Actualiza ambos patrones para que reconozcan las formas de emoji y shortcode, conservando ## Prerequisites; después vuelve a ejecutar la evaluación y comprueba los resultados de checkpoint y la media del corpus que se informan.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

curriculum documentation quality

File: .github/skills/curriculum-quantitative-assessment/curriculum_assessment.py
Overall Score: corpus mean 6.06 / 10.0 (threshold 5.52)

Flagged Dimensions:

Dimension Score Benchmark Delta
checkpoint_quality 0.0 on 93/95 pages ≥ 4 items → 10 −10
scaffolding 5.0 on 95/95 pages section present → 10 −5

Root Cause (≤ 2 sentences):
CHECKPOINT_RE matches only the literal ✅ emoji and the prerequisite check matches only 📋. Workshop pages use the GitHub shortcode form (## :white_check_mark: Checkpoint, ## :clipboard: Before You Start), so every page scores 0 for checkpoint and 5 for scaffolding.

Evidence (quoted from the file):

CHECKPOINT_RE = re.compile(r"##\s+✅\s*Checkpoint", re.IGNORECASE) and re.search(r"##\s+📋\s*Before You Start", raw, re.IGNORECASE)

For example, workshop/04-github-actions-intro.md has ## :white_check_mark: Checkpoint with 5 checklist items but is reported has_checkpoint: false. 93 workshop files contain that exact heading.

Learning Science Rationale:
Retrieval practice and formative assessment (Roediger & Karpicke) require learners to self-check outcomes at the end of a step, and the workshop already provides this. A rubric that cannot see it produces false "missing checkpoint" findings, hides real weaknesses (length, concept overload, low activity density) and wastes remediation effort on content that is already correct.

Improvement Prompt (for an agent):

In .github/skills/curriculum-quantitative-assessment/curriculum_assessment.py, update CHECKPOINT_RE to match both "## ✅ Checkpoint" and "## :white_check_mark: Checkpoint", and update the has_prereq_section regex to match both "## 📋 Before You Start" and "## :clipboard: Before You Start" (keep "## Prerequisites"). Use patterns like r"##\s+(?:✅|:white_check_mark:)\s*Checkpoint" and r"##\s+(?:📋|:clipboard:)\s*Before You Start". Re-run the assessment and confirm that has_checkpoint is true for all pages except 00-welcome, 01-prerequisites, 06-install-gh-aw and README, and that the corpus mean rises by about 2 points.

Expected Score After Fix: 8.0 / 10.0 (corpus mean; most pages gain +2.0 checkpoint and +0.75 scaffolding)

Generated by 🔬 Curriculum Quality Evaluator · copilot · auto · ~47 AIC · ⌖ ~1 AIC · ⊞ 5K · ◷

  • expires on Nov 17, 2026, 3:03 AM UTC
Lenguaje dominante
JavaScript
Estrellas
62
Forks
43
Merge medio
11 h 26 min
PR fusionados (30 d)
13

Preparar el entorno

Abrir en Codespaces

Inicia el contenedor de desarrollo del proyecto en tu navegador, con tu propia cuenta de GitHub.

  • Sin Dockerfile ni archivo de Docker Compose
  • Sin plantilla de pull request
  • Sin guía de contribución

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de githubnext/gh-aw-workshop

Todos los issues de githubnext/gh-aw-workshop

Issues similares

Más issues de JavaScript

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.