Hacktoberfest 2026: los issues que los mantenedores marcaron para octubre, abiertos y aptos para principiantes. Explorar issues de Hacktoberfest

NVIDIA/garak

Inicia sesión para seguir Ver en GitHub

the LLM vulnerability scanner

¿Es NVIDIA/garak apto para principiantes?

En los últimos 30 días, NVIDIA/garak fusionó 8 de 66 pull requests de colaboradores externos, y sus mantenedores suelen responder en 1 día. Ahora mismo hay 15 issues aptos para principiantes abiertos.

Estrellas
9.6k
Forks
1.4k
Issues abiertos para principiantes
15
Issues indexados
304
Merge medio
3 d 2 h
PR fusionados (30 d)
12
Lenguaje dominante
Python
Licencia
Apache-2.0
Último push a GitHub
14/10/2026
Última indexación
19/9/2026
Guía de contribución
Código de conducta
Etiquetas para principiantes
good first issue

Cómo contribuir a NVIDIA/garak

  1. Lee primero la guía de contribución: explica cómo quieren los mantenedores que se propongan, prueben y revisen los cambios.
  2. Lee su código de conducta: se aplica a los issues y pull requests igual que al chat.
  3. Tus contribuciones se publicarán bajo la licencia Apache-2.0 del proyecto.
  4. Elige uno de los 15 issues abiertos aptos para principiantes de abajo y comenta que quieres trabajar en él antes de empezar.
Para principiantes Todo
Abierto Todos

Las issues en las que quizá ya trabaja alguien aparecen al final. Ordenar todo por fecha

  • Judge truncation loops indefinitely when the system prompt alone exceeds the context budget
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100

    NVIDIA/garak#2345 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • Judge context check skips long CJK or numeric input with few whitespace-separated words
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100

    NVIDIA/garak#2344 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • WebSocket generator drops real answers containing the typing-indicator substring
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100

    NVIDIA/garak#2343 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • Stateful generators share one conversation across attempts (Rasa, WebSocket), and a path to multi-turn
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 1-2 días Aptitud para principiantes 54/100

    NVIDIA/garak#2338 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • leetspeak() ignores its transmute_chance argument
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100

    NVIDIA/garak#2336 · 2 comentarios ·

    Los mantenedores suelen responder en 1 día

  • probe: Arabic prompt-injection & jailbreak set (60 prompts, CC BY 4.0) — guidance on non-English probe inclusion
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    NVIDIA/garak#2321 ·

    Los mantenedores suelen responder en 1 día

  • detectors: dra default is too brittle
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    detectors

    Dificultad 3/5 1-2 días Aptitud para principiantes 58/100

    NVIDIA/garak#2302 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • probe: JOOD text-mixing jailbreaks
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 38/100

    NVIDIA/garak#2289 ·

    Los mantenedores suelen responder en 1 día

  • Agent action failure taxonomy from ~580k measured action-streams — proposal for an agent-behavior probe family
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    NVIDIA/garak#2276 ·

    Los mantenedores suelen responder en 1 día

  • New probe: Involuntary Jailbreak (self-prompting universal attack, arXiv:2508.13246, TMLR 2026)
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 45/100

    NVIDIA/garak#2246 ·

    Los mantenedores suelen responder en 1 día

  • buff: test prompt injection with low-resource code-switching
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 38/100

    NVIDIA/garak#2240 · 4 comentarios ·

    Los mantenedores suelen responder en 1 día

  • probes: agentic security probes aligned to OWASP Agentic Top 10 (safelabs-eval)
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 28/100

    NVIDIA/garak#2233 ·

    Los mantenedores suelen responder en 1 día

  • Probe class proposal: stale memory persistence across sessions
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

    NVIDIA/garak#2232 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • Digest of an aggregated report scores each probe/detector pairing from one contributing run only
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 3-5 días Aptitud para principiantes 72/100

    NVIDIA/garak#2213 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • Embodied probes: would garak take a detector that needs a simulator, or is that a separate tool?
    Abierto
    • ¿Algo no está bien?
    for-maintainers needs-triage question

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    NVIDIA/garak#2186 ·

    Los mantenedores suelen responder en 1 día

  • add reusable support for intent-aware iterative probes
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 45/100

    NVIDIA/garak#2180 · 2 comentarios ·

    Los mantenedores suelen responder en 1 día

  • probe: reasoning theft attack
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    new plugin probes

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    NVIDIA/garak#2178 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • AgentBreakerResult accepts out-of-schema judge verdict values
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 76/100

    NVIDIA/garak#2174 · 7 comentarios ·

    Los mantenedores suelen responder en 1 día

  • map euai: tags onto intents
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 45/100

    NVIDIA/garak#2157 · 5 comentarios ·

    Los mantenedores suelen responder en 1 día

  • Bound generator retries to prevent indefinite hangs
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    architecture bug needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 68/100

    NVIDIA/garak#2141 · 4 comentarios ·

    Los mantenedores suelen responder en 1 día

  • Migrate owasp:llmNN probe tags to year-qualified owasp:YYYY:llmNN format
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?

    Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

    NVIDIA/garak#2139 · 2 comentarios ·

    Los mantenedores suelen responder en 1 día

  • elicitation_injection — completion-elicited obfuscated commands (distinct from encoding?)
    Abierto
    • ¿Algo no está bien?
    for-maintainers needs-triage question

    Dificultad 4/5 3-5 días Aptitud para principiantes 52/100

    NVIDIA/garak#2128 ·

    Los mantenedores suelen responder en 1 día

  • Tool Surface Enumeration: Shared Recon Phase for Tool-Aware Probes
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    architecture for-maintainers

    NVIDIA/garak#2126 · 3 comentarios · 1 reacción · 1 asignado ·

    Los mantenedores suelen responder en 1 día

  • analyze: uncorrected ASR intervals are indistinguishable from corrected ones (116 of 122 detectors)
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    NVIDIA/garak#2117 · 1 comentario · 1 asignado ·

    Los mantenedores suelen responder en 1 día

  • Optional EvalPort interop for garak attempts and detector results
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 38/100

    NVIDIA/garak#2110 · 6 comentarios ·

    Los mantenedores suelen responder en 1 día

  • Agent telemetry support
    Abierto
    • ¿Algo no está bien?
    architecture for-maintainers

    Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

    NVIDIA/garak#2106 · 4 reacciones ·

    Los mantenedores suelen responder en 1 día

  • Probe: negotiated authenticated encrypted channels
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 30/100

    NVIDIA/garak#2093 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • Probe: Inductive alphabet-substitution probe for planted secret leakage
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    NVIDIA/garak#2092 ·

    Los mantenedores suelen responder en 1 día

  • feature: extend the intent tree from 3 to 4 levels for sub-cases without a shared detector prompt space
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    NVIDIA/garak#2091 · 2 comentarios ·

    Los mantenedores suelen responder en 1 día

  • feat(buffs): Caesar cipher buff for shift-encoding probe prompts
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 25/100

    NVIDIA/garak#2088 ·

    Los mantenedores suelen responder en 1 día

  • Azure model mapping and OpenAI context tables point at retired models
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 55/100

    NVIDIA/garak#2068 ·

    Los mantenedores suelen responder en 1 día

  • feature: expand intent→detector mapping coverage
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    detectors dontautoclose

    Dificultad 3/5 1-2 días Aptitud para principiantes 62/100

    NVIDIA/garak#2059 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • A probe that yields zero attempts leaves no trace in report.jsonl, so "did not run" and "was never configured" are the same absence
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage question

    Dificultad 3/5 1-2 días Aptitud para principiantes 68/100

    NVIDIA/garak#2021 · 4 comentarios ·

    Los mantenedores suelen responder en 1 día

  • cas: Techniques and Intents tab, By technique - detail level Grouped and detail level All leaves don't connect
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    reporting ux

    Dificultad 3/5 1-2 días Aptitud para principiantes 65/100

    NVIDIA/garak#1972 · 6 comentarios ·

    Los mantenedores suelen responder en 1 día

  • probe: RAG / vector-store / agent-memory *sleeper* poisoning (retrieval-time latent injection)
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    needs-triage

    NVIDIA/garak#1950 · 3 comentarios · 1 reacción · 2 asignados ·

    Los mantenedores suelen responder en 1 día

  • probe: LaTeX injection (target output executes when compiled — \write18, \input, \include)
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 3-5 días Aptitud para principiantes 35/100

    NVIDIA/garak#1927 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • agent_breaker.AgentBreaker is mis-tagged owasp:llm07/owasp:llm08 (should be owasp:llm06)
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?
    bug bug-verified

    Dificultad 2/5 1-3 horas Aptitud para principiantes 72/100

    NVIDIA/garak#1919 · 5 comentarios ·

    Los mantenedores suelen responder en 1 día

  • pass@k for ASR
    Abierto
    • ¿Algo no está bien?

    Dificultad 4/5 3-5 días Aptitud para principiantes 48/100

    NVIDIA/garak#1911 · 4 comentarios ·

    Los mantenedores suelen responder en 1 día

  • probes: add zh_jailbreak probes and detector for Chinese LLMs
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

    NVIDIA/garak#1897 ·

    Los mantenedores suelen responder en 1 día

  • probes: shared IntentProbe stub selection within a run
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 4/5 3-5 días Aptitud para principiantes 52/100

    NVIDIA/garak#1878 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • cas: select detectors by technique as well as intent
    Abierto
    • ¿Algo no está bien?
    for-maintainers

    Dificultad 4/5 3-5 días Aptitud para principiantes 55/100

    NVIDIA/garak#1875 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • Small note from HVTracker: would you be open to adding your trust badge?
    Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 52/100

    NVIDIA/garak#1862 · 1 reacción ·

    Los mantenedores suelen responder en 1 día

  • expand intent support per payload file
    Quizá libre de nuevo Abierto
    • ¿Algo no está bien?

    Dificultad 4/5 3-5 días Aptitud para principiantes 45/100

    NVIDIA/garak#1808 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • feature: detector filters in run.spec
    Abierto
    • ¿Algo no está bien?
    cli needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 48/100

    NVIDIA/garak#1789 ·

    Los mantenedores suelen responder en 1 día

  • dan.DanInTheWild: 85 templates still contain [INSERT PROMPT HERE]; "send me the actual prompt" replies are scored as jailbreak hits
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    bug needs-triage

    NVIDIA/garak#2341 · 1 reacción · 1 asignado ·

    Los mantenedores suelen responder en 1 día

  • openai: keep finish_reason / refusal on empty completions so content_filter blocks are visible in the report
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    architecture generators

    Dificultad 3/5 1-2 días Aptitud para principiantes 35/100

    NVIDIA/garak#2340 · 4 comentarios · 1 reacción ·

    Los mantenedores suelen responder en 1 día

  • judge.Jailbreak: falls back to probe-level goal as the REQUEST, so the judge never sees the actual harmful prompt (phrasing.PastTense etc.)
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    bug needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 72/100

    NVIDIA/garak#2339 · 3 comentarios ·

    Los mantenedores suelen responder en 1 día

  • Community contribution wanted: open model for Jev-style detection
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    detectors

    Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100

    NVIDIA/garak#2333 · 1 comentario ·

    Los mantenedores suelen responder en 1 día

  • LiteLLM generator doesn't back off on rate limits, timeouts or connection errors
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 2/5 1-3 horas Aptitud para principiantes 35/100

    NVIDIA/garak#2330 ·

    Los mantenedores suelen responder en 1 día

  • Translation pipeline lowercases text and strips commas and colons, so translated runs score refusals as jailbreaks
    Posiblemente ocupada Abierto
    • ¿Algo no está bien?
    needs-triage

    Dificultad 3/5 1-2 días Aptitud para principiantes 78/100

    NVIDIA/garak#2329 · 2 comentarios ·

    Los mantenedores suelen responder en 1 día

Mostrando los 100 más recientes

Esta página solo lista lo indexado más recientemente. El filtro avanzado tiene el inventario completo, acotado por lenguaje, dificultad y duración.

Abrir el filtro avanzado

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.