NVIDIA/garak
the LLM vulnerability scanner
NVIDIA/garak 对新手友好吗?
近 30 天,NVIDIA/garak 合并了外部贡献者提交的 66 个 PR 中的 10 个,维护者通常 1 天内回复。 目前有 17 个适合新手的 issue 开放。
- 星标
- 9.6k
- 派生
- 1.4k
- 开放的新手 issue
- 17
- 已索引 issue
- 305
- 平均合并
- 5 天 15 小时
- 30 天内合并 PR
- 14
如何为 NVIDIA/garak 做贡献
可能已有人在做的 issue 排在最后。 全部按时间排序
-
needs-triage
难度 2/5 1-3 小时 新手友好度 68/100
维护者通常 1 天内回复
-
needs-triage
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 1 天内回复
-
needs-triage
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 1 天内回复
-
needs-triage
难度 4/5 1-2 天 新手友好度 54/100
维护者通常 1 天内回复
-
needs-triage
难度 2/5 1-3 小时 新手友好度 88/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 25/100
维护者通常 1 天内回复
-
detectors: dra default is too brittle可能重新可做 @nizba06 于 9 天前认领,目前没有进行中的 PR。 未关闭detectors
难度 3/5 1-2 天 新手友好度 58/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 38/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
needs-triage
难度 3/5 1-2 天 新手友好度 45/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 38/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 28/100
维护者通常 1 天内回复
-
needs-triage
难度 4/5 3-5 天 新手友好度 45/100
维护者通常 1 天内回复
-
Digest of an aggregated report scores each probe/detector pairing from one contributing run only可能重新可做 关联的 PR 已关闭且未合并。 未关闭needs-triage
难度 4/5 3-5 天 新手友好度 72/100
维护者通常 1 天内回复
-
Embodied probes: would garak take a detector that needs a simulator, or is that a separate tool?未关闭for-maintainers needs-triage question
难度 5/5 一周以上 新手友好度 25/100
维护者通常 1 天内回复
-
add reusable support for intent-aware iterative probes可能重新可做 @Nidhi-Satyapriya 于 34 天前认领,目前没有进行中的 PR。 未关闭needs-triage
难度 5/5 一周以上 新手友好度 45/100
维护者通常 1 天内回复
-
probe: reasoning theft attack可能重新可做 @Ria-jay 于 21 天前认领,目前没有进行中的 PR。 未关闭new plugin probes
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
AgentBreakerResult accepts out-of-schema judge verdict values可能重新可做 关联的 PR 已关闭且未合并。 未关闭needs-triage
难度 3/5 1-2 天 新手友好度 76/100
维护者通常 1 天内回复
-
map euai: tags onto intents可能重新可做 @Nidhi-Satyapriya 于 34 天前认领,目前没有进行中的 PR。 未关闭needs-triage
难度 5/5 一周以上 新手友好度 45/100
维护者通常 1 天内回复
-
Bound generator retries to prevent indefinite hangs可能重新可做 @Entity0-1 于 45 天前认领,目前没有进行中的 PR。 未关闭architecture bug needs-triage
难度 3/5 1-2 天 新手友好度 68/100
维护者通常 1 天内回复
-
Migrate owasp:llmNN probe tags to year-qualified owasp:YYYY:llmNN format可能重新可做 @Nidhi-Satyapriya 于 34 天前认领,目前没有进行中的 PR。 未关闭
难度 4/5 3-5 天 新手友好度 45/100
维护者通常 1 天内回复
-
for-maintainers needs-triage question
难度 4/5 3-5 天 新手友好度 52/100
维护者通常 1 天内回复
-
Tool Surface Enumeration: Shared Recon Phase for Tool-Aware Probes可能重新可做 @svenchilton 于 43 天前认领,目前没有进行中的 PR。 未关闭architecture for-maintainers
NVIDIA/garak#2126 · 3 条评论 · 1 个 reaction · 已指派 1 人 ·
维护者通常 1 天内回复
-
analyze: uncorrected ASR intervals are indistinguishable from corrected ones (116 of 122 detectors)可能重新可做 @patriciapampanelli 于 57 天前认领,目前没有进行中的 PR。 未关闭needs-triage
NVIDIA/garak#2117 · 1 条评论 · 已指派 1 人 ·
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 38/100
维护者通常 1 天内回复
-
architecture for-maintainers
难度 5/5 一周以上 新手友好度 25/100
NVIDIA/garak#2106 · 4 个 reaction ·
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 30/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
needs-triage
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
needs-triage
难度 2/5 1-3 小时 新手友好度 25/100
维护者通常 1 天内回复
-
Azure model mapping and OpenAI context tables point at retired models可能重新可做 关联的 PR 已关闭且未合并。 未关闭needs-triage
难度 3/5 1-2 天 新手友好度 55/100
维护者通常 1 天内回复
-
feature: expand intent→detector mapping coverage可能重新可做 @uday-kasturi 于 68 天前认领,目前没有进行中的 PR。 未关闭detectors dontautoclose
难度 3/5 1-2 天 新手友好度 62/100
维护者通常 1 天内回复
-
A probe that yields zero attempts leaves no trace in report.jsonl, so "did not run" and "was never configured" are the same absence可能重新可做 关联的 PR 已关闭且未合并。 未关闭needs-triage question
难度 3/5 1-2 天 新手友好度 68/100
维护者通常 1 天内回复
-
cas: Techniques and Intents tab, By technique - detail level Grouped and detail level All leaves don't connect可能重新可做 @AbdaullahAG 于 89 天前认领,目前没有进行中的 PR。 未关闭reporting ux
难度 3/5 1-2 天 新手友好度 65/100
维护者通常 1 天内回复
-
probe: RAG / vector-store / agent-memory *sleeper* poisoning (retrieval-time latent injection)可能重新可做 @leondz 于 100 天前认领,目前没有进行中的 PR。 未关闭needs-triage
NVIDIA/garak#1950 · 3 条评论 · 1 个 reaction · 已指派 2 人 ·
维护者通常 1 天内回复
-
needs-triage
难度 4/5 3-5 天 新手友好度 35/100
维护者通常 1 天内回复
-
agent_breaker.AgentBreaker is mis-tagged owasp:llm07/owasp:llm08 (should be owasp:llm06)可能重新可做 关联的 PR 已关闭且未合并。 未关闭bug bug-verified
难度 2/5 1-3 小时 新手友好度 72/100
维护者通常 1 天内回复
-
pass@k for ASR未关闭
难度 4/5 3-5 天 新手友好度 48/100
维护者通常 1 天内回复
-
needs-triage
难度 4/5 3-5 天 新手友好度 25/100
维护者通常 1 天内回复
-
needs-triage
难度 4/5 3-5 天 新手友好度 52/100
维护者通常 1 天内回复
-
for-maintainers
难度 4/5 3-5 天 新手友好度 55/100
维护者通常 1 天内回复
-
needs-triage
难度 2/5 1-3 小时 新手友好度 52/100
NVIDIA/garak#1862 · 1 个 reaction ·
维护者通常 1 天内回复
-
expand intent support per payload file可能重新可做 @immu4989 于 101 天前认领,目前没有进行中的 PR。 未关闭
难度 4/5 3-5 天 新手友好度 45/100
维护者通常 1 天内回复
-
cli needs-triage
难度 3/5 1-2 天 新手友好度 48/100
维护者通常 1 天内回复
-
AnthropicGenerator stops on HTTP 529 overloaded_error instead of backing off可能已有人在做 @Varshith-Kali 今天认领。 未关闭needs-triage
难度 2/5 1-3 小时 新手友好度 72/100
维护者通常 1 天内回复
-
dan.DanInTheWild: 85 templates still contain [INSERT PROMPT HERE]; "send me the actual prompt" replies are scored as jailbreak hits可能已有人在做 @erickgalinkin 于 1 天前认领。 未关闭bug needs-triage
NVIDIA/garak#2341 · 1 个 reaction · 已指派 1 人 ·
维护者通常 1 天内回复
-
openai: keep finish_reason / refusal on empty completions so content_filter blocks are visible in the report可能已有人在做 @Varshith-Kali 于 1 天前认领。 未关闭architecture generators
难度 3/5 1-2 天 新手友好度 35/100
NVIDIA/garak#2340 · 4 条评论 · 1 个 reaction ·
维护者通常 1 天内回复
-
judge.Jailbreak: falls back to probe-level goal as the REQUEST, so the judge never sees the actual harmful prompt (phrasing.PastTense etc.)可能已有人在做 @akhil9tiet 于 1 天前认领。 未关闭bug needs-triage
难度 3/5 1-2 天 新手友好度 72/100
维护者通常 1 天内回复
-
Community contribution wanted: open model for Jev-style detection可能已有人在做 @gaurav6538 于 2 天前认领。 未关闭detectors
难度 5/5 一周以上 新手友好度 35/100
维护者通常 1 天内回复
-
LiteLLM generator doesn't back off on rate limits, timeouts or connection errors可能已有人在做 @Somay-kousis 于 4 天前认领。 未关闭needs-triage
难度 2/5 1-3 小时 新手友好度 35/100
维护者通常 1 天内回复
只显示最新的 100 条
这个页面只列出最近收录的部分。完整清单在高级筛选里,可以按语言、难度和预计耗时筛选。