Proprietario

Giskard-AI

7 repository indicizzati · Vedi su GitHub

giskard-oss
🐢 Open-Source Evaluation & Testing library for LLM Agents

Python · 5829 stelle
giskard-hub-python
The official Python SDK for the Giskard Hub API

Python · 5 stelle
flare
Phare Benchmark Runner

Python · 4 stelle
giskard-docs
Giskard Documentation

Jupyter Notebook · 3 stelle
stereotales-pipeline
Pipeline to generate StereoTales dataset, find the stereotypes and evaluate harmfulness from LLMs

Python · 0 stelle
stereotales-human-study
Web app to run the human study of StereoTales

TypeScript · 0 stelle
docker-images

Shell · 0 stelle

Adatte ai principianti Tutto

Aperta Tutte

garak adapter grades a NaN detector score as PASS Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100

Giskard-AI/giskard-oss#2840 · 1 commento · Aperta il 23/9/2026
ComparisonCheck returns a verdict when the resolved collection is empty Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 48/100

Giskard-AI/giskard-oss#2836 · 1 commento · Aperta il 21/9/2026
Dependency Dashboard Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

Giskard-AI/stereotales-human-study#28 · Aperta il 11/9/2026
Dependency Dashboard Aperta

Difficoltà 1/5 Meno di un'ora Idoneità per principianti 15/100

Giskard-AI/stereotales-pipeline#11 · Aperta il 10/9/2026
OpenAI-compat: configure base_url plus acompletion openai/<id>, not a bare model id Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

Giskard-AI/giskard-oss#2807 · 1 commento · Aperta il 28/8/2026
GenerationParams silently drops unsupported fields (e.g. api_base) instead of raising Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 76/100

Giskard-AI/giskard-oss#2802 · 1 commento · Aperta il 26/8/2026
docs(oss): onboarding audit — first run is blocked by wrong install commands, a nonexistent model id, and fabricated API Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

Giskard-AI/giskard-docs#206 · 1 commento · Aperta il 24/8/2026
SEO: resolve Ubersuggest site audit findings for docs.giskard.ai Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

Giskard-AI/giskard-docs#204 · 1 commento · Aperta il 24/8/2026
StringMatching and RegexMatching pass unconditionally when the keyword or pattern is empty Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100

Giskard-AI/giskard-oss#2785 · 1 commento · Aperta il 21/8/2026
feat(checks): add a safe run_sync() convenience method Aperta

enhancement good first issue Scope: Checks

Difficoltà 4/5 3-5 giorni Idoneità per principianti 68/100

Giskard-AI/giskard-oss#2782 · 1 commento · Aperta il 20/8/2026
last_interaction_index misattributes steps that add no interactions Aperta

bug on hold

Difficoltà 3/5 1-2 giorni Idoneità per principianti 42/100

Giskard-AI/giskard-oss#2736 · 2 commenti · Aperta il 12/8/2026
detect-secrets is not enforced in CI and the baseline is unaudited Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 56/100

Giskard-AI/giskard-oss#2735 · 1 commento · Aperta il 12/8/2026
Adopt changelog tooling before the RC Aperta

documentation

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

Giskard-AI/giskard-oss#2733 · 1 commento · Aperta il 12/8/2026
Add a SARIF exporter for GitHub code scanning Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

Giskard-AI/giskard-oss#2716 · 1 commento · Aperta il 10/8/2026
Feature request: EvalPort import/export for Suites and Scenarios Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

Giskard-AI/giskard-oss#2712 · 2 commenti · Aperta il 9/8/2026
ci: make integration tests more frugal Aperta

Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100

Giskard-AI/giskard-oss#2695 · 2 commenti · Aperta il 3/8/2026
feat(checks): aggregate LLM token usage on SuiteResult Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

Giskard-AI/giskard-oss#2671 · 1 commento · Aperta il 29/7/2026
feat(scan): generation progress and quiet mode on scan helpers Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

Giskard-AI/giskard-oss#2670 · 1 commento · Aperta il 29/7/2026
feat(scan): stream or subsample datasets; avoid duplicate HarmBench loads Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

Giskard-AI/giskard-oss#2669 · 1 commento · Aperta il 29/7/2026
docs: standardize public API docstrings on NumPy style Aperta

documentation

Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

Giskard-AI/giskard-oss#2668 · 1 commento · Aperta il 29/7/2026
feat(checks): checkpoint and resume long-running evals (parallel-safe) Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100

Giskard-AI/giskard-oss#2657 · 1 commento · Aperta il 29/7/2026
Improve check information returned on Suite Result report Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 70/100

Giskard-AI/giskard-oss#2521 · 1 commento · Aperta il 5/6/2026
Feature request: OWASP LLM02 output-handling detectors pack (XSS / SQLi / Shell / Path) Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 42/100

Giskard-AI/giskard-oss#2454 · 7 commenti · Aperta il 15/5/2026
Add built-in retrieval quality checks Aperta

checks

Difficoltà 5/5 Più di una settimana Idoneità per principianti 38/100

Giskard-AI/giskard-oss#2445 · 1 commento · Aperta il 11/5/2026
Add Agent Threat Rules (ATR) check pack to giskard-checks Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 38/100

Giskard-AI/giskard-oss#2441 · 1 commento · Aperta il 10/5/2026
Feature request: optional verbosity during Suite.run (per check / per generation) Aperta

Giskard-AI/giskard-oss#2421 · 4 commenti · 1 assegnatario · Aperta il 20/4/2026
giskard-checks: add Trace.steps() helper for step-based interaction grouping Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100

Giskard-AI/giskard-oss#2419 · 1 commento · Aperta il 20/4/2026
Dependency Dashboard Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100

Giskard-AI/giskard-docs#37 · Aperta il 31/3/2026
Add `ContextRelevance` check Aperta

enhancement

Giskard-AI/giskard-oss#2339 · 1 commento · 1 assegnatario · Aperta il 26/3/2026
Allow to have live console outputs when running suites Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

Giskard-AI/giskard-oss#2324 · 1 commento · Aperta il 24/3/2026
Dependency Dashboard Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 10/100

Giskard-AI/giskard-oss#2255 · Aperta il 17/2/2026
Dependency Dashboard Aperta

Difficoltà 3/5 1-2 giorni Idoneità per principianti 20/100

Giskard-AI/giskard-hub-python#5 · Aperta il 20/1/2026
Dependency Dashboard Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 15/100

Giskard-AI/flare#1 · Aperta il 27/10/2025
Dependency Dashboard Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 20/100

Giskard-AI/docker-images#4 · Aperta il 19/9/2024

Giskard-AI

Ricevi le nuove issue nella tua casella