Delegate the LLMDetector native path to GenerativeDetector
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 45/100
Direzione di ricerca
Start with lettucedetect/detectors/llm.py around _predict_native and the native branches in predict*, then read the GenerativeDetector constructor and GenerativeConfig mapping. Run uv run --extra dev pytest tests/test_llm_detector_pytest.py tests/test_golden_llm_pytest.py -q after blockers #164 and #161 are resolved. Done means native outputs match the #129 fixtures with span confidence set to 1.0, and native detection logic is no longer duplicated in LLMDetector.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Parent: #162 · Epic: #126 · Blocked by: #164, #161
Branch from stateless_core; open the PR against it.
Problem
Until the native path of LLMDetector runs through GenerativeDetector, there are two implementations of it.
Current behavior
lettucedetect/detectors/llm.py:437_predict_nativeand the native branch inpredict*(:533-625).
Steps
- When
self.nativeis true, build aGenerativeDetectorfrom the constructor arguments (map toGenerativeConfig) and convert itsDetectioninto today's dicts inpredict,predict_prompt,predict_prompt_batch. - Keep
_predict_nativeas a thin wrapper if existing tests call it. - The choice between judge and generative stays in
LLMDetector(_looks_nativeornative=); no other code decides by name.
Acceptance criteria
-
predict*native output equals the #129 native fixtures except spans now carryconfidence1.0. - Existing tests pass unchanged; no native-path logic remains duplicated on
LLMDetector.
Start here
uv run --extra dev pytest tests/test_llm_detector_pytest.py tests/test_golden_llm_pytest.py -q
- Lingua principale
- Python
- Stelle
- 615
- Fork
- 60
- Merge medio
- 1g 8h
- PR unite (30g)
- 10
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di KRLabsOrg/LettuceDetect
-
Stop-hook --min-confidence drops every --llm-model span (missing confidence treated as 0.0), reporting hallucinated answers as cleanForse già presa @Clannad47 l’ha presa 18 giorni fa. Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
KRLabsOrg/LettuceDetect#117 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
enhancement
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 85/100
KRLabsOrg/LettuceDetect#108 ·
I maintainer di solito rispondono entro 1 giorno
-
documentation
Difficoltà 2/5 Mezza giornata Idoneità per principianti 70/100
KRLabsOrg/LettuceDetect#104 ·
I maintainer di solito rispondono entro 1 giorno
-
ready-for-agent
Difficoltà 3/5 1-2 giorni Idoneità per principianti 68/100
KRLabsOrg/LettuceDetect#181 ·
I maintainer di solito rispondono entro 1 giorno
-
ready-for-agent
Difficoltà 5/5 Più di una settimana Idoneità per principianti 22/100
KRLabsOrg/LettuceDetect#180 ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di KRLabsOrg/LettuceDetect
Issue simili
-
LLVM versionsAperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 67/100
I maintainer di solito rispondono entro 1 giorno
-
Translate docs/ to SpanishApertadocumentation good first issue language
Difficoltà 2/5 1-3 ore Idoneità per principianti 91/100
-
good first issue help wanted translation
Difficoltà 2/5 1-3 ore Idoneità per principianti 75/100
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
I maintainer di solito rispondono entro 1 giorno
-
Fix duplicated word in speculative decoding docsForse già presa @ddlw l’ha presa oggi. Apertacommunity-request
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 89/100
NVIDIA/Megatron-LM#9118 ·
I maintainer di solito rispondono entro 2 giorni