Proprietario

deeppavlov

2 repository indicizzati · Vedi su GitHub

AutoIntent
Automated machine learning for text classification

Python · 54 stelle
mcp-evals
Evaluation framework for testing LLM agents' ability to use MCP tools

Python · 1 stella

Adatte ai principianti Tutto

Aperta Tutte

Extract `BaseAPIDescriptionScorer` shared by `LLMDescriptionScorer` and `TypeSafeDescriptionScorer` Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

deeppavlov/AutoIntent#357 · Aperta il 19/9/2026
Advisor treats `description_llm` / `description_typesafe` as embedder consumers and estimates no API cost for them Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100

deeppavlov/AutoIntent#356 · Aperta il 19/9/2026
`LLMDescriptionScorer` prompt puts the utterance before the descriptions, defeating provider prefix caching Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 72/100

deeppavlov/AutoIntent#355 · Aperta il 19/9/2026
`LLMDescriptionScorer` runs cache hits through the `max_per_second` limiter — 10 s per 100 cached utterances Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 58/100

deeppavlov/AutoIntent#354 · Aperta il 19/9/2026
API scorers: `predict()` fails inside a running event loop; `LLMDescriptionScorer` leaks an unclosed loop per instance on Python 3.14 Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100

deeppavlov/AutoIntent#353 · Aperta il 19/9/2026
`OptimizationConfig.seed` is `PositiveInt` — `seed=0` is rejected while `Pipeline(seed=0)` accepts it Aperta

bug good first issue

Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100

deeppavlov/AutoIntent#352 · Aperta il 19/9/2026
`Generator` lets `openai.APIStatusError` escape → one HTTP 4xx/5xx call aborts the whole `description_llm` run Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 42/100

deeppavlov/AutoIntent#351 · Aperta il 19/9/2026
Cache writes are not atomic (embeddings + structured outputs) → an interrupted/concurrent write poisons future reads Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

deeppavlov/AutoIntent#335 · Aperta il 22/6/2026
BertScorer multilabel fine-tuning collapses on sparse data (no pos_weight/focal, no warmup, brittle default LR) Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

deeppavlov/AutoIntent#324 · Aperta il 20/6/2026
BertScorer early-stopping default (scoring_f1@0.5) collapses on sparse multilabel Aperta

Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100

deeppavlov/AutoIntent#323 · Aperta il 20/6/2026
Upgrade transformers to 5.x (drops conftest mistral monkey-patch) Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100

deeppavlov/AutoIntent#295 · Aperta il 5/6/2026
AssetOpsBench Aperta

Difficoltà 5/5 Più di una settimana Idoneità per principianti 25/100

deeppavlov/mcp-evals#32 · 2 commenti · 2 reazioni · Aperta il 11/5/2026
Устройство dump и load у Embedder и VectorIndex Aperta

enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 15/100

deeppavlov/AutoIntent#265 · Aperta il 20/9/2025
Early stopping does work with lora. Probably Aperta

enhancement

Difficoltà 1/5 Meno di un'ora Idoneità per principianti 25/100

deeppavlov/AutoIntent#264 · 1 commento · Aperta il 13/9/2025
Проблема с удалением артефактов (?) в _optimization_info.py Aperta

bug

Difficoltà 4/5 3-5 giorni Idoneità per principianti 35/100

deeppavlov/AutoIntent#262 · 1 commento · Aperta il 28/8/2025
Newer sentence-transformers support Aperta

enhancement

Difficoltà 1/5 Meno di un'ora Idoneità per principianti 45/100

deeppavlov/AutoIntent#245 · Aperta il 2/7/2025
Add micro, weighted metrics Aperta

enhancement

Difficoltà 3/5 1-2 giorni Idoneità per principianti 30/100

deeppavlov/AutoIntent#217 · Aperta il 22/5/2025
Add logger message for setting EmbedderConfig Aperta

enhancement

Difficoltà 2/5 1-3 ore Idoneità per principianti 45/100

deeppavlov/AutoIntent#213 · Aperta il 22/5/2025
sampler option for each module Aperta

enhancement

Difficoltà 4/5 3-5 giorni Idoneità per principianti 42/100

deeppavlov/AutoIntent#193 · 1 commento · Aperta il 2/5/2025
Args name in signature and documentation mismatch Aperta

documentation

Difficoltà 3/5 1-2 giorni Idoneità per principianti 35/100

deeppavlov/AutoIntent#99 · Aperta il 20/1/2025
Pooling methods for cross-encoder Aperta

enhancement

Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100

deeppavlov/AutoIntent#92 · Aperta il 11/1/2025

deeppavlov

Ricevi le nuove issue nella tua casella