Proprietario
yashwanthdevavarapu
1 repository indicizzato · Vedi su GitHub
-
bitsmith
LLM weight quantization from first principles: INT8, INT4, FP8, ternary, 2:4 sparsity, GPTQ, AWQ, SmoothQuant and a fused Triton INT4 kernel
Python · 0 stelle
Le issue su cui forse qualcuno sta già lavorando sono in fondo alla lista. Ordina tutto per data
-
Benchmark a 7B modelApertaarea: benchmarks enhancement help wanted
Difficoltà 4/5 3-5 giorni Idoneità per principianti 45/100
-
area: calibration enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100
-
area: models enhancement help wanted
Difficoltà 4/5 3-5 giorni Idoneità per principianti 58/100
-
KV-cache quantizationApertaarea: formats enhancement help wanted
Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100
-
area: formats enhancement
Difficoltà 4/5 3-5 giorni Idoneità per principianti 58/100
-
area: formats enhancement
Difficoltà 4/5 3-5 giorni Idoneità per principianti 65/100
-
Add an NF4 codecApertaarea: formats enhancement help wanted
Difficoltà 3/5 1-2 giorni Idoneità per principianti 75/100
-
area: calibration enhancement performance
Difficoltà 4/5 3-5 giorni Idoneità per principianti 48/100
-
Tune the INT4 prefill GEMMApertaarea: kernels enhancement performance
Difficoltà 4/5 3-5 giorni Idoneità per principianti 55/100
-
area: kernels enhancement help wanted performance
Difficoltà 4/5 3-5 giorni Idoneità per principianti 53/100
-
area: kernels enhancement performance
Difficoltà 5/5 Più di una settimana Idoneità per principianti 42/100
-
area: kernels enhancement help wanted performance
Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100
-
area: benchmarks good first issue help wanted
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
-
area: benchmarks good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
-
area: benchmarks good first issue performance
Difficoltà 3/5 1-2 giorni Idoneità per principianti 76/100
-
documentation good first issue
Difficoltà 4/5 3-5 giorni Idoneità per principianti 52/100
-
area: cli area: formats good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 92/100
-
area: cli good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
-
area: benchmarks good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 90/100