Big accuracy drop after simplify

Abierto

#12 abierto el 31/1/2023 8 comentarios 0 reacciones 2 asignados Ver en GitHub

@AndreaBrg ya está trabajando en esto.

Desde el 13/2/2023.

Evaluación

Este issue todavía no se ha evaluado.

Descripción

bug

Hi guys, congrats for the work, nice library.

I am trying to use Simplify with ResNet on CIFAR-100 dataset. I use prune.ln_structured method from Pytorch with amount value is 0.8 and then apply simplify and do fine-tune of the model. As a result I have got the inference time speed up by two times. But I have big accuracy drop: 75% accuracy before prune.ln_structured + simplify + fine-tune and 65% after prune.ln_structured + simplify + fine-tune. Is it expected result? Have you checked accuracy before and after simplify in your cases?

Lenguaje dominante: Python
Estrellas: 36
Forks: 3
Métricas de merge de PR: Sin PR fusionados en 30 d

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Primeros pasos

Lee el issue completo y luego la guía de contribución del proyecto.
Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
Haz un fork del repositorio y trabaja en una rama.
Abre un pull request que haga referencia al número del issue.

Más de EIDOSLAB/simplify

Supporting non-vision models Abierto

Dificultad 5/5 Más de una semana Aptitud para principiantes 25/100

EIDOSLAB/simplify#18 · 2 comentarios · Abierto el 5/5/2025
Make into Conda package Abierto

Dificultad 3/5 1-2 días Aptitud para principiantes 25/100

EIDOSLAB/simplify#15 · 1 comentario · Abierto el 25/7/2024
Not work for Swin_T model Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

EIDOSLAB/simplify#14 · Abierto el 2/8/2023
Accuracy drop after simplify Abierto

Dificultad 4/5 3-5 días Aptitud para principiantes 25/100

EIDOSLAB/simplify#13 · 5 comentarios · Abierto el 5/5/2023

Todos los issues de EIDOSLAB/simplify

Issues similares

[Bug]: repeated memory selections consume the distinct-file retrieval budget Abierto

triage/confirmed

Dificultad 2/5 1-3 horas Aptitud para principiantes 88/100

agentscope-ai/agentscope#2775 · Abierto el 22/9/2026
Bug: Opening a session restores old scroll position instead of showing the latest messages Abierto

comp/desktop P3 type/bug

Dificultad 1/5 Menos de una hora Aptitud para principiantes 92/100

NousResearch/hermes-agent#118866 · Abierto el 22/9/2026
Resize volume API validation errors are not displayed in the UI Abierto

bug

Dificultad 1/5 Menos de una hora Aptitud para principiantes 90/100

apache/cloudstack#14222 · Abierto el 22/9/2026
PSBT inputs finalized by Bitcoin Core are not considered complete Abierto

Dificultad 2/5 1-3 horas Aptitud para principiantes 76/100

spesmilo/electrum#10986 · Abierto el 22/9/2026
`rfdetr.export.benchmark` always crashes unless `--disable_eval` is passed Abierto

bug

Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100

roboflow/rf-detr#1501 · Abierto el 22/9/2026

Más issues de Python