minimax Ref2V 训练报错问题
Les mainteneurs répondent en général sous 1 jour
Évaluation
- Difficulté
- 3/5
- Temps estimé
- 1-2 jours
- Accessibilité débutants
- 48/100
- Type d'issue
- Bug
- Clarté
- Plutôt claire
- Activité
- Active
- Stack technique
- python
- Domaine
- machine-learning
Piste de recherche
Start with examples/minimax_h3/model_training/train.py and trace the Adapter training setup into diffsynth/diffusion/training_module.py, diffsynth/diffusion/base_pipeline.py, and diffsynth/utils/lora/general.py, where the reported tensor shape mismatch occurs during LoRA fusion. Reproduce the Ref2V training error and inspect the involved model and adapter weight shapes; done when Adapter training proceeds past LoRA fusion without the size mismatch.
Rédigé par le modèle d'indexation à partir du texte de l'issue.
Description
File "/mnt/workspace/yangxin/yangxin_file/DiffSynth-Studio/examples/minimax_h3/model_training/train.py", line 62, in init
[dlcl7pmobknpjy8d-master-0] [rank6]: self.switch_pipe_to_training_mode(
[dlcl7pmobknpjy8d-master-0] [rank6]: File "/mnt/workspace/yangxin/yangxin_file/DiffSynth-Studio/diffsynth/diffusion/training_module.py", line 282, in switch_pipe_to_training_mode
[dlcl7pmobknpjy8d-master-0] [rank6]: pipe.load_lora(getattr(pipe, preset_lora_model), preset_lora_path)
[dlcl7pmobknpjy8d-master-0] [rank6]: File "/mnt/workspace/yangxin/yangxin_file/DiffSynth-Studio/diffsynth/diffusion/base_pipeline.py", line 288, in load_lora
[dlcl7pmobknpjy8d-master-0] [rank6]: lora_loader.fuse_lora_to_base_model(module, lora, alpha=alpha)
[dlcl7pmobknpjy8d-master-0] [rank6]: File "/mnt/workspace/yangxin/yangxin_file/DiffSynth-Studio/diffsynth/utils/lora/general.py", line 67, in fuse_lora_to_base_model
[dlcl7pmobknpjy8d-master-0] [rank6]: state_dict_base["weight"] = state_dict_base["weight"].to(device=self.device, dtype=self.torch_dtype) + weight_lora
[dlcl7pmobknpjy8d-master-0] [rank6]: ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^~~~~~~~~~~~~
[dlcl7pmobknpjy8d-master-0] [rank6]: RuntimeError: The size of tensor a (0) must match the size of tensor b (5376) at non-singleton dimension 1
在使用Adapter训练Ref2V时候出现了报错，请问下，这个问题目前有解决吗
- Langage dominant
- Python
- Étoiles
- 13.3k
- Forks
- 1.3k
- Merge moyen
- 1 j 14 h
- PR mergées (30 j)
- 43
Préparer son environnement
Ce projet ne fournit ni conteneur de développement, ni Dockerfile, ni guide de contribution : l'installation est à votre charge. Commencez par son README, et consultez notre guide de la première contribution pour les étapes générales.
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Autres issues de modelscope/DiffSynth-Studio
-
Partial download surfaces as "Cannot detect the model type" rather than a download errorPeut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte
Difficulté 1/5 1-3 heures Accessibilité débutants 78/100
modelscope/DiffSynth-Studio#1668 ·
Les mainteneurs répondent en général sous 1 jour
-
bfloat16训练时段错误: 数组越界的一种方案Peut-être à nouveau libre Une pull request pour cette issue a été fermée sans être fusionnée. Ouverte
Difficulté 2/5 1-3 heures Accessibilité débutants 72/100
modelscope/DiffSynth-Studio#1499 · 1 commentaire ·
Les mainteneurs répondent en général sous 1 jour
-
Latest update broke Wan2.2 S2VOuverte
Difficulté 1/5 Moins d'une heure Accessibilité débutants 78/100
modelscope/DiffSynth-Studio#1373 · 5 commentaires · 1 réaction ·
Les mainteneurs répondent en général sous 1 jour
-
OPD做步数蒸馏的疑问Ouverte
Difficulté 4/5 3-5 jours Accessibilité débutants 30/100
modelscope/DiffSynth-Studio#1786 · 8 commentaires ·
Les mainteneurs répondent en général sous 1 jour
-
wan animate2 int8量化训练支持Ouverte
Difficulté 5/5 Plus d'une semaine Accessibilité débutants 25/100
modelscope/DiffSynth-Studio#1785 ·
Les mainteneurs répondent en général sous 1 jour
Toutes les issues de modelscope/DiffSynth-Studio
Issues similaires
-
Difficulté 2/5 1-3 heures Accessibilité débutants 79/100
aws-samples/sample-per-model-bedrock#639 ·
Les mainteneurs répondent en général sous 1 jour
-
bug
Difficulté 1/5 Moins d'une heure Accessibilité débutants 86/100
awslabs/visual-asset-management-system#937 ·
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 62/100
Les mainteneurs répondent en général sous 1 jour
-
Difficulté 2/5 1-3 heures Accessibilité débutants 79/100
project-codeflare/codeflare-sdk#1195 ·
Les mainteneurs répondent en général sous 1 jour
-
Bump numpy dependencyOuverte
Difficulté 2/5 1-3 heures Accessibilité débutants 65/100
pandas-dev/pandas-stubs#2051 ·
Les mainteneurs répondent en général sous 1 jour