facebookresearch/fairseq

Is there "Linear Transformer" Model in Fairseq.transformers ?

Open

#4872 aperta il 19 nov 2022

Vedi su GitHub
 (0 commenti) (0 reazioni) (0 assegnatari)Python (6224 fork)batch import
enhancementhelp wantedneeds triage

Metriche repository

Star
 (29.107 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

I am trying the baseline of linear transformer, is there a relevant implementation in fairseq?

Guida contributor

Direzione di ricerca
Controlla la documentazione ufficiale di Fairseq e il modello zoo per eventuali varianti di transformer. Se non ne trovi, suggerisci di guardare il codice sorgente in fairseq/models/ per qualsiasi implementazione di transformer lineare. Poiché il problema è una domanda, potrebbe essere necessario che un maintainer risponda.
Tech stack
pythonpytorch
Dominio
machine learningai
Tipo issue
Ricerca
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
1
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Meno di 1 ora
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Nessuno
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
90