pytorch/text

Adding vocab to field object

Open

#378 aperta il 8 set 2018

Vedi su GitHub
 (12 commenti) (1 reazione) (0 assegnatari)Python (822 fork)batch import
enhancementhelp wanted

Metriche repository

Star
 (3396 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

Hi Everyone,

Is there any way of adding more vocabulary to a Field object that already has had its vocab built?

for example if at one point I have run this sort of code:

TEXT = field()
TEXT.build_vocab(dataset_a)

Is it possible to add vocab to TEXT from another dataset without erasing the current vocab built from dataset_a?

Thanks!

Guida contributor

Direzione di ricerca
Esamina i metodi della classe Vocab come `extend` o `append`; in alternativa, considera la creazione di un nuovo vocabolario da dati combinati usando `build vocab from iterator`.
Tech stack
python
Dominio
machine learning
Tipo issue
Ricerca
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Pythontorchtext
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
60