neulab/prompt2model

Create integration tests for our prompt2model_demo.py and .ipynb workflows

Open

#375 aperta il 31 ott 2023

Vedi su GitHub
 (0 commenti) (0 reazioni) (1 assegnatario)Python (137 fork)batch import
enhancementgood first issue

Metriche repository

Star
 (1663 star)
Metriche merge PR
 (Nessuna PR mergiata in 30 g)

Descrizione

We currently have interfaces to interact with prompt2model, in the form of prompt2model_demo.py and prompt2model_demo.ipynb. While the individual components of prompt2model are generally well-tested, these two files are completely untested.

We need integration tests ASAP to prevent the breaking of these files (such as happened after merging #315 and #344).

Guida contributor

Direzione di ricerca
Questa issue richiede test di integrazione per prompt2model demo.py e prompt2model demo.ipynb per prevenire future interruzioni. Dovrei esaminare i file demo per comprendere il flusso di lavoro e i modelli dei test unitari esistenti (ad esempio nella directory tests/). Dovrò configurare un ambiente di test che esegua la demo end to end, magari utilizzando modelli mock per evitare lunghi tempi di esecuzione, e assicurarmi che i test coprano scenari che in precedenza si sono interrotti a causa delle PR #315 e #344. L'obiettivo è creare un file di test (ad esempio test demo.py) con pytest che convalidi l'output della demo per input di esempio.
Tech stack
python
Dominio
backendtesting
Tipo issue
Test
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
2
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
1-3 ore
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Chiara
Prerequisiti
Pythonpytest
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
65