neulab/prompt2model

Create integration tests for our prompt2model_demo.py and .ipynb workflows

Open

#375 aberto em 31 de out. de 2023

Ver no GitHub
 (0 comments) (0 reactions) (1 assignee)Python (137 forks)batch import
enhancementgood first issue

Métricas do repositório

Stars
 (1.663 stars)
Métricas de merge de PR
 (Nenhuma PRs mesclada em 30d)

Description

We currently have interfaces to interact with prompt2model, in the form of prompt2model_demo.py and prompt2model_demo.ipynb. While the individual components of prompt2model are generally well-tested, these two files are completely untested.

We need integration tests ASAP to prevent the breaking of these files (such as happened after merging #315 and #344).

Guia do colaborador

Direção de pesquisa
Esta issue solicita testes de integração para prompt2model demo.py e prompt2model demo.ipynb para evitar falhas futuras. Devo examinar os arquivos de demonstração para entender o fluxo de trabalho e os padrões dos testes unitários existentes (por exemplo, no diretório tests/). Precisarei configurar um ambiente de teste que execute a demonstração de ponta a ponta, talvez usando modelos simulados para evitar tempo de execução longo, e garantir que os testes cubram cenários que anteriormente quebraram devido aos PRs #315 e #344. O objetivo é criar um arquivo de teste (por exemplo, test demo.py) com pytest que valide a saída da demonstração para entradas de exemplo.
Pilha de tecnologia
python
Domain
backendtesting
Tipo Issue
Teste
DifficultyDificuldade de implementação estimada para um novo contribuidor, de 1 para alterações muito pequenas a 5 para trabalho de nível especializado.
2
Tempo estimadoUm intervalo de tempo aproximado para um colaborador experiente investigar, implementar, testar e preparar um pull request.
1-3 horas
Status da atividadeQuão disponível o issue aparece agora: novo, ativo, obsoleto, bloqueado ou aguardando entrada do mantenedor.
Ativo
ClarityCom que clareza o issue explica a mudança esperada, os critérios de aceitação e a próxima etapa.
Claro
Prerequisites
Pythonpytest
Simpatia para novatosUma pontuação de 1 a 100 que estima o quão acessível este issue é para colaboradores iniciantes.
65