no data limit when using to_frame

Aberta
#127 2 comentários 0 reações 0 responsáveis Ver no GitHub

Ninguém assumiu esta issue ainda.

Avaliação

Dificuldade
3/5
Tempo estimado
1-2 dias
Facilidade para iniciantes
35/100
Tipo de issue
Bug
Clareza
Razoavelmente clara
Status de atividade
Estagnada
Stack de tecnologia
python
Domínio
data

Direção de pesquisa

Comece rastreando o método to_frame e como ele lê swat.options.cas.dataset.max_rows_fetched; em seguida, compare esse caminho com to_csv ou com um método de plotting em que o limite já seja aplicado. A tarefa estará concluída quando tabelas CAS grandes respeitarem o limite de linhas configurado ao serem convertidas em um DataFrame, sem transferir a tabela inteira nem disparar o erro de servidor relatado.

Escrita pelo modelo de indexação a partir do texto da issue.

Descrição

When you use to_methods like to_csv, or any of the plotting methods on a CAS table the swat.options.cas.dataset.max_rows_fetched options limits to the default of 10,000. This makes sense to prevent you from pulling an extremely large table to the client.

However, when I use the to_frame method the option does not take effect and CAS attempts to transfer the entire CAS table to the client into a DataFrame. When the table is large it causes the following error:

SWATError: Unable to connect to any URL in the list

Which causes my CAS server to reset and removes all promoted CAS tables. Seems like the data limit should apply to the to_frame method as well.

Linguagem predominante
Python
Estrelas
159
Forks
66
Métricas de merge de PRs
Nenhum PR com merge em 30d

Preparar o ambiente

Primeiros passos

  1. Leia a issue inteira e depois o guia de contribuição do projeto.
  2. Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
  3. Faça um fork do repositório e trabalhe em uma branch.
  4. Abra um pull request que referencie o número da issue.

Mais de sassoftware/python-swat

Todas as issues de sassoftware/python-swat

Issues semelhantes

Mais issues de Python

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.