Reservoir Sampling's sample size accepts a value below 1

Aberta Para iniciantes
#9,506 0 comentários 0 reações 0 responsáveis Ver no GitHub

Mantenedores costumam responder em até 1 dia

Ninguém assumiu esta issue ainda.

Avaliação

Dificuldade
2/5
Tempo estimado
1-3 horas
Facilidade para iniciantes
75/100
Tipo de issue
Bug
Clareza
Claramente especificada
Status de atividade
Ativa
Stack de tecnologia
scala
Domínio
backend

Direção de pesquisa

Encontre a declaração do esquema de Reservoir Sampling e localize a propriedade k. Leia como as propriedades Limit e Offset das varreduras de arquivos declaram seu valor mínimo na alteração referenciada como #8514 e aplique o mesmo limite de esquema a k. Consulte a página de referência do operador e confirme que o formulário rejeita valores menores que 1 e que o valor padrão aparece como não especificado.

Escrita pelo modelo de indexação a partir do texto da issue.

Descrição

Task Summary

Reservoir Sampling's one property, the sample size k ("Number of item sampled in reservoir sampling"), has no lower bound in its schema. So the property editor accepts 0 or a negative number and enables Run.

A sample size below 1 is never valid. The engine refuses it at the first row, but a refused row pauses the worker rather than failing the run, so Reservoir Sampling stays Running until the run is killed. A new operator starts with k empty, and the required check already blocks Run; it is a typed 0 or a negative number that gets through.

Declaring minimum: 1 on k (@JsonSchemaInject(json = """{"minimum": 1}"""), as #8514 did for the file scans' Limit and Offset) makes the form refuse the value. The editor then shows "Invalid Workflow" instead of starting a run that hangs. A k from the API, an imported workflow or a loop variable still reaches the engine, whose refusal covers it. The operator's reference page lists the default as 0, which the schema doesn't declare; it becomes "-" with "(min: 1)".

This is a bound on the form; no operator's behaviour changes.

Found while verifying the fix for #9503.

Task Type
  • Refactor / Cleanup
  • DevOps / Deployment / CI
  • Testing / QA
  • Documentation
  • Performance
  • Other
Linguagem predominante
Scala
Estrelas
333
Forks
202
Merge médio
3d 11h
PRs com merge (30d)
185

Preparar o ambiente

Primeiros passos

  1. Leia a issue inteira e depois o guia de contribuição do projeto.
  2. Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
  3. Faça um fork do repositório e trabalhe em uma branch.
  4. Abra um pull request que referencie o número da issue.

Mais de apache/texera

Todas as issues de apache/texera

Issues semelhantes

Mais issues de Scala

Receba novas issues na sua caixa de entrada

Um resumo curto de issues do GitHub para quem está começando.