bundle validate does not catch missing trigger.table_update.condition with multiple tables
Los mantenedores suelen responder en 1 día
Evaluación
- Dificultad
- 3/5
- Tiempo estimado
- 1-2 días
- Aptitud para principiantes
- 72/100
Línea de trabajo
Start at the bundle validation path for job trigger configuration and inspect how table_update.table_names and condition are validated; the issue does not name specific files or tests. Reproduce with the YAML configuration in the issue, then run the relevant bundle validation tests. Done when validation reports that multiple table names require ANY_UPDATED or ALL_UPDATED, while a single table remains valid without a condition.
Escrito por el modelo de indexación a partir del texto del issue.
Descripción
Describe the issue
databricks bundle validate accepts a job whose trigger.table_update lists more than one table but sets no condition. The Jobs API then rejects that job during databricks bundle deploy, after the files have already been uploaded:
Endpoint: POST https://<workspace>/api/2.2/jobs/create
HTTP Status: 400 Bad Request
API error_code: INVALID_PARAMETER_VALUE
API message: Invalid condition: it must be one of ANY_UPDATED, ALL_UPDATED when more than one table is defined
Error: cannot create resources.jobs.my_job.permissions: dependency failed: resources.jobs.my_job
condition is optional when there is one table and required when there are two or more. validate should report that, since it can be checked without calling the API.
Configuration
resources:
jobs:
my_job:
name: my_job
trigger:
pause_status: UNPAUSED
table_update:
# condition: ANY_UPDATED <- deploy only succeeds with this line
table_names:
- main.default.table_a
- main.default.table_b
wait_after_last_change_seconds: 60
tasks:
- task_key: t
notebook_task:
notebook_path: /Workspace/Shared/some_notebook
Steps to reproduce the behavior
- Add the job above to a bundle.
- Run
databricks bundle validate. It reportsValidation OK!. - Run
databricks bundle deploy. Job creation fails with the 400 above.
Expected Behavior
databricks bundle validate fails (or at least warns) that trigger.table_update.condition must be ANY_UPDATED or ALL_UPDATED when table_names has more than one entry.
Actual Behavior
Validation passes, and the problem only shows up during deploy, as an API error after files are uploaded.
OS and CLI version
- Databricks CLI v1.20.0
- Linux (WSL2)
- Azure Databricks workspace
Is this a regression?
Not known.
- Lenguaje dominante
- Go
- Estrellas
- 409
- Forks
- 253
- Merge medio
- 1 d 11 h
- PR fusionados (30 d)
- 212
Preparar el entorno
- Incluye un Dockerfile o un archivo de Docker Compose
- Tiene una plantilla de pull request
- Sin guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Más de databricks/cli
-
Apps commands only accept relative path to app.ymlPosiblemente ocupada @yuri-rod la tomó hace 16 días. AbiertoCLI
Dificultad 2/5 1-3 horas Aptitud para principiantes 82/100
databricks/cli#6910 ·
Los mantenedores suelen responder en 1 día
-
DABs
Dificultad 2/5 1-3 horas Aptitud para principiantes 68/100
databricks/cli#6670 ·
Los mantenedores suelen responder en 1 día
-
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
databricks/cli#7100 ·
Los mantenedores suelen responder en 1 día
-
DABs Enhancement
Dificultad 5/5 Más de una semana Aptitud para principiantes 35/100
databricks/cli#7099 ·
Los mantenedores suelen responder en 1 día
-
DABs
Dificultad 4/5 3-5 días Aptitud para principiantes 45/100
databricks/cli#7032 ·
Los mantenedores suelen responder en 1 día
Todos los issues de databricks/cli
Issues similares
-
bug triage
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
Los mantenedores suelen responder en 1 día
-
Dificultad 2/5 1-3 horas Aptitud para principiantes 78/100
mvanhorn/cli-printing-press#5146 ·
Los mantenedores suelen responder en 1 día
-
bug
Dificultad 2/5 1-3 horas Aptitud para principiantes 74/100
AvengeMedia/DankMaterialShell#3853 ·
-
Update Go Version to >=1.27.3Abierto
Dificultad 2/5 1-3 horas Aptitud para principiantes 60/100
-
Dificultad 1/5 Menos de una hora Aptitud para principiantes 85/100
Los mantenedores suelen responder en 1 día