[ISSUE] `get_api_error` fails with `TypeError: object of type '_io.BufferedReader' has no len()¨`
I maintainer di solito rispondono entro 1 giorno
Valutazione
- Difficoltà
- 2/5
- Tempo stimato
- 1-3 ore
- Idoneità per principianti
- 76/100
- Tipo di issue
- Bug
- Chiarezza
- Specificata chiaramente
- Stato di attività
- Tranquilla
- Stack tecnologico
- python
- Ambito
- backend-api-design
Direzione di ricerca
Inizia da databricks/sdk/logger/round_trip_logger.py in _redacted_dump e segui la sua chiamata da databricks/sdk/errors/parser.py. Riproduci un errore API per una richiesta PUT il cui body sia uno stream di un file locale, quindi verifica che il parser degli errori e il logger gestiscano il BufferedReader senza sollevare TypeError.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Description
When the HTTP PUT request body is streamed from a local file, request.body is not a string but a _io.BufferedReader.
In case of API error, _BaseClient._error_parser.get_api_error(response) will try to return the error and the associated query.
Unfortunately, response.request.body is still a BufferedReader, not necessarily a string. When this body is passed to the logger, it fails
eventually calls self._redacted_dump("> ", request.body) but the latter is not meant to handle streams
Full strack trace :
Traceback (most recent call last):
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\generic.py", line 350, in transfer
_try_links(
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\generic.py", line 281, in _try_links
return copy(
^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\generic.py", line 88, in copy
return _put(
^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\generic.py", line 161, in _put
_put_one(from_paths[0], to_paths[0])
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\generic.py", line 151, in _put_one
return to_fs.put_file(
^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_objects\fs\base.py", line 673, in put_file
self.fs.put_file(os.fspath(from_file), to_info, callback=callback, **kwargs)
File "C:\_dev\my_proj\.venv\Lib\site-packages\dvc_databricks\filesystem.py", line 308, in put_file
self._client.files.upload(rpath, fh, overwrite=True)
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\mixins\files.py", line 1430, in upload
self._upload_single_thread_with_known_size(ctx, contents)
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\mixins\files.py", line 1513, in _upload_single_thread_with_known_size
return self._single_thread_single_shot_upload(ctx, contents)
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\mixins\files.py", line 1521, in _single_thread_single_shot_upload
return super().upload(file_path=ctx.target_path, contents=contents, overwrite=ctx.overwrite)
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\service\files.py", line 1027, in upload
self._api.do(
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\core.py", line 95, in do
return self._api_client.do(
^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\_base_client.py", line 197, in do
response = call(
^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\retries.py", line 59, in wrapper
raise err
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\retries.py", line 38, in wrapper
return func(*args, **kwargs)
^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\_base_client.py", line 297, in _perform
error = self._error_parser.get_api_error(response)
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\errors\parser.py", line 95, in get_api_error
{"message": "unable to parse response. " + _unknown_error(response, self._debug_headers)},
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\errors\parser.py", line 45, in _unknown_error
request_log = RoundTrip(response, debug_headers=debug_headers, debug_truncate_bytes=10 * 1024).generate()
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\logger\round_trip_logger.py", line 47, in generate
sb.append("> [raw stream]" if self._raw else self._redacted_dump("> ", request.body))
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
File "C:\_dev\my_proj\.venv\Lib\site-packages\databricks\sdk\logger\round_trip_logger.py", line 113, in _redacted_dump
if len(body) == 0:
^^^^^^^^^
TypeError: object of type '_io.BufferedReader' has no len()
A suggested fix could be :
def _redacted_dump(self, prefix: str, body: str) -> str:
if isinstance(body, io.IOBase):
# Read the stream into a string-like
body.seek(0)
body = body.read().decode("utf-8")
if len(body) == 0:
return ""
- Lingua principale
- Python
- Stelle
- 577
- Fork
- 229
- Merge medio
- 40m
- PR unite (30g)
- 12
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di databricks/databricks-sdk-py
-
Difficoltà 1/5 1-3 ore Idoneità per principianti 62/100
databricks/databricks-sdk-py#1602 · 2 reazioni ·
I maintainer di solito rispondono entro 1 giorno
-
[ISSUE] Docs state serving endpoints support at most ten served entities; actual limit is 15Forse già presa @divya0709 l’ha presa 95 giorni fa. Aperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 92/100
databricks/databricks-sdk-py#1496 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 65/100
databricks/databricks-sdk-py#1495 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
databricks/databricks-sdk-py#1451 ·
I maintainer di solito rispondono entro 1 giorno
-
[ISSUE] TypeError in _unknown_error() when API returns unparseable error on streaming requestForse già presa @davwil l’ha presa 269 giorni fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
databricks/databricks-sdk-py#1264 · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di databricks/databricks-sdk-py
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 67/100
FinanceFlash/unvibecode#699 ·
I maintainer di solito rispondono entro 1 giorno
-
enhancement Website
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
OWASP/OWASP-Hunting#96 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
micropython/micropython#19942 ·
I maintainer di solito rispondono entro 1 giorno
-
A rebuild posts "not part of this build" success to the commit's failed `nix-build` gate and effectsForse già presa @Padraic-O-Mhuiris l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
I maintainer di solito rispondono entro 1 giorno
-
`epoch.Integer` raises a raw OverflowError for integers too large to convert to a floatForse già presa @arindam77 l’ha presa oggi. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 78/100
pydantic/pydantic-extra-types#479 ·
I maintainer di solito rispondono entro 1 giorno