TimeSeriesResult.to_df() turns API nulls into '' and emits a zero-length trailing bucket when filter_time_max lands on a period boundary
Nessuno ha ancora preso questa issue.
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 52/100
Direzione di ricerca
Start with result_conversions.create_dataframe and sort_breakdown in timeseries_result.py, then run the reproduction in the issue for boundary and non-boundary filter_time_max values. Trace how API nulls and the final bucket are represented before to_df(). Done means numeric nulls remain usable, zero-length periods are handled consistently, and the filter boundary behavior is documented or defined.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Environment: vortexasdk 1.0.32 (also reproduced on 1.0.29), Python 3.12, pandas 2.3.3, Windows.
A. to_df() replaces nulls with ''. result_conversions.create_dataframe runs pd.DataFrame(data).fillna(""). Any null from the API becomes an empty string and turns value into object dtype, so arithmetic such as df["value"] / 1000 raises TypeError. sort_breakdown in timeseries_result.py also pads missing breakdown entries with "value": "".
B. Zero-length trailing bucket. When filter_time_max falls exactly on a period boundary, for example midnight on the 1st with timeseries_frequency="month", the response has an extra final bucket for a zero-length period with count=0. With a rate unit (bpd) its value is None, so '' after to_df(). With a volume unit (b) it is 0, which reads like a real empty month. Months with genuinely no cargoes return value=0 as expected.
from datetime import datetime
from vortexasdk import CargoTimeSeries, Geographies, Products
def run(geo, prod, end):
return CargoTimeSeries().search(
filter_activity="loading_end", filter_origins=geo, filter_products=prod,
filter_time_min=datetime(2025, 1, 1), filter_time_max=end,
timeseries_frequency="month", timeseries_unit="bpd",
).to_df()
if __name__ == "__main__":
geo = Geographies().search(term="Rotterdam").to_list()[0].id
prod = Products().search(term="Diesel/Gasoil", exact_term_match=True).to_list()[0].id
for end in (datetime(2025, 6, 1), datetime(2025, 6, 30, 23, 59)):
df = run(geo, prod, end)
print(end, df["value"].dtype) # 2025-06-01 -> object, last row count=0 value=''
print(df.tail(2)) # 2025-06-30 -> float64, last row is the real June
Expected:
- Nulls preserved as
NaN, keepingvaluenumeric. - No bucket for a zero-length period, or documented behaviour (ideally a flag) for whether
filter_time_maxis inclusive.
Related: Products().reference(old_id) silently redirects a rotated product id to its replacement, but CargoTimeSeries with the old id returns all zeros with no error. Could id rotation be documented, or could the timeseries endpoint reject unknown product ids?
- Lingua principale
- Python
- Stelle
- 25
- Fork
- 12
- Merge medio
- 20h 18m
- PR unite (30g)
- 1
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di VorTECHsa/python-sdk
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
VorTECHsa/python-sdk#529 ·
-
Difficoltà 3/5 1-2 giorni Idoneità per principianti 65/100
VorTECHsa/python-sdk#566 ·
-
documentation
Difficoltà 4/5 3-5 giorni Idoneità per principianti 25/100
VorTECHsa/python-sdk#278 ·
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100
VorTECHsa/python-sdk#240 ·
-
enhancement
Difficoltà 5/5 Più di una settimana Idoneità per principianti 30/100
VorTECHsa/python-sdk#235 · 1 commento ·
Tutte le issue di VorTECHsa/python-sdk
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-2 giorni Idoneità per principianti 70/100
-
FingerprintSplitter raises ZeroDivisionError when int(frac_train * len(dataset)) floors to zeroAperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 88/100
I maintainer di solito rispondono entro 7 giorni
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 70/100
lmstudio-ai/mlx-engine#376 ·
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
pyiron/bagofholding#166 ·