influxdata/telegraf

Auto create table in BigQuery

Open

#13.033 aperta il 4 apr 2023

Vedi su GitHub
 (2 commenti) (0 reazioni) (0 assegnatari)Go (4161 fork)batch import
area/gcpfeature requesthelp wantedplugin/output

Metriche repository

Star
 (9892 star)
Metriche merge PR
 (Merge medio 2g 12h) (136 PR mergiate in 30 g)

Descrizione

Use Case

With some input plugins the metric names and formats are unknown on beforehand, the number of tags and fields can vary over time. Therefore it would be nice if the outputs.bigquery plugin could handle this in a way similar to the outputs.sql plugin.

Expected behavior

Telegraf creates the required table in BigQuery with all the corresponding metric fields and tags just as the sql

Actual behavior

Tables for metrics need to be created on beforehand in BigQuery.

Additional info

Here is a PoC which adds a new BigQuery field on the fly, proving it should be possible.

Guida contributor

Direzione di ricerca
Esamina il gist PoC fornito e comprendi come aggiungere dinamicamente campi alle tabelle BigQuery. Quindi adatta il plugin outputs.bigquery esistente per creare automaticamente tabelle con tutti i campi e tag delle metriche, simile al plugin outputs.sql.
Tech stack
go
Dominio
backendapidatabase
Tipo issue
Funzionalità
DifficoltàQuanto dovrebbe essere impegnativa per un nuovo contributor.
3
Tempo stimatoTempo stimato per completare e verificare uno scope piccolo.
Mezza giornata
Stato attivitàQuanto è probabile che la issue sia ancora attiva e reviewable.
Attiva
ChiarezzaQuanto chiaramente la issue descrive problema, scope e risultato atteso.
Richiede indagine
Prerequisiti
GoBigQuery
Adatta ai principiantiQuanto la issue è adatta a contributor alla prima esperienza.
50