`filewriter`: dynamic metadata
Ninguém assumiu esta issue ainda.
Avaliação
- Dificuldade
- 5/5
- Tempo estimado
- Mais de uma semana
- Facilidade para iniciantes
- 35/100
- Tipo de issue
- Funcionalidade
- Clareza
- Razoavelmente clara
- Status de atividade
- Ativa
- Domínio
- backend, data-engineering, stream-processing
Direção de pesquisa
Comece localizando o filewriter e rastreando como ele recebe dados de _events e de outros streams. Compare o tratamento de metadados existente com os caminhos dinâmicos listados, incluindo o cálculo por frame necessário para collection_time; considera-se concluído quando esses caminhos são escritos durante uma execução, com total_uncounted_counts tratado de acordo com a possibilidade indicada de ser constantemente zero.
Escrita pelo modelo de indexação a partir do texto da issue.
Descrição
The filewriter must be able to write the 'dynamic' metadata for a run.
These are pieces of metadata which require knowledge from the _events (and/or other) streams to compute. They are 'dynamic' in the sense that they cannot be known at run start.
This includes:
raw_data_1/collection_time(becausecollection_timeexcludes vetoed/paused time so needs per-frame veto flags)raw_data_1/framelog/events_lograw_data_1/framelog/frame_lograw_data_1/framelog/good_frame_lograw_data_1/framelog/period_lograw_data_1/framelog/proton_chargeraw_data_1/framelog/raw_events_lograw_data_1/good_framesraw_data_1/proton_chargeraw_data_1/proton_charge_rawraw_data_1/raw_framesraw_data_1/runlog/count_rateraw_data_1/runlog/dae_beam_currentraw_data_1/runlog/good_framesraw_data_1/runlog/good_uah_lograw_data_1/runlog/is_runningraw_data_1/runlog/is_waitingraw_data_1/runlog/monitor_sum_1raw_data_1/runlog/np_ratioraw_data_1/runlog/periodraw_data_1/runlog/period_change_lograw_data_1/runlog/raw_framesraw_data_1/runlog/raw_uah_lograw_data_1/runlog/run_statusraw_data_1/runlog/total_countsraw_data_1/runlog/veto_lograw_data_1/total_countsraw_data_1/total_uncounted_counts
Potential differences from existing files
raw_data_1/total_uncounted_counts- "uncounted count" may not be a valid concept in datastreaming world. But we can write it as a constant zero instead.
- Linguagem predominante
- Sem dados de linguagem
- Estrelas
- 0
- Forks
- 0
- Métricas de merge de PRs
- Nenhum PR com merge em 30d
Guia de contribuição
Nenhum guia de contribuição indexado para este repositório
Primeiros passos
- Leia a issue inteira e depois o guia de contribuição do projeto.
- Comente na issue dizendo que vai assumir — evita que duas pessoas façam o mesmo trabalho.
- Faça um fork do repositório e trabalhe em uma branch.
- Abra um pull request que referencie o número da issue.
Mais de ISISComputingGroup/DataStreaming
-
ISISComputingGroup/DataStreaming#115 · 1 responsável ·
-
ISISComputingGroup/DataStreaming#114 · 1 responsável ·
-
Dificuldade 4/5 3-5 dias Facilidade para iniciantes 35/100
-
Dificuldade 5/5 Mais de uma semana Facilidade para iniciantes 45/100
-
Dificuldade 3/5 1-2 dias Facilidade para iniciantes 48/100
Todas as issues de ISISComputingGroup/DataStreaming
Issues semelhantes
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100
mksglu/context-mode#1200 ·
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 70/100
-
clawsweeper:needs-maintainer-review clawsweeper:needs-product-decision clawsweeper:no-new-fix-pr impact:auth-provider issue-rating: 🌊 off-meta tidepool P2
Dificuldade 1/5 Menos de uma hora Facilidade para iniciantes 80/100
-
Dificuldade 2/5 1-3 horas Facilidade para iniciantes 75/100