`filewriter`: `selog/EPICS_PUTLOG`

未關閉

#91 建立於 2026年7月27日 0 則留言 0 個 reaction 已指派 0 人在 GitHub 檢視

還沒有人認領這個 Issue。

評估

難度: 5/5
預估耗時: 一週以上
新手友好度: 25/100

Issue 類型: 功能
描述清晰度: 需要釐清
活躍度: 冷清
技術堆疊: kafka
領域: data-engineering

研究方向

首先檢查目前的 .nxs 檔案如何表示 string 型別的 selog EPICS putlog，然後將提議的 vs00 Kafka 表示與 NXtextlog Nexus 類別進行比較。確認該格式是否仍符合 Nexus 規範並與 Mantid 相容，包括列出的 PV-name 差異；完成的標準是確定長期儲存與串流方案。

由索引模型根據 Issue 內容生成。

描述

filewriter

The current .nxs files contain the EPICS putlog as a string-typed selog entry.

The baseline assumption is that the putlog entries will be streamed to a dedicated Kafka topic as a vs00 or similar schema, by some separate process to-be-written.

This requirement is low-priority for the immediate future, but we should still consider supporting it long term.

Questions

The ISISICP currently writes strings in a way that is not nexus-compliant.

Do we want to continue to do that?
There is a new NXtextlog nexus class for storing string-logs: https://github.com/nexusformat/definitions/pull/1590 . But will using that cause problems for Mantid?

Potential differences from existing files

Some of the PV names (particularly the DAE PVs) will be different in the datastreaming system, and may not be captured in the CA putlog as they are served over PVA instead. For example if downstream analysis is expecting to be able to parse strings like Changed PV: IN:SANS2D:DAE:BEGINRUNEX new=0 old=0 from this log, then that would no longer be valid.

主要語言: 沒有語言資料
星號: 0
分支: 0
PR 合併指標: 30 天內沒有已合併 PR

貢獻指南

這個儲存庫沒有索引到貢獻指南

從這裡開始

先讀完整個 Issue，再讀專案的貢獻指南。
在 Issue 下留言說明你要接手 —— 這能避免兩個人做同樣的事。
Fork 儲存庫，在一個分支上完成修改。
送出 Pull Request，並在描述裡引用這個 Issue 編號。

ISISComputingGroup/DataStreaming 的其他 Issue

Investigate refactoring vs replacing forwarder 未關閉

ISISComputingGroup/DataStreaming#115 · 已指派 1 人 · 2026年9月21日建立
Filewriter: implement structure 未關閉

ISISComputingGroup/DataStreaming#114 · 已指派 1 人 · 2026年9月18日建立
Implement process talking to low-level detector modules 未關閉

難度 4/5 3-5 天新手友好度 35/100

ISISComputingGroup/DataStreaming#113 · 2026年9月15日建立
`kafka_event_aggregator`: backpressure 未關閉

難度 5/5 一週以上新手友好度 45/100

ISISComputingGroup/DataStreaming#111 · 2026年9月10日建立
`kafka_event_aggregator`: improve metrics 未關閉

難度 3/5 1-2 天新手友好度 48/100

ISISComputingGroup/DataStreaming#112 · 2026年9月9日建立

查看 ISISComputingGroup/DataStreaming 的全部 Issue

相似的 Issue

rhat_nested rejects valid superchain_ids that are not 0..K-1 (e.g. [1, 1, 2, 2]) 未關閉

難度 2/5 1-3 小時新手友好度 88/100

arviz-devs/arviz-stats#461 · 2026年9月24日建立
PEtab export ignores the postprocess key, so a job whose fit scores script-transformed simulations exports as a problem that scores the raw ones, without an error 未關閉

bug silent-incorrectness

難度 2/5 1-3 小時新手友好度 76/100

lanl/PyBNF#899 · 2026年9月24日建立
Span created without a context gets None instead of a default SpanContext 未關閉

難度 2/5 1-3 小時新手友好度 75/100

NVIDIA/NeMo-Agent-Toolkit#2264 · 2026年9月24日建立
FieldSanitizer output can fail validateSubset: only [_-] is stripped 未關閉

難度 2/5 1-3 小時新手友好度 75/100

CorrelAid/formtransform#44 · 2026年9月24日建立
build_panel_matrix peptide_count counts all predictions without a binding threshold 未關閉

難度 2/5 1-3 小時新手友好度 75/100

pirl-unc/tsarina#176 · 2026年9月24日建立

更多 Data Engineering Issue