Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

Filewriter: implement structure

Đang mở
#114 0 bình luận 0 reaction 1 người được giao Xem trên GitHub

@Tom-Willemsen đang làm issue này rồi.

Từ ngày 18/9/2026.

Đánh giá

Issue này chưa được đánh giá.

Mô tả

Implement the initial top-level structure of the filewriter process, to prove that we have a design that will work in practice. This should follow DS ADR 10.

Should include:

  • Trait definitions for writer modules
  • Kafka-listening infrastructure (including pooled architecture)
  • HDF5-writing infrastructure
    • Including writing fully-static datasets/groups
  • Infrastructure for parsing dynamically-provided nexus_structure (part of run start)
    • Including configuration parameters for each writer module
  • Logging
  • Metrics
  • Testing
    • Including unit tests for individual writer modules
  • Benchmarking
    • Include a bench for each writer module
    • Include one overall top-level bench for writing a small but representative file in-memory
  • Docs
  • Error propagation with appropriate context for debugging (likely miette + thiserror)
  • Two different writer modules, which may write simple/incomplete data at this stage.
    • E.g. simplified IXseblock and simplified NXevent_data

Functionally, the end point of this ticket is that we have a filewriter process that can listen to streams of data from Kafka and write some data from those streams, in a simplified/incomplete way, to a HDF5/NeXus file.

Ngôn ngữ chính
Không có dữ liệu ngôn ngữ
Star
0
Fork
0
Chỉ số merge pull request
Không có pull request nào được merge trong 30 ngày

Hướng dẫn đóng góp

Chưa lập chỉ mục được hướng dẫn đóng góp cho kho mã nguồn này

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của ISISComputingGroup/DataStreaming

Tất cả issue của ISISComputingGroup/DataStreaming

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.