Scalability: journal:index is read/rewritten in full on every append and every list
Chưa có ai nhận issue này.
Đánh giá
- Độ khó
- 5/5
- Thời gian dự kiến
- Hơn một tuần
- Mức phù hợp với người mới
- 35/100
- Loại issue
- Tái cấu trúc
- Độ rõ ràng
- Cần làm rõ
- Mức độ hoạt động
- Ít trao đổi
- Công nghệ
- typescript
- Lĩnh vực
- backend, databases, performance
Hướng nghiên cứu
Bắt đầu trong src/kv.ts bằng cách đọc appendJournalEntry và listJournalEntries, sau đó kiểm tra scripts/promote.ts để xác nhận promotion hiện xử lý các journal entries như thế nào. Quyết định giữa việc pruning các promoted entries, listing KV dựa trên cursor hoặc ghi rõ tài liệu về kích thước journal tối đa; công việc hoàn tất khi approach về khả năng mở rộng được chọn đã được triển khai hoặc giới hạn kích thước được ghi rõ trong tài liệu.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Mô tả
src/kv.ts appendJournalEntry reads the whole journal:index array, pushes one id, writes the whole array back on every single append. listJournalEntries reads journal:index then fetches every entry with kv.get in a Promise.all, then filters by since/limit in memory - no pagination against KV itself.
As the journal grows this is O(n) KV read+write per append and O(n) KV reads per list call. Since there is no promotion-driven pruning of old entries visible in scripts/promote.ts (it never deletes, only tracks review state locally), journal:index will grow unbounded over the life of the deployment.
Worth deciding: either (a) archive/prune promoted entries out of journal:index via a script, or (b) switch listing to KV list-by-prefix with cursor pagination instead of an index array, or (c) explicitly document a expected max journal size and revisit before it is exceeded.
- Ngôn ngữ chính
- TypeScript
- Star
- 1
- Fork
- 0
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Chuẩn bị môi trường
Dự án này không cung cấp dev container, Dockerfile hay hướng dẫn đóng góp, nên bạn cần tự thiết lập môi trường: hãy bắt đầu từ README và xem hướng dẫn đóng góp lần đầu của chúng tôi để biết các bước chung.
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Issue khác của dkritarth/context-kernel
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
-
Feature: scripts/promote.ts --mark-reviewed does not verify the ID actually exists in the journalĐang mở
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 70/100
Tất cả issue của dkritarth/context-kernel
Issue tương tự
-
ble-needs-fable-review bug mobile priority:P2
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 76/100
ColeMurray/background-agents#2305 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
bug from-studio
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 63/100
esengine/DeepSeek-Reasonix#12355 ·
Maintainer thường phản hồi trong vòng 1 ngày
-
bug
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
oblien/openship#1086 · 1 bình luận ·
Maintainer thường phản hồi trong vòng 1 ngày
-
Độ khó 2/5 1-3 giờ Mức phù hợp với người mới 78/100
Maintainer thường phản hồi trong vòng 1 ngày