Storage-backed mode for LoroDoc — compaction without full in-memory materialization?
メンテナーはふだん 1 日以内に返信
まだ誰も着手していません。
評価
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 初心者へのやさしさ
- 30/100
- issue の種類
- 機能追加
- 明瞭さ
- 説明が足りない
- 活発さ
- 静か
- 技術スタック
- rust, sqlite
調査の方向性
まず、issue に記載されている Rust の snapshotter と LoroDoc のエントリーポイントを確認し、その後、コンパクションのためにシリアライズ済みドキュメントを読み込む際のメモリコストを比較します。実装前に、ストレージインターフェース、サポート対象のバックエンド、ストリーミングの挙動を明確にします。合意された設計と、目標のメモリ上限内でコンパクションが動作することを示すテストがあれば完了とします。
索引モデルが issue の本文から書いたものです。
説明
We use Loro for a collaborative editor with a Rust snapshotter that periodically compacts journal entries into a full snapshot. The problem is memory amplification — a ~5 MB serialized document expands to 600+ MB of RAM when loaded into LoroDoc for compaction, making it impractical in memory-constrained environments (e.g., Cloudflare Durable Objects at 128 MB).
Is there any consideration for a storage-backed mode (e.g., backed by SQLite or a trait Storage) where compaction could operate in a streaming/chunked fashion without materializing the entire document in RAM?
Thanks for the amazing work!
- 主要言語
- Rust
- スター
- 6.3k
- フォーク
- 205
- 平均マージ
- 3日 18時間
- マージ済み PR(30日)
- 45
環境構築
このプロジェクトの開発コンテナを、あなたの GitHub アカウントでブラウザ上に起動します。
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートなし
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
loro-dev/loro のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 75/100
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
メンテナーはふだん 1 日以内に返信
-
難易度 3/5 1〜2日 初心者へのやさしさ 62/100
メンテナーはふだん 1 日以内に返信
-
難易度 4/5 3〜5日 初心者へのやさしさ 42/100
メンテナーはふだん 1 日以内に返信
-
Shallow snapshot root retreats far below the requested frontier when two peers take turns (since 1.16.2)対応中かも @avergin が 1 日前に担当しました。 オープン
難易度 5/5 1週間以上 初心者へのやさしさ 15/100
メンテナーはふだん 1 日以内に返信