clab/dynet

Implement binary io for faster/lighter serialization

Open

#648 opened on 2017年6月30日

GitHub で見る
 (8 comments) (0 reactions) (0 assignees)C++ (701 forks)github user discovery
enhancementgood first issue

Repository metrics

Stars
 (3,433 stars)
PR merge metrics
 (PR metrics pending)

説明

Saving a medium sized seq2seq model takes between 2x and 4x longer as before, is anyone else experiencing something similar?

EDIT: some more information:

  • the model weighs 340MB once saved (which is less than before 2.0)
  • There are 3 subcollections

コントリビューターガイド

調査方針
DyNetの現在のシリアライゼーションコードを調べ、パフォーマンスのボトルネックを特定し、バイナリシリアライゼーションフォーマットを提案してください。Protocol Buffersやカスタムバイナリエンコーディングなどの既存のライブラリの使用を検討してください。
技術スタック
cpp
領域
machine learning
Issue 種別
パフォーマンス
難度新しい貢献者にとっての実装難度です。1 は非常に小さな変更、5 は専門的な作業です。
3
推定時間経験ある貢献者が調査、実装、テスト、pull request 準備にかけるおおよその時間範囲です。
1-2日
活動状況Issue が今どれだけ取り組みやすいかを示します。新しい、活発、古い、ブロック中、またはメンテナー入力待ちなどです。
アクティブ
明確さ期待される変更、受け入れ条件、次の手順がどれだけ明確かを示します。
調査が必要
前提条件
C++Git
初心者向け度初回貢献者にどれだけ取り組みやすいかを 1-100 で推定したスコアです。
45