google/grain

登录后关注

在 GitHub 查看

Library for reading and processing ML training data.

google/grain 对新手友好吗？

google/grain 的维护者通常 1 天内回复 PR。目前有 1 个适合新手的 issue 开放。

星标: 784
派生: 86
开放的新手 issue: 1
已索引 issue: 43
平均合并: 1 天 14 小时
30 天内合并 PR: 14

主要语言: Python
许可证: Apache-2.0
最近 GitHub push: 2026年9月30日
最近索引: 2026年9月16日
贡献指南: 贡献指南
行为准则: 行为准则
新手标签: 没有已索引的新手标签

如何为 google/grain 做贡献

先读贡献指南：它说明了维护者希望如何提出、测试和评审改动。
读一下行为准则：它同样适用于 issue 和 PR，而不只是聊天。
你的贡献将以该项目的 Apache-2.0 许可证发布。
选下方那个开放的新手友好 issue，开始之前先留言说明你想认领它。

适合新手全部

未关闭全部

可能已有人在做的 issue 排在最后。全部按时间排序

Release request: include a3b351858a (unparsed worker profiling flag); grain-nightly has not published since 2026-01-12
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 48/100

google/grain#1411 · 1 条评论 · 2026年10月3日创建

维护者通常 1 天内回复
Closing an mp_prefetch iterator stops its worker processes one at a time
未关闭
- 哪里不对？
type:bug

难度 2/5 1-3 小时新手友好度 83/100

google/grain#1410 · 2026年10月1日创建

维护者通常 1 天内回复
How are config options meant to be set in Grain?
未关闭
- 哪里不对？
type:support

难度 3/5 1-2 天新手友好度 45/100

google/grain#1360 · 2026年7月15日创建

维护者通常 1 天内回复
Sliding window operation in `IterDataset` / build grain locally
未关闭
- 哪里不对？
type:support

难度 4/5 3-5 天新手友好度 48/100

google/grain#1264 · 1 条评论 · 2026年3月26日创建

维护者通常 1 天内回复
No support for python 3.13t and 3.14t
未关闭
- 哪里不对？
type:feature

难度 4/5 3-5 天新手友好度 35/100

google/grain#1245 · 1 条评论 · 3 个 reaction · 2026年3月17日创建

维护者通常 1 天内回复
Issue on page /grain.experimental.html
未关闭
- 哪里不对？
documentation

难度 4/5 3-5 天新手友好度 35/100

google/grain#1238 · 4 条评论 · 1 个 reaction · 2026年3月7日创建

维护者通常 1 天内回复
Add Windows Build to `conda-forge`
未关闭
- 哪里不对？
type:feature

难度 4/5 3-5 天新手友好度 38/100

google/grain#1232 · 2026年2月27日创建

维护者通常 1 天内回复
Grain workers use GPUs, and there is no way to avoid it
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 35/100

google/grain#1199 · 5 条评论 · 2026年1月17日创建

维护者通常 1 天内回复
`ThreadPrefetchIterDataset` memory leaks / zombie threads that hang exiting?
未关闭
- 哪里不对？
type:bug

难度 4/5 3-5 天新手友好度 45/100

google/grain#1196 · 3 条评论 · 2026年1月15日创建

维护者通常 1 天内回复
Performance gap with `tf.data.Dataset` on MNIST
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 45/100

google/grain#1164 · 5 条评论 · 2025年12月15日创建

维护者通常 1 天内回复
random and augmentation in datasets
未关闭
- 哪里不对？
type:support

难度 4/5 3-5 天新手友好度 25/100

google/grain#1102 · 1 条评论 · 2025年10月29日创建

维护者通常 1 天内回复
grain dataset slow with huggingface data source
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 30/100

google/grain#1084 · 2025年10月16日创建

维护者通常 1 天内回复
Leaked shared_memory objects to clean up at shutdown
未关闭
- 哪里不对？
type:bug

难度 4/5 3-5 天新手友好度 45/100

google/grain#1031 · 1 条评论 · 2 个 reaction · 2025年9月3日创建

维护者通常 1 天内回复
`MapDataset` does not respect `jax.default_device(jax.devices("cpu")[0])`.
未关闭
- 哪里不对？
type:bug

难度 3/5 1-2 天新手友好度 35/100

google/grain#975 · 3 条评论 · 1 个 reaction · 2025年8月6日创建

维护者通常 1 天内回复
Document backwards compatibility guarantees
未关闭
- 哪里不对？
type:feature

难度 4/5 3-5 天新手友好度 42/100

google/grain#898 · 1 条评论 · 2025年6月5日创建

维护者通常 1 天内回复
Feature: Define transforms via Protocol instead of abstract class
未关闭
- 哪里不对？
type:feature

难度 4/5 3-5 天新手友好度 45/100

google/grain#884 · 2 条评论 · 2025年5月28日创建

维护者通常 1 天内回复
Discussion: Grain packaging nightly builds
未关闭
- 哪里不对？
type:build/install

难度 5/5 一周以上新手友好度 25/100

google/grain#878 · 2 条评论 · 2025年5月21日创建

维护者通常 1 天内回复
SharedMemoryArray is too slow
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 25/100

google/grain#851 · 3 条评论 · 2 个 reaction · 2025年5月5日创建

维护者通常 1 天内回复
Grain workers allocates GPU memory
可能重新可做 @iindyk 于 534 天前认领，目前没有进行中的 PR。未关闭
- 哪里不对？
type:performance

google/grain#820 · 1 条评论 · 2 个 reaction · 已指派 1 人 · 2025年4月18日创建

维护者通常 1 天内回复
Amount of time spent accessing thread locks for ArrayRecord datasources
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 35/100

google/grain#808 · 1 条评论 · 1 个 reaction · 2025年4月9日创建

维护者通常 1 天内回复
error: could not create 'build/lib.macosx-11.0-arm64-cpython-312/grain': Not a directory
未关闭
- 哪里不对？
type:build/install

难度 3/5 1-2 天新手友好度 35/100

google/grain#694 · 2025年1月16日创建

维护者通常 1 天内回复
comparing array_record's ArrayRecordDataSource + grain data loader to huggingface. (Grain is extremely slow)
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 25/100

google/grain#688 · 3 个 reaction · 2025年1月9日创建

维护者通常 1 天内回复
Build from source succeeds but subsequent `import`s fail - also ERROR: Configuration file not found: grain/third_party/py/grain/oss/copy.bara.sky
未关闭
- 哪里不对？
type:bug

难度 4/5 3-5 天新手友好度 35/100

google/grain#669 · 4 条评论 · 2024年12月21日创建

维护者通常 1 天内回复
How would one create a data source for video?
未关闭
- 哪里不对？
type:support

难度 5/5 一周以上新手友好度 15/100

google/grain#633 · 2024年11月22日创建

维护者通常 1 天内回复
Nested Dataset Slowdown
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 35/100

google/grain#593 · 2 条评论 · 2024年10月3日创建

维护者通常 1 天内回复
Slow compared to simple loader
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 25/100

google/grain#569 · 5 条评论 · 1 个 reaction · 2024年9月1日创建

维护者通常 1 天内回复
Advice on using a JIT function inside a __getitem__ or transform?
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 25/100

google/grain#495 · 3 条评论 · 1 个 reaction · 2024年7月10日创建

维护者通常 1 天内回复
Batching into shared memory is deprecated, but essential for performance
未关闭
- 哪里不对？
type:performance

难度 4/5 3-5 天新手友好度 35/100

google/grain#492 · 3 条评论 · 2024年6月28日创建

维护者通常 1 天内回复
whether to support streaming dataset？
未关闭
- 哪里不对？
type:feature

难度 5/5 一周以上新手友好度 20/100

google/grain#487 · 4 条评论 · 2024年6月27日创建

维护者通常 1 天内回复
Slow data loading of large arrays from sharded dataset
未关闭
- 哪里不对？
type:feature

难度 4/5 3-5 天新手友好度 35/100

google/grain#372 · 3 条评论 · 2024年3月30日创建

维护者通常 1 天内回复
ThreadPrefetch `close()` cannot cancel a producer blocked in `parent.__next__()`
可能已有人在做 @MohammadSadeghSalehi 于 64 天前认领。未关闭
- 哪里不对？
type:bug

难度 4/5 3-5 天新手友好度 68/100

google/grain#1372 · 2026年8月2日创建

维护者通常 1 天内回复
Add dataloader checkpointing example to docs
可能已有人在做 @vasilybib1 于 220 天前认领。未关闭
- 哪里不对？
documentation type:feature

难度 2/5 1-3 小时新手友好度 45/100

google/grain#938 · 2 条评论 · 2025年7月10日创建

维护者通常 1 天内回复
DataLoader ignores context manager for Data Sources
可能已有人在做关联的 PR 仍在进行中或已合并。未关闭
- 哪里不对？
type:support

难度 3/5 1-2 天新手友好度 62/100

google/grain#936 · 2025年7月5日创建

维护者通常 1 天内回复
AttributeError: 'NoneType' object has no attribute 'mmap'
可能已有人在做关联的 PR 仍在进行中或已合并。未关闭
- 哪里不对？
type:bug

难度 3/5 1-2 天新手友好度 45/100

google/grain#398 · 4 条评论 · 6 个 reaction · 2024年4月24日创建

维护者通常 1 天内回复

google/grain

google/grain 对新手友好吗？

如何为 google/grain 做贡献

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

把新 issue 发到你的邮箱