meta-pytorch/data

登录后关注

在 GitHub 查看

A PyTorch repo for data loading and utilities to be shared by the PyTorch domain libraries.

meta-pytorch/data 对新手友好吗？

近期外部贡献者向 meta-pytorch/data 提交的 PR 还不够多，暂时无法判断它们被合并的比例。目前有 3 个适合新手的 issue 开放。

星标: 1.3k
派生: 179
开放的新手 issue: 3
已索引 issue: 221
平均合并: 6 天 1 小时
30 天内合并 PR: 2

主要语言: Python
许可证: BSD-3-Clause
最近 GitHub push: 2026年9月16日
最近索引: 2026年9月20日
贡献指南: 贡献指南
行为准则: 行为准则
新手标签: good first issue help wanted

如何为 meta-pytorch/data 做贡献

先读贡献指南：它说明了维护者希望如何提出、测试和评审改动。
读一下行为准则：它同样适用于 issue 和 PR，而不只是聊天。
你的贡献将以该项目的 BSD-3-Clause 许可证发布。
从下方 3 个开放的新手友好 issue 中选一个，开始之前先留言说明你想认领它。

适合新手全部

未关闭全部

可能已有人在做的 issue 排在最后。全部按时间排序

Loader checkpoint restoration restarts before a None item
未关闭
- 哪里不对？
难度 2/5 1-3 小时新手友好度 78/100

meta-pytorch/data#1551 · 1 条评论 · 2026年8月23日创建
Docs setup needs to be upgraded to use PyTorch Sphinx Theme2
未关闭
- 哪里不对？
难度 3/5 1-2 天新手友好度 45/100

meta-pytorch/data#1533 · 2026年3月13日创建
Torch CPU index is missing torchdata==0.11.0
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 30/100

meta-pytorch/data#1532 · 2026年3月7日创建
[feature-request] Block data that is flagged by a CC "no-AI-training" license from being ingested into a DataLoader
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1509 · 2 条评论 · 2025年10月20日创建
[feature request] Upstream to core PyTorch `StatefulDataLoader` and `StatefulDistributedSampler`
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 20/100

meta-pytorch/data#1508 · 2 条评论 · 2025年9月17日创建
Add a Stack node for ensembling
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1507 · 9 条评论 · 1 个 reaction · 2025年8月21日创建
v0.12.0 (or 0.11.1?) release timeline
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 15/100

meta-pytorch/data#1506 · 3 条评论 · 6 个 reaction · 2025年8月16日创建
Add an example using a library such as Hugging Face datasets
未关闭
- 哪里不对？
难度 2/5 1-3 小时新手友好度 35/100

meta-pytorch/data#1504 · 2 条评论 · 2025年8月8日创建
`enumerate()` index doesn't reflect StatefulDataLoader's actual position after loading state
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1503 · 4 条评论 · 2025年8月7日创建
Async Checkpointing with DCP and Stateful Dataloader
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1502 · 2 条评论 · 2025年8月6日创建
ParallelMapper missing a `worker_init_fn`
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 45/100

meta-pytorch/data#1494 · 1 条评论 · 2025年6月4日创建
online hard-example mining under Multi-GPU (DDP)
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1493 · 2025年6月4日创建
Implement a Cache node
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1489 · 1 条评论 · 3 个 reaction · 2025年5月15日创建
Expose pin_memory callable for custom objects
未关闭
- 哪里不对？
难度 3/5 1-2 天新手友好度 48/100

meta-pytorch/data#1481 · 1 条评论 · 1 个 reaction · 2025年5月2日创建
torchdata or torchdata-contrib?
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1471 · 2 条评论 · 2 个 reaction · 2025年4月6日创建
`IterableWrapper` fails on an SQLite cursor
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1470 · 3 条评论 · 2025年3月31日创建
Enable GPU unit tests for nodes
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1467 · 2025年3月20日创建
Explore lifting the restriction on `max_concurrent`
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1462 · 2025年3月9日创建
Discussion: DCP APIs and broader contracts for rescalability
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 20/100

meta-pytorch/data#1456 · 2 条评论 · 3 个 reaction · 2025年2月25日创建
Open for contribution on utility nodes like `Filter`, `Shuffler`, `Header`, `Cycler`?
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 30/100

meta-pytorch/data#1452 · 1 条评论 · 3 个 reaction · 2025年2月25日创建
[Discussion] `def Mapper` may not be ideal
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1444 · 1 条评论 · 2025年2月16日创建
torch.node datawriter
未关闭
- 哪里不对？
难度 3/5 1-2 天新手友好度 35/100

meta-pytorch/data#1418 · 2024年12月27日创建
[RFC] Remove the need for super().__init__() call in BaseNode subclasses to better support dataclasses
未关闭
- 哪里不对？
nodes

难度 5/5 一周以上新手友好度 30/100

meta-pytorch/data#1411 · 2024年12月18日创建
[Nodes] Add a ToDevice node, or combine with pin memory
未关闭
- 哪里不对？
nodes

难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1407 · 2 条评论 · 1 个 reaction · 2024年12月13日创建
[Nodes] ParallelMap state is not guraranteed with in_order=False
未关闭
- 哪里不对？
nodes

难度 4/5 3-5 天新手友好度 38/100

meta-pytorch/data#1405 · 2024年12月13日创建
[Nodes] Drop-in Replacement for DataLoader and StatefulDataLoader
未关闭
- 哪里不对？
nodes

难度 5/5 一周以上新手友好度 25/100

meta-pytorch/data#1389 · 2024年12月9日创建
[Nodes] Ensure get_worker_info works correctly in ParallelMapper
未关闭
- 哪里不对？
nodes

难度 5/5 一周以上新手友好度 30/100

meta-pytorch/data#1388 · 2024年12月9日创建
[Stateful DataLoader] CI takes too long for Mac and WIndows
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 45/100

meta-pytorch/data#1338 · 1 条评论 · 2024年10月16日创建
[Stateful DataLoader] add utilities to inspect/modify dataloader state
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 30/100

meta-pytorch/data#1337 · 2024年10月15日创建
[RFC] Polylithic: Enabling multi-threaded DataLoading through non-monolithic parallelism
未关闭
- 哪里不对？
nodes

难度 5/5 一周以上新手友好度 20/100

meta-pytorch/data#1334 · 11 条评论 · 15 个 reaction · 2024年10月10日创建
early stop worker got Exception Error
未关闭
- 哪里不对？
datapipes

难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1310 · 2 条评论 · 2024年8月5日创建
best practice for `snapshot_every_n_steps`
可能重新可做 @andrewkho 于 813 天前认领，目前没有进行中的 PR。未关闭
- 哪里不对？
documentation

meta-pytorch/data#1283 · 5 条评论 · 已指派 1 人 · 2024年7月7日创建
Enable Append Mode in SaverIterDataPipe
未关闭
- 哪里不对？
datapipes wontfix

难度 3/5 1-2 天新手友好度 35/100

meta-pytorch/data#1270 · 1 条评论 · 2024年6月10日创建
State_dict on dataset seems to be called more often than expected
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 38/100

meta-pytorch/data#1268 · 2 条评论 · 1 个 reaction · 2024年6月10日创建
GDriveReaderDataPipe complains "using a sharing/viewing link instead of a download link"
未关闭
- 哪里不对？
datapipes wontfix

难度 3/5 1-2 天新手友好度 35/100

meta-pytorch/data#1265 · 2024年5月31日创建
torchdata not compatible with torch 2.3.0
未关闭
- 哪里不对？
难度 2/5 1-3 小时新手友好度 35/100

meta-pytorch/data#1244 · 3 条评论 · 21 个 reaction · 2024年4月25日创建
Move to removesuffix string method after python 3.8 support is dropped
未关闭
- 哪里不对？
难度 2/5 1-3 小时新手友好度 35/100

meta-pytorch/data#1240 · 2024年3月27日创建
DataLoader2 with multiprocess raise exception: Can not request next item while we are still waiting response for previous request
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1228 · 4 条评论 · 2024年3月12日创建
Dataloader is slow with iterdatapipes and shuffle that has large in-memory fields (because traverse_dps is slow)
未关闭
- 哪里不对？
module: dataloader triaged

难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1226 · 3 条评论 · 2024年2月9日创建
`v2.1.2+cu118` and `v2.1.1+cu118` run into torchdata `ImportError: libssl.so.3: cannot open shared object file: No such file or directory`, that `v2.1.0+cu118` doesn't have an issue with
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1220 · 1 条评论 · 1 个 reaction · 2024年1月11日创建
Iterating a data pipe, created with random split, ends in error as the code tries to iterate past the data pipe lenght
未关闭
- 哪里不对？
难度 3/5 1-2 天新手友好度 48/100

meta-pytorch/data#1218 · 2024年1月4日创建
S3FileLoaderIterDataPipe buffer_size
未关闭
- 哪里不对？
难度 1/5 1 小时以内新手友好度 45/100

meta-pytorch/data#1215 · 2023年11月17日创建
Loading `.tfrecords` files that require a deserialization method
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1201 · 1 条评论 · 3 个 reaction · 2023年9月26日创建
Calling __iter__ twice on DataLoader2 causes hang with MPRS
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1198 · 2 条评论 · 2023年7月21日创建
Future of torchdata and dataloading
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 15/100

meta-pytorch/data#1196 · 63 条评论 · 58 个 reaction · 2023年7月17日创建
An iterator that can stream over stdin
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 38/100

meta-pytorch/data#1193 · 2023年7月4日创建
Dataloader2 with FullSyncIterDataPipe throws error during initilization
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 25/100

meta-pytorch/data#1190 · 3 条评论 · 2023年6月19日创建
FileExistsError when using `on_disk_cache` and multiple workers
未关闭
- 哪里不对？
难度 3/5 1-2 天新手友好度 45/100

meta-pytorch/data#1186 · 1 条评论 · 2023年6月16日创建
DataLoader2 Memory Behavior is very strange on Epoch Resets
未关闭
- 哪里不对？
难度 4/5 3-5 天新手友好度 35/100

meta-pytorch/data#1185 · 9 条评论 · 2023年6月14日创建
Roadmap for mixed chain of multithread and multiprocessing pipelines?
未关闭
- 哪里不对？
难度 5/5 一周以上新手友好度 20/100

meta-pytorch/data#1184 · 2 条评论 · 2023年6月14日创建

只显示最新的 100 条

这个页面只列出最近收录的部分。完整清单在高级筛选里，可以按语言、难度和预计耗时筛选。

前往高级筛选

meta-pytorch/data

meta-pytorch/data 对新手友好吗？

如何为 meta-pytorch/data 做贡献

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

哪里不对？

只显示最新的 100 条

把新 issue 发到你的邮箱