Pass dropout once for whole neural-network
还没有人认领这个 Issue。
评估
- 难度
- 4/5
- 预计耗时
- 3-5 天
- 新手友好度
- 35/100
- Issue 类型
- 功能
- 描述清晰度
- 需要澄清
- 活跃度
- 停滞
- 技术栈
- jupyter-notebook, machine-learning
调研方向
未指定文件或测试。首先定位层 dropout 率的配置位置,以及神经网络的组装方式;当可以提供一个网络级 dropout 设置,并将其一致地应用于相关层时,即表示完成。
由索引模型根据 Issue 内容生成。
描述
Currently, we have to set the dropout rate for each layer, and ideally we should only need to set it once.
- 主要语言
- Jupyter Notebook
- 星标
- 24
- 派生
- 6
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 没有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
PAIR-code/tiny-transformers 的其他 Issue
-
难度 3/5 1-2 天 新手友好度 45/100
-
难度 5/5 一周以上 新手友好度 25/100
-
Add support for cross-entropy loss with integer labels可能重新可做 @aliciafmachado 于 604 天前认领,目前没有进行中的 PR。 未关闭enhancement
PAIR-code/tiny-transformers#60 · 已指派 1 人 ·
-
Refactor transformer_gtensor.ts and gpt2.ts to share functions in a common file可能重新可做 @aliciafmachado 于 636 天前认领,目前没有进行中的 PR。 未关闭enhancement
PAIR-code/tiny-transformers#54 · 已指派 1 人 ·
-
Add GPT2 tokenizer可能重新可做 @aliciafmachado 于 637 天前认领,目前没有进行中的 PR。 未关闭
PAIR-code/tiny-transformers#52 · 已指派 1 人 ·
查看 PAIR-code/tiny-transformers 的全部 Issue
相似的 Issue
-
ManualStateFeatureWeighting accepts non-positive weights leading to NaN/inf loss可能已有人在做 @Shivampal157 今天认领。 未关闭
难度 2/5 1-3 小时 新手友好度 80/100
mllam/neural-lam#787 · 1 条评论 ·
维护者通常 2 天内回复
-
Angle brackets are not tokenizer delimiters, so `<http://…>` fuses the opening bracket to the URL未关闭
难度 2/5 1-3 小时 新手友好度 65/100
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 68/100
maziyarpanahi/openmed#4204 · 1 条评论 ·
维护者通常 3 天内回复
-
难度 2/5 1-3 小时 新手友好度 70/100
rvandewater/YAIB#206 ·
-
难度 2/5 1-3 小时 新手友好度 66/100