crawl: print the real page number
还没有人认领这个 Issue。
评估
调研方向
首先定位记录当前关系页面编号的 crawl 代码,并跟踪查询的起始页和结束页是如何应用的。更新日志记录,使其报告真实的页码,然后运行 crawler 可用的测试或执行一次具有代表性的 crawl,以验证第 1-10 页的进度输出。
由索引模型根据 Issue 内容生成。
描述
Due to GitHub API limitations, we are querying pages 1-10 and changing the query start and end page all the time. Currently, we are printing. The relational page number (1-10) and not the real one:
Change the logging to log the real page number to track progress.
- 主要语言
- Python
- 星标
- 746
- 派生
- 46
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 没有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue,再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库,在一个分支上完成修改。
- 提交 Pull Request,并在描述里引用这个 Issue 编号。
CycodeLabs/raven 的其他 Issue
-
`library` folder not included in the source distribution可能已有人在做 关联的 PR 仍在进行中或已合并。 未关闭query-library
难度 2/5 1-3 小时 新手友好度 62/100
CycodeLabs/raven#183 · 2 条评论 ·
-
报错未关闭
难度 4/5 3-5 天 新手友好度 15/100
CycodeLabs/raven#199 ·
-
难度 4/5 3-5 天 新手友好度 35/100
CycodeLabs/raven#188 · 2 条评论 · 1 个 reaction ·
-
feature
难度 4/5 3-5 天 新手友好度 25/100
CycodeLabs/raven#119 · 6 条评论 ·
-
feature indexer
难度 3/5 1-2 天 新手友好度 45/100
CycodeLabs/raven#114 ·
相似的 Issue
-
难度 2/5 1-3 小时 新手友好度 68/100
Arekkazu/sgpmp-backend#744 ·
维护者通常 1 天内回复
-
agent/reviewer
难度 2/5 1-3 小时 新手友好度 78/100
projectbluefin/utah-packages#634 ·
维护者通常 1 天内回复
-
enhancement good first issue help wanted
难度 2/5 1-2 天 新手友好度 78/100
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 68/100
home-assistant/core#188613 ·
维护者通常 1 天内回复
-
Website未关闭good first issue
难度 2/5 1-3 小时 新手友好度 91/100
TanbirRamim/open-source-radar#314 ·
维护者通常 1 天内回复