Suggestion to speed up initial JSON import
还没有人认领这个 Issue。
评估
- 难度
- 5/5
- 预计耗时
- 一周以上
- 新手友好度
- 25/100
- Issue 类型
- 功能
- 描述清晰度
- 需要澄清
- 活跃度
- 停滞
- 技术栈
- sqlite, typescript
- 领域
- databases
调研方向
该 issue 未指明任何文件、测试或入口点。首先在 Ubuntu 上的 ScanCode Workbench 3.0.0b2 中复现一次 JSON 导入，并观察 SQLite 文件的增长情况，然后将当前的增量行为与提议的纯内存导入进行比较；完成标准是测得导入速度有所提升，并且数据库输出保持不变。
由索引模型根据 Issue 内容生成。
描述
Description
When I import a JSON file, I noted that the sqlite DB file seems to be flushed on disk incrementally and I can see the sqlite file grow as the import goes.
I have an idea: if you import to a memory only database and once this is all imported and only then you save on disk this may speed things up? this may be worth a try
System configuration
Operating System:
Linux Ubuntu 16.04 x86_64
ScanCode Workbench Version:
3.0.0b2
- 主要语言
- TypeScript
- 星标
- 174
- 派生
- 81
- PR 合并指标
- 30 天内没有已合并 PR
环境准备
- 没有 Dockerfile 或 Docker Compose 文件
- 有 Pull Request 模板
- 阅读贡献指南
从这里开始
- 先读完整个 Issue，再读项目的贡献指南。
- 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
- Fork 仓库，在一个分支上完成修改。
- 提交 Pull Request，并在描述里引用这个 Issue 编号。
aboutcode-org/scancode-workbench 的其他 Issue
-
reference scancode.io in README prominently可能重新可做 关联的 PR 已关闭且未合并。 未关闭
难度 2/5 1 小时以内 新手友好度 35/100
aboutcode-org/scancode-workbench#639 · 4 条评论 ·
-
难度 2/5 1-3 小时 新手友好度 42/100
aboutcode-org/scancode-workbench#635 · 4 条评论 ·
-
good first issue
难度 3/5 1-2 天 新手友好度 35/100
aboutcode-org/scancode-workbench#634 · 2 条评论 ·
-
难度 4/5 3-5 天 新手友好度 25/100
aboutcode-org/scancode-workbench#632 · 5 条评论 · 1 个 reaction ·
-
难度 5/5 一周以上 新手友好度 25/100
查看 aboutcode-org/scancode-workbench 的全部 Issue
相似的 Issue
-
bug ready-for-agent
难度 2/5 1-3 小时 新手友好度 73/100
PhyberApex/kuroshiro#1687 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 73/100
microsoft/monaco-editor#5563 ·
维护者通常 1 天内回复
-
难度 2/5 1-3 小时 新手友好度 78/100
维护者通常 1 天内回复
-
bug
难度 1/5 1 小时以内 新手友好度 86/100
awslabs/visual-asset-management-system#937 ·
维护者通常 1 天内回复
-
enhancement
难度 2/5 1-3 小时 新手友好度 72/100