`tokenize_strings` drops everything after the first NUL byte

未关闭 适合新手
#402 0 条评论 0 个 reaction 已指派 0 人 在 GitHub 查看

维护者通常 1 天内回复

还没有人认领这个 Issue。

评估

难度
2/5
预计耗时
1-3 小时
新手友好度
88/100
Issue 类型
缺陷
描述清晰度
描述清楚
活跃度
活跃
技术栈
rust
领域
testing-qa

调研方向

阅读链接行中的 src/fuzzer/tokenize/mod.rs,并检查 tokenize_strings 及其现有测试。为多个由 NUL 分隔的字符串添加单元测试,例如 ab\0cd\0ef,然后运行相关的 Rust 测试。完成标准是:分词会保留 NUL 后的每个部分,同时仍将连续的 NUL 字节合并。

由索引模型根据 Issue 内容生成。

描述

Where

Problem
The "smush sequences of 0" loop skips a byte whenever the last pushed byte is 0, without checking whether the current byte is 0. After the first NUL nothing is ever pushed again.

Impact
"ab\0cd\0ef" becomes "ab\0"; token_executables and friends yield at most one token per section.

Suggested fix
Skip only when *b == 0 && last == 0. The function is pure, so a unit test is cheap.

Status
Confirmed by reading the code at 79972db. Found by reading the code; not reproduced under SIMICS.

主要语言
Rust
星标
335
派生
26
平均合并
1 天 50 分钟
30 天内合并 PR
12

环境准备

在 Codespaces 中打开

在浏览器里用你自己的 GitHub 账号启动这个项目的开发容器。

  • 提供 Dockerfile 或 Docker Compose 文件
  • 没有 Pull Request 模板
  • 阅读贡献指南

从这里开始

  1. 先读完整个 Issue,再读项目的贡献指南。
  2. 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
  3. Fork 仓库,在一个分支上完成修改。
  4. 提交 Pull Request,并在描述里引用这个 Issue 编号。

intel/tsffs 的其他 Issue

查看 intel/tsffs 的全部 Issue

相似的 Issue

更多 Rust Issue

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。