`tokenize_strings` drops everything after the first NUL byte

Abierto Apto para principiantes
#402 0 comentarios 0 reacciones 0 asignados Ver en GitHub

Los mantenedores suelen responder en 1 día

Nadie ha tomado este issue todavía.

Evaluación

Dificultad
2/5
Tiempo estimado
1-3 horas
Aptitud para principiantes
88/100
Tipo de issue
Error
Claridad
Bien especificado
Estado de actividad
Activo
Stack tecnológico
rust
Área
testing-qa

Línea de trabajo

Lee src/fuzzer/tokenize/mod.rs en las líneas enlazadas e inspecciona tokenize_strings y sus pruebas existentes. Añade una prueba unitaria para varias cadenas separadas por NUL, como ab\0cd\0ef, y luego ejecuta las pruebas de Rust pertinentes. Se considera terminado cuando la tokenización conserva cada sección después de un NUL y sigue fusionando los bytes NUL consecutivos.

Escrito por el modelo de indexación a partir del texto del issue.

Descripción

Where

Problem
The "smush sequences of 0" loop skips a byte whenever the last pushed byte is 0, without checking whether the current byte is 0. After the first NUL nothing is ever pushed again.

Impact
"ab\0cd\0ef" becomes "ab\0"; token_executables and friends yield at most one token per section.

Suggested fix
Skip only when *b == 0 && last == 0. The function is pure, so a unit test is cheap.

Status
Confirmed by reading the code at 79972db. Found by reading the code; not reproduced under SIMICS.

Lenguaje dominante
Rust
Estrellas
335
Forks
26
Merge medio
1 d 50 min
PR fusionados (30 d)
12

Preparar el entorno

Abrir en Codespaces

Inicia el contenedor de desarrollo del proyecto en tu navegador, con tu propia cuenta de GitHub.

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Más de intel/tsffs

Todos los issues de intel/tsffs

Issues similares

Más issues de Rust

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.