Hacktoberfest 2026: những issue maintainer đã đánh dấu cho tháng Mười, đang mở và phù hợp người mới. Xem issue Hacktoberfest

unexpand: final newline prevents conversion of leading Unicode blanks

Đã đóng Phù hợp với người mới
  • Có gì không ổn?
#15,898 0 bình luận 0 reaction 0 người được giao Xem trên GitHub

Maintainer thường phản hồi trong vòng 1 ngày

Một pull request liên quan đã được merge.

  • #15925 của @Ybucaille — đã merge

Đánh giá

Độ khó
2/5
Thời gian dự kiến
1-3 giờ
Mức phù hợp với người mới
86/100
Loại issue
Lỗi
Độ rõ ràng
Đặc tả rõ ràng
Mức độ hoạt động
Sôi nổi
Công nghệ
rust
Lĩnh vực
cli

Hướng nghiên cứu

Bắt đầu tại src/uu/unexpand/src/unexpand.rs, ở đường xử lý nhanh của unexpand_buf quanh các dòng 512–523, rồi theo dõi cách nó xử lý đầu vào kết thúc bằng ký tự xuống dòng trước khi xử lý khoảng trắng Unicode. Tái hiện bằng lệnh trong issue và so sánh chế độ mặc định với -a; hoàn thành khi chế độ mặc định chuyển các ký tự U+3000 ở đầu thành một tab có ký tự xuống dòng cuối cùng, và các kiểm thử unexpand liên quan đều đạt.

Do mô hình lập chỉ mục viết ra từ nội dung của issue.

Mô tả

U - unexpand

In a UTF-8 locale, unexpand leaves leading Unicode blanks unchanged when the line ends in a newline. Removing that newline makes the same blanks convert to a tab. GNU coreutils 9.12 converts them in both cases.

Reproduced on main c1f172886c6643f61ffde5a1ce3db0aaf14e182b on Linux, in both debug and release builds:

python3 -c 'print("\u3000" * 4 + "X")' |
  LC_ALL=C.UTF-8 coreutils unexpand | od -An -tx1

The input is four U+3000 IDEOGRAPHIC SPACE characters (eight display columns), followed by X and a newline.

Expected, as printed by GNU unexpand 9.12:

09 58 0a

Actual:

e3 80 80 e3 80 80 e3 80 80 e3 80 80 58 0a

The same command with unexpand -a produces the expected tab. So does default unexpand if the final newline is omitted. --first-only has the same failure as default mode.

The first fast path in unexpand_buf (src/uu/unexpand/src/unexpand.rs:512-523) checks only for ASCII space and tab before copying a newline-terminated buffer unchanged. This bypasses the Unicode blank handling later in the function.

I compared 416 cases against GNU 9.12 across 13 Unicode blank characters, two UTF-8 locales, file/pipe input, with/without a final newline, and four option sets. Both uutils builds had the same 104 mismatches, all in default/--first-only mode with a final newline. All 44 existing unexpand integration tests pass.

Ngôn ngữ chính
Rust
Star
24.3k
Fork
2.1k
Merge trung bình
1 ngày 21 giờ
Pull request đã merge (30 ngày)
362

Chuẩn bị môi trường

Mở trong Codespaces

Khởi chạy dev container của dự án ngay trên trình duyệt, bằng tài khoản GitHub của bạn.

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Issue khác của uutils/coreutils

Tất cả issue của uutils/coreutils

Issue tương tự

Thêm issue về Rust

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.