Prism::Translation::RubyParser may fail to parse code containing multibyte characters
維護者通常 1 天內回覆
還沒有人認領這個 Issue。
評估
研究方向
從lib/prism/translation/ruby_parser.rb開始，尤其檢查回報中gap.match?呼叫附近的Compiler#attach_comments。使用 issue 中的兩個RubyParser.parse輸入重現失敗，接著檢查附近的註解附加邏輯和相關的現有測試。完成條件是：第一個情況只回傳註解文字，第二個情況解析時不會擲出例外。
由索引模型根據 Issue 內容生成。
描述
Prism::Translation::RubyParser may fail to parse code containing multibyte characters (e.g. CJK).
Reproduction
- Ruby: 4.0.9
- Prism: 05aa35a (same for v2.1.0)
require 'bundler/inline'
gemfile do
source 'https://rubygems.org'
gem 'prism', github: 'ruby/prism', ref: '05aa35afebb26ee8c11f7fc393065d4f0ba0b6f2'
gem 'sexp_processor'
end
# does not raise an error but parsed comments contain both multibyte chars and def
r = Prism::Translation::RubyParser.parse("# ああああああ\ndef x; end\n")
p r.comments #=> "# ああああああ\ndef x; end\n"
# raises NoMethodError
Prism::Translation::RubyParser.parse("# あああああああ\ndef x; end\n")
Result:
"# ああああああ\ndef x; end\n"
/path/to/prism-05aa35afebb2/lib/prism/translation/ruby_parser.rb:1580:in 'block in Prism::Translation::RubyParser::Compiler#attach_comments': undefined method 'match?' for nil (NoMethodError)
if gap.match?(/\S/)
^^^^^^^
from /path/to/prism-05aa35afebb2/lib/prism/translation/ruby_parser.rb:1577:in 'Array#reverse_each'
from /path/to/prism-05aa35afebb2/lib/prism/translation/ruby_parser.rb:1577:in 'Prism::Translation::RubyParser::Compiler#attach_comments'
from /path/to/prism-05aa35afebb2/lib/prism/translation/ruby_parser.rb:544:in 'Prism::Translation::RubyParser::Compiler#visit_def_node'
(snip)
Expectation
- In the first case, it returns
"# ああああああ\n" - In the second case, no error raises
- 主要語言
- C
- 星號
- 1k
- 分支
- 202
- 平均合併
- 5 小時 55 分鐘
- 30 天內合併 PR
- 85
環境準備
- 沒有 Dockerfile 或 Docker Compose 檔案
- 沒有 Pull Request 範本
- 閱讀貢獻指南
從這裡開始
- 先讀完整個 Issue，再讀專案的貢獻指南。
- 在 Issue 下留言說明你要接手 —— 這能避免兩個人做同樣的事。
- Fork 儲存庫，在一個分支上完成修改。
- 送出 Pull Request，並在描述裡引用這個 Issue 編號。
ruby/prism 的其他 Issue
-
Prism::Translation::Parser raises NoMethodError for a method with a &nil parameter and a body可能已有人在做 @bbatsov 今天認領。 未關閉
難度 2/5 1-3 小時 新手友好度 82/100
維護者通常 1 天內回覆
-
Heredoc and outer-context recovery at recursion depth / stack budget limit causes location underflow未關閉
難度 4/5 3-5 天 新手友好度 43/100
維護者通常 1 天內回覆
-
難度 4/5 3-5 天 新手友好度 45/100
維護者通常 1 天內回覆
-
難度 2/5 1-3 小時 新手友好度 1/100
維護者通常 1 天內回覆
-
難度 4/5 3-5 天 新手友好度 48/100
維護者通常 1 天內回覆
相似的 Issue
-
難度 2/5 1-3 小時 新手友好度 76/100
維護者通常 1 天內回覆
-
難度 2/5 1-3 小時 新手友好度 78/100
-
area: recompiler area: runtime kind: bug preview-effort: small priority: low
難度 2/5 1-3 小時 新手友好度 74/100
維護者通常 1 天內回覆
-
bug
難度 2/5 1-3 小時 新手友好度 78/100
維護者通常 1 天內回覆
-
難度 2/5 1-3 小時 新手友好度 74/100