[BUG] parse_gomod crashes with AttributeError on comments or blank lines inside require/exclude blocks
I maintainer di solito rispondono entro 2 giorni
Valutazione
- Difficoltà
- 2/5
- Tempo stimato
- 1-3 ore
- Idoneità per principianti
- 35/100
Direzione di ricerca
Start with src/packagedcode/go_mod.py, where the issue identifies the failing require and exclude parsing paths, and inspect related Go module parser tests. Reproduce with comments or blank lines in both block types, then confirm parsing completes and dependencies are extracted without an AttributeError. Pull request #5490 is already open against this issue.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Problem Description
parse_gomod in src/packagedcode/go_mod.py raises AttributeError: 'NoneType' object has no attribute 'group' whenever a go.mod file contains comments (e.g., // indirect) or blank lines inside a multiline require (...) or exclude (...) block.
When running a scan via the CLI (scancode --package), this unhandled exception causes ScanCode to fail silently on the go.mod file, resulting in 0 detected packages and missing all Go dependencies.
Steps to Reproduce
- Create a minimal
go.modfile containing comments or an empty line in arequireblock (typical output fromgo mod tidy):
module example.com/hello
go 1.21
require (
// Direct dependencies
github.com/stretchr/testify v1.8.4
// Indirect dependencies
github.com/davecgh/go-spew v1.1.1
)
- Run package scan:
scancode --package --json-pp scan.json go.mod
-
Notice that
scan.jsonreportspackages: [](empty list, no dependencies extracted). -
Calling
parse_gomodorGoModHandler.parsedirectly reveals the traceback:
Traceback (most recent call last):
File "src/packagedcode/golang.py", line 53, in parse
gomods = go_mod.parse_gomod(location)
File "src/packagedcode/go_mod.py", line 133, in parse_gomod
ns_name = parsed_dep_link.group('ns_name')
AttributeError: 'NoneType' object has no attribute 'group'
Root Cause
In src/packagedcode/go_mod.py, lines 132-135:
parsed_dep_link = parse_dep_link(req)
ns_name = parsed_dep_link.group('ns_name')
namespace, _, name = ns_name.rpartition('/')
if parsed_dep_link:
When req is a blank line or comment line, preprocess(req) strips it down to an empty string "". Consequently, parse_dep_link(req) returns None.
However, parsed_dep_link.group('ns_name') is called on line 133 before the if parsed_dep_link: check on line 135.
The exact same bug also exists on line 150 in the exclude (...) block:
parsed_dep_link = parse_dep_link(exc)
ns_name = parsed_dep_link.group('ns_name')
namespace, _, name = ns_name.rpartition('/')
if parsed_dep_link:
Proposed Solution
Move the attribute access inside the if parsed_dep_link: conditional block for both require and exclude:
parsed_dep_link = parse_dep_link(req)
if parsed_dep_link:
ns_name = parsed_dep_link.group('ns_name')
namespace, _, name = ns_name.rpartition('/')
require.append(
GoModule(
namespace=namespace,
name=name,
version=parsed_dep_link.group('version'),
)
)
And similarly for exclude:
parsed_dep_link = parse_dep_link(exc)
if parsed_dep_link:
ns_name = parsed_dep_link.group('ns_name')
namespace, _, name = ns_name.rpartition('/')
exclude.append(
GoModule(
namespace=namespace,
name=name,
version=parsed_dep_link.group('version'),
)
)
Environment
- ScanCode version: 33.0.0rc1 / develop branch
- OS: All
- Lingua principale
- Python
- Stelle
- 2.7k
- Fork
- 871
- Merge medio
- 1g 10h
- PR unite (30g)
- 3
Preparare l'ambiente
- Include un Dockerfile o un file Docker Compose
- Ha un modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di aboutcode-org/scancode-toolkit
-
yarn.lock v1 with a scoped alias of an unscoped package yields no packages and no errorForse già presa @Shubham-dev-stack l’ha presa 6 giorni fa. Aperta
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
aboutcode-org/scancode-toolkit#5466 ·
I maintainer di solito rispondono entro 2 giorni
-
package-lock.json dependencies report file_references as a list inside a listForse già presa @Anbarasu2410 l’ha presa 9 giorni fa. Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 82/100
aboutcode-org/scancode-toolkit#5449 · 4 commenti ·
I maintainer di solito rispondono entro 2 giorni
-
scancode aborts when encountering a broken RPM archiveForse già presa @Ashutosh-Panda2004 l’ha presa 14 giorni fa. Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 62/100
aboutcode-org/scancode-toolkit#5407 · 3 commenti ·
I maintainer di solito rispondono entro 2 giorni
-
Four silent bugs: IsRequiredPhrase.license_expression returns None, find_in_path ignores later PATH changes, duplicate dict keys override license mappingsForse già presa Una pull request collegata a questa issue è aperta o già unita. Apertabug
Difficoltà 2/5 Mezza giornata Idoneità per principianti 65/100
aboutcode-org/scancode-toolkit#5405 · 1 commento ·
I maintainer di solito rispondono entro 2 giorni
-
parse_maintainer_name_email returns empty name and wrong email when string has "@" but no angle bracketsForse già presa @RohitSutar1823 l’ha presa 14 giorni fa. Apertabug
Difficoltà 2/5 1-3 ore Idoneità per principianti 84/100
aboutcode-org/scancode-toolkit#5402 ·
I maintainer di solito rispondono entro 2 giorni
Tutte le issue di aboutcode-org/scancode-toolkit
Issue simili
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
mohanraj00/entelos#200 ·
I maintainer di solito rispondono entro 1 giorno
-
Dead url in mise.tomlAperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 68/100
-
sweep
Difficoltà 2/5 1-3 ore Idoneità per principianti 85/100
bketelsen/truenas-mcp#77 ·
I maintainer di solito rispondono entro 1 giorno
-
Console writes URL credentials to the local log, though AGENTS.md says secrets never reach diskAperta
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 86/100
sandbox-quantum/switch#2163 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 74/100
openedx/xblock-lti-consumer#765 ·
I maintainer di solito rispondono entro 1 giorno