Hacktoberfest 2026：メンテナが10月に向けて印を付けた、オープンで初心者向けの issue。 Hacktoberfest の issue を見る

Remove dependency on httpcomponents.core5

オープン
  • 何か問題がありますか？
#2,266 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

メンテナーはふだん 1 日以内に返信

@rzo1 がすでに取り組んでいます。

2026年10月25日 から。

  • #2270 @rzo1 による — オープン

評価

難易度
5/5
見積もり時間
1週間以上
初心者へのやさしさ
15/100
issue の種類
リファクタリング
明瞭さ
明確に書かれている
活発さ
停滞
技術スタック
java
領域
backend, build-system, documentation

調査の方向性

Start with the affected imports listed in the issue, especially BasicURLNormalizer, then inspect core/pom.xml, the root pom.xml, the archetype shade configuration, and the “Migrating to 4.0.0” docs. The issue specifies the constants and query-string behavior to preserve; review the listed main and test files across core, tika, and warc. Done means removing the dependency and exclusion, preserving query output, and documenting the migration; linked pull request #2270 is already open.

索引モデルが issue の本文から書いたものです。

説明

BREAKING CHANGE core

See discussion on https://github.com/apache/stormcrawler/pull/2236/#issuecomment-6250049212

Context

After #2211, core depends only on org.apache.httpcomponents.core5:httpcore5. It uses it for HTTP header and status constants and for query-string parsing in BasicURLNormalizer. A whole library for that is not worth the dependency, and HttpComponents types in our code mean we can't change these classes in a 4.x minor release without breaking user code. 4.0.0 is the time to remove it.

What's affected

1. HttpHeaders constants

  • Main code: FeedParserBolt, JSoupParserBolt, SimpleFetcherBolt, SiteMapParserBolt, FetchOutcomes, AdaptiveScheduler, HttpRobotRulesParser, FileResponse, okhttp HttpProtocol, CharsetIdentification, plus ParserBolt (tika) and WARCRecordFormat (warc).
  • Tests: FeedParserBoltTest, JSoupParserBoltTest, SiteMapParserBoltTest, AdaptiveSchedulerTest, CharsetIdentificationTest, plus the tika and warc tests.
  • Constants used: ACCEPT, ACCEPT_LANGUAGE, AUTHORIZATION, CONTENT_LENGTH, CONTENT_TYPE, ETAG, IF_MODIFIED_SINCE, IF_NONE_MATCH, LAST_MODIFIED, LOCATION, PROXY_AUTHORIZATION, USER_AGENT.

2. HttpStatus constants

  • Used in FileResponse.
  • Constants used: SC_OK, SC_MULTIPLE_CHOICES, SC_BAD_REQUEST, SC_UNAUTHORIZED, SC_FORBIDDEN, SC_NOT_FOUND, SC_METHOD_FAILURE, SC_INTERNAL_SERVER_ERROR.

3. NameValuePair and URLEncodedUtils in BasicURLNormalizer

  • These sort the query parameters and remove the filtered ones.
  • The code calls URLEncodedUtils.parse(query, UTF_8, '&', ';') and URLEncodedUtils.format(pairs, UTF_8). That class is deprecated in httpcore5.
Actions
  1. Add StormCrawler-owned HttpHeaders and HttpStatus classes in core, for example under org.apache.stormcrawler.protocol. Each holds the constants listed above as plain public static final fields, with the same names and values as HttpCore 5. Switching to them is then an import change only.
  2. Update all the imports above in core, tika and warc, main and test code.
  3. Replace URLEncodedUtils and NameValuePair in BasicURLNormalizer with a small in-house parser and formatter. The output must stay exactly the same.
  4. Remove httpcore5 from core/pom.xml, and the httpcore5.version property from the root pom.xml if nothing else uses it.
  5. Remove the leftover <exclude>org/apache/http/**</exclude> from the archetype's shade configuration.
  6. Update the "Migrating to 4.0.0" docs. Core no longer brings in any HttpComponents classes, so users who relied on them transitively must declare the dependency themselves.
主要言語
Java
スター
1k
フォーク
295
平均マージ
1日 14時間
マージ済み PR（30日）
62

環境構築

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

apache/stormcrawler のほかの issue

apache/stormcrawler の issue をすべて見る

似ている issue

Java の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。