Reporting an issue with util.SizeEstimator, as requested.
メンテナーはふだん 2 日以内に返信
まだ誰も着手していません。
評価
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 初心者へのやさしさ
- 35/100
- issue の種類
- バグ
- 明瞭さ
- 説明が足りない
- 活発さ
- 活発
調査の方向性
Start by identifying whether the reported IndexError comes from PySpark's Jupyter kernel event loop or from Spark's SizeEstimator warning; the report includes both outputs but no reproduction steps or expected behavior. Read the traceback entry points in ipykernel_launcher.py and Tornado's asyncio loop, then check whether the warning is related. Done means reproducing the failure and establishing which component owns it before proposing a fix.
索引モデルが issue の本文から書いたものです。
説明
WARNING: An illegal reflective access operation has occurred (0 + 8) / 8]
WARNING: Illegal reflective access by org.apache.spark.util.SizeEstimator$ (file:/usr/lib/spark/jars/spark-core_2.12-3.5.3.jar) to field java.lang.ref.Reference.referent
WARNING: Please consider reporting this to the maintainers of org.apache.spark.util.SizeEstimator$
WARNING: Use --illegal-access=warn to enable warnings of further illegal reflective access operations
WARNING: All illegal access operations will be denied in a future release
Traceback (most recent call last):==================================(4 + 1) / 4]
File "", line 198, in _run_module_as_main
File "", line 88, in _run_code
File "/opt/conda/miniconda3/lib/python3.11/site-packages/ipykernel_launcher.py", line 18, in
app.launch_new_instance()
File "/opt/conda/miniconda3/lib/python3.11/site-packages/traitlets/config/application.py", line 1075, in launch_instance
app.start()
File "/opt/conda/miniconda3/lib/python3.11/site-packages/ipykernel/kernelapp.py", line 739, in start
self.io_loop.start()
File "/opt/conda/miniconda3/lib/python3.11/site-packages/tornado/platform/asyncio.py", line 211, in start
self.asyncio_loop.run_forever()
File "/opt/conda/miniconda3/lib/python3.11/asyncio/base_events.py", line 608, in run_forever
self._run_once()
File "/opt/conda/miniconda3/lib/python3.11/asyncio/base_events.py", line 1921, in _run_once
handle = self._ready.popleft()
^^^^^^^^^^^^^^^^^^^^^
IndexError: pop from an empty deque
- 主要言語
- Scala
- スター
- 44.3k
- フォーク
- 29.5k
- 平均マージ
- 8時間 43分
- マージ済み PR（30日）
- 1
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートあり
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
apache/spark のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 67/100
メンテナーはふだん 2 日以内に返信
-
[SQL][CONNECT] SparkConnectClient may drop metadata (auth headers) on retried/reattached RPCs if metadata is a non-list iterable対応中かも @zainmirzaaa が 63 日前に担当しました。 オープン
難易度 2/5 1〜3時間 初心者へのやさしさ 78/100
メンテナーはふだん 2 日以内に返信
-
[CORE] bug report: collision of resource profile id対応中かも @ybapat が 88 日前に担当しました。 オープン
難易度 1/5 1時間未満 初心者へのやさしさ 82/100
apache/spark#57498 · コメント 1 件 ·
メンテナーはふだん 2 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
apache/spark#57209 · コメント 7 件 ·
メンテナーはふだん 2 日以内に返信
-
Merge spark PR script hard blocks on JIRA対応中かも @holdenk が 2 日前に担当しました。 オープン
apache/spark#59693 · 担当者 1 名 ·
メンテナーはふだん 2 日以内に返信
似ている issue
-
requires-triage
難易度 2/5 1〜3時間 初心者へのやさしさ 82/100
apache/datafusion-comet#7176 ·
メンテナーはふだん 1 日以内に返信
-
kind:bug state:needs-triage
難易度 2/5 1〜3時間 初心者へのやさしさ 72/100
OpenLineage/OpenLineage#5100 · コメント 1 件 ·
メンテナーはふだん 4 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 73/100
http4s/http4s#8015 · コメント 2 件 ·
メンテナーはふだん 1 日以内に返信
-
難易度 2/5 1〜3時間 初心者へのやさしさ 68/100
testcontainers/testcontainers-scala#623 ·
メンテナーはふだん 1 日以内に返信
-
? - Needs Triage bug shuffle
難易度 2/5 1〜3時間 初心者へのやさしさ 76/100
NVIDIA/cudf-spark#16528 ·
メンテナーはふだん 1 日以内に返信