Preprocessing script (fixing inconsistent DEA entries)

オープン

#29 2021年3月26日に作成コメント 3 件リアクション 0 件担当者 0 名 GitHub で見る

まだ誰も着手していません。

評価

難易度: 4/5
見積もり時間: 3〜5日
初心者へのやさしさ: 42/100

issue の種類: リファクタリング
明瞭さ: おおむね明確
活発さ: 停滞
技術スタック: python
領域: data-engineering

調査の方向性

compile_cost_assumption.py から始めて、現在 DEA の入力がどのようにパースされているか、特に Hydrogen to Jet Fuel のデータを調査します。一貫した前処理済み入力形式を定義し、技術固有の処理をそこへ移します。完了の基準は、コンパイルスクリプトの肥大化が抑えられ、正規化されたデータを一貫して利用できることです。

索引モデルが issue の本文から書いたものです。

説明

feature

I'm becoming a bit frustrated by the inconsistent data format of the DEA input data.

E.g.: Column orders and names being inconsistent, most unchanging values are filled across all years while sometimes they are not. The inconsistencies for "Hydrogen to Jet Fuel" are e.g. at an extend were I simply started extracting the numbers by hand rather than automatically =/

The inconsistencies also make the compile_cost_assumption.py script more and more bloated and unreadable.

Suggestion:
Have a pre-processing script which is responsible for creating a consistent input data format and move all "if this tech than special treatment" cases there.

主要言語: Python
スター: 130
フォーク: 59
PR マージ指標: 30日以内にマージされた PR はありません

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

はじめの一歩

issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
リポジトリをフォークし、ブランチを切って変更します。
issue 番号を参照したプルリクエストを送ります。

PyPSA/technology-data のほかの issue

Very low investment costs for methanol steam reforming オープン

bug

難易度 2/5 1〜3時間初心者へのやさしさ 65/100

PyPSA/technology-data#271 · 2026年4月24日に作成
data: Add ACER's CONE study オープン

難易度 3/5 1〜2日初心者へのやさしさ 45/100

PyPSA/technology-data#284 · 2026年9月2日に作成
energy_penalty() applies the capture energy penalty to only one of six technologies オープン

bug

難易度 3/5 1〜2日初心者へのやさしさ 68/100

PyPSA/technology-data#283 · 2026年8月31日に作成
Interpolating data for higher-resolution pathway studies オープン

feature

難易度 4/5 3〜5日初心者へのやさしさ 38/100

PyPSA/technology-data#282 · コメント 4 件 · 2026年8月14日に作成
Silent data mutation, missing provenance in the compile pipeline and DEA URL (404) オープン

bug

難易度 5/5 1週間以上初心者へのやさしさ 25/100

PyPSA/technology-data#281 · 2026年7月31日に作成

PyPSA/technology-data の issue をすべて見る

似ている issue

slack-gif-creator: validate_gif() multiplies the last frame's duration by the frame count, so reported duration/fps are wrong (1.0s GIF reported as 1.8s) オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

anthropics/skills#1811 · コメント 1 件 · 2026年9月23日に作成
App fails to start with gradio 6 (allowed by `gradio>=5.49.1`) オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

speaches-ai/speaches#678 · 2026年9月23日に作成
ModuleNotFoundError: No module named 'mcp.server.fastmcp'. オープン

bug

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

datalayer/mcp-compose#42 · 2026年9月23日に作成
import spacy fails with ModuleNotFoundError: No module named 'click' オープン

難易度 2/5 1〜3時間初心者へのやさしさ 75/100

conda-forge/spacy-feedstock#177 · 2026年9月23日に作成
humaneval: extract_function_body corrupts a fenced body-only reply, so the same correct code scores INCORRECT fenced and CORRECT unfenced オープン

難易度 2/5 1〜3時間初心者へのやさしさ 70/100

UKGovernmentBEIS/inspect_evals#2523 · 2026年9月23日に作成

Python の issue をもっと見る