Hacktoberfest 2026:メンテナが10月に向けて印を付けた、オープンで初心者向けの issue。 Hacktoberfest の issue を見る

Cannot retrieve the full file content

オープン
#650 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

メンテナーはふだん 1 日以内に返信

まだ誰も着手していません。

評価

難易度
4/5
見積もり時間
3〜5日
初心者へのやさしさ
30/100
issue の種類
バグ
明瞭さ
説明が足りない
活発さ
停滞
技術スタック
java
領域
api

調査の方向性

レポートにはリポジトリのファイルもテストも記載されていないため、まず、提供された Java メソッドと wget コマンドを使用して Files content endpoint 経由のダウンロードを再現します。クライアントが中断されたレスポンスを処理する箇所を追跡し、受信サイズを Content-Length と比較します。完全な出力ファイルが途中で終了することなく取得できれば完了です。

索引モデルが issue の本文から書いたものです。

説明

bug sdk

I use this API to create a batch embedding task:
https://api.openai.com/v1/batches

After the task is completed, download the embedding result file based on the output_file_id using the following API:
https://api.openai.com/v1/files/{file_id}/content

Recently, the project ran into an issue. After investigation, it was found that the problem was caused by incomplete downloaded files resulting in missing data.
The program was set to request 5,000 items per batch, but the result file downloaded locally contained only a few hundred items and showed the following message:
Premature end of Content-Length delimited message body (expected: 391505535; received: 113446592

I also tried to retrieve the result file in chunks, but it still failed and I could only get partial data.
The following is the Java code I originally used to download the file. Before this, this method was able to download the result file completely.

public static int downloadFile(String outputFilePath, String url, Map<String, String> headers) throws IOException {
    HttpGet request = new HttpGet(url);
    
    if (headers != null) {
        headers.forEach(request::addHeader);
    }

    CloseableHttpResponse execute = httpClient.execute(request);
    int statusCode = execute.getStatusLine().getStatusCode();
    HttpEntity entity = execute.getEntity();
    InputStream content = entity.getContent();
    try (FileOutputStream outputStream = new FileOutputStream(outputFilePath)) {
        byte[] buffer = new byte[8192];
        int bytesRead;
        while ((bytesRead = content.read(buffer)) != -1) {
            outputStream.write(buffer, 0, bytesRead);
        }
        System.out.println("File downloaded to: " + outputFilePath);
    } catch (IOException e) {
        System.err.println("Error writing to file: " + e.getMessage());
    } finally {
        try {
            content.close();
        } catch (IOException e) {
            System.err.println("Error closing input stream: " + e.getMessage());
        }
    }
    return statusCode;
}

I tried testing the download on the server using wget. After downloading part of the file, it would close and then retry, repeating in a loop.

[root@scripts]# wget --header="Authorization: Bearer token" \
>      -O file.jsonl \
>      https://api.openai.com/v1/files/{fileId}/content
--2025-11-13 02:59:44--  https://api.openai.com/v1/files/{fileId}/content
Resolving api.openai.com (api.openai.com)... 162.159.140.245, 172.66.0.243
Connecting to api.openai.com (api.openai.com)|162.159.140.245|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 730814739 (697M) [application/octet-stream]
Saving to: ‘file.jsonl’

file.jsonl                                                         10%[===============>                                                                                                                                           ]  73.76M  25.1MB/s    in 2.9s    

2025-11-13 03:00:33 (25.1 MB/s) - Connection closed at byte 77340672. Retrying.

--2025-11-13 03:00:36--  (try: 2)  https://api.openai.com/v1/files/{fileId}/content
Connecting to api.openai.com (api.openai.com)|162.159.140.245|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 730814739 (697M) [application/octet-stream]
Saving to: ‘file.jsonl’

file.jsonl                                                          3%[====>                                                                                                                                                      ]  23.03M  24.7MB/s    in 0.9s    

2025-11-13 03:00:51 (24.7 MB/s) - Connection closed at byte 77340672. Retrying.

--2025-11-13 03:00:55--  (try: 3)  https://api.openai.com/v1/files/{fileId}/content
Connecting to api.openai.com (api.openai.com)|162.159.140.245|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 730814739 (697M) [application/octet-stream]
Saving to: ‘file.jsonl’

file.jsonl                                                          6%[========>                                                                                                                                                  ]  42.78M  19.3MB/s    in 2.2s    

2025-11-13 03:01:10 (19.3 MB/s) - Connection closed at byte 77340672. Retrying.
HTTP request sent, awaiting response... ^C
[root@scripts]# wc -l file.jsonl 
851 file.jsonl
主要言語
Kotlin
スター
1.5k
フォーク
268
平均マージ
11時間 31分
マージ済み PR(30日)
150

環境構築

Codespaces で開く

このプロジェクトの開発コンテナを、あなたの GitHub アカウントでブラウザ上に起動します。

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

openai/openai-java のほかの issue

openai/openai-java の issue をすべて見る

似ている issue

Kotlin の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。