Hacktoberfest 2026：メンテナが10月に向けて印を付けた、オープンで初心者向けの issue。 Hacktoberfest の issue を見る

[Bug] ChatGLMTokenizer special token property getters and setters are broken

オープン 初心者向け
  • 何か問題がありますか？
#14,291 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

メンテナーはふだん 1 日以内に返信

@GiGiKoneti がすでに取り組んでいます。

2026年7月25日 から。

  • #14292 @GiGiKoneti による — オープン

評価

難易度
2/5
見積もり時間
1〜3時間
初心者へのやさしさ
84/100
issue の種類
バグ
明瞭さ
明確に書かれている
活発さ
静か
技術スタック
python, pytorch
領域
machine-learning

調査の方向性

src/diffusers/pipelines/kolors/tokenizer.py を開き、ChatGLMTokenizer の pad_token、unk_token、eos_token プロパティを確認してください。報告されているデフォルト値と、tokenizer.pad_token = "<custom_pad>" のような代入を再現してください。完了の条件は、getter が正しいデフォルト値を返し、setter を通じて代入された値を反映することです。

索引モデルが issue の本文から書いたものです。

説明

Describe the bug

In ChatGLMTokenizer (src/diffusers/pipelines/kolors/tokenizer.py), the property getters for pad_token, unk_token, and eos_token hardcode return values (e.g. pad_token returns "<unk>" instead of "<pad>"). Furthermore, assigning new special token values (e.g. tokenizer.pad_token = "<custom_pad>") has no effect on the property getter because the custom setters update private attributes (_pad_token) while the getters ignore them or use hardcoded strings.

Reproduction
from diffusers.pipelines.kolors import ChatGLMTokenizer

# Instantiating ChatGLMTokenizer or viewing properties
# tokenizer.pad_token returns '<unk>' instead of '<pad>'
# Setting tokenizer.pad_token = '<custom_pad>' does not update tokenizer.pad_token
System Info
  • Diffusers version: 0.36.0.dev0
  • Python version: 3.11
  • PyTorch version: 2.x
Who can help?

@yiyixuxu @asomoza @DN6

主要言語
Python
スター
34.7k
フォーク
7.4k
平均マージ
4日 38分
マージ済み PR（30日）
51

環境構築

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

huggingface/diffusers のほかの issue

huggingface/diffusers の issue をすべて見る

似ている issue

Python の issue をもっと見る

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。