[io] pcl::io::raw_open opens files in text mode on Windows, so raw_read alters binary data
メンテナーはふだん 3 日以内に返信
まだ誰も着手していません。
評価
- 難易度
- 1/5
- 見積もり時間
- 1時間未満
- 初心者へのやさしさ
- 82/100
- issue の種類
- バグ
- 明瞭さ
- 明確に書かれている
- 活発さ
- 活発
- 技術スタック
- cpp
調査の方向性
pcl/io/low_level_io.h の、raw_open が ::_open をラップする _WIN32 分岐から始め、それらのオーバーロードを POSIX のものと比較する。issue と同様に 0D 0A と 1A を含む小さなバイナリファイルで再現し、raw_read のバイト数を確認する。次に、影響を受ける呼び出し元である binary_compressed ファイル用の PCDReader::read と LineRGBD::loadTemplates を動かす。完了の条件は、Windows の raw_read がファイルのバイトを変更せずに返し、CRLF や 0x1A で切り捨てなくなっていることである。
索引モデルが issue の本文から書いたものです。
説明
Describe the bug
On Windows, pcl::io::raw_open (pcl/io/low_level_io.h) calls ::_open without _O_BINARY. The CRT default translation mode is text (_O_TEXT, unless the application changes _fmode). As a result, pcl::io::raw_read on that descriptor:
- collapses every CR LF pair into LF, compacting the buffer in place, and returns fewer bytes;
- stops at a 0x1A byte.
POSIX open has no text mode, so the same code reads different bytes on Linux and Windows.
PCL reads binary data through these wrappers: PCDReader::read for binary_compressed files and LineRGBD::loadTemplates. raw_open/raw_read are also public API for user code.
Expected behavior
raw_read returns the file's bytes unchanged, as it does on POSIX.
Current Behavior
A file holds the bytes 0D 0A 00 01 40 00 00 02, and 4 bytes are read from it:
| open flags | _read returns | buffer
| O_RDONLY (what raw_open does) | 3 | 0A 00 01 01
| O_RDONLY \| _O_BINARY | 4 | 0D 0A 00 01
With the bytes 1A 0A 00 00, text mode returns 0.
Consequences:
LineRGBD::loadTemplatesreads each.sqmmtentry withraw_read (ltm_fd, buffer, fsize)and checks only for-1. After the first0D 0Apair, every following byte is shifted by one and the tail holds stale bytes.sqmmt.deserializethen reads corrupted data.PCDReader::readreads the 4-byte compressed size of abinary_compressedfile withraw_readand checks onlynum_read < 0. On Windows the value is used only for the file-size check, because the whole file is mapped. When translation makes the value larger, a valid file is rejected with "Corrupted PCD file. The file is smaller than expected!". For example, a compressed size of0x01000A0D(16 779 789 bytes) is read as0x0101000A, which is 62 973 bytes too large.
To Reproduce
#include <pcl/io/low_level_io.h>
#include <fcntl.h>
#include <cstdio>
#include <fstream>
int main ()
{
const unsigned char bytes[] = {0x0D, 0x0A, 0x00, 0x01};
std::ofstream ("crlf.bin", std::ios::binary).write (reinterpret_cast<const char*> (bytes), sizeof (bytes));
int fd = pcl::io::raw_open ("crlf.bin", O_RDONLY);
unsigned char buf[4] = {};
const auto n = pcl::io::raw_read (fd, buf,
pcl::io::raw_close (fd);
std::printf ("n=%d %02X %02X %02X %02X\n",, buf[1], buf[2], buf[3]);
// Linux: n=4 0D 0A 00 01
// Windows: n=3 0A 00 01 01
}
Your Environment (please complete the following information):
- OS: Windows 11
- Compiler: MSVC (Visual Studio 2026)
- PCL Version: 1.12.1 and current master
Possible Solution
Open in binary mode inside the Windows wrappers. O_BINARY does not exist on POSIX, so callers cannot pass it portably.
#ifdef _WIN32
# include <fcntl.h> // _O_BINARY
...
inline int raw_open(const char * pathname, int flags, int mode)
{
return ::_open(pathname, flags | _O_BINARY, mode);
}
inline int raw_open(const char * pathname, int flags)
{
return ::_open(pathname, flags | _O_BINARY);
}
- 主要言語
- C++
- スター
- 11.2k
- フォーク
- 4.7k
- 平均マージ
- 6日 13時間
- マージ済み PR(30日)
- 10
環境構築
- Dockerfile・Docker Compose ファイルなし
- プルリクエストのテンプレートなし
- コントリビューションガイドを読む
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
PointCloudLibrary/pcl のほかの issue
-
難易度 2/5 1〜3時間 初心者へのやさしさ 67/100
PointCloudLibrary/pcl#6509 · コメント 1 件 ·
メンテナーはふだん 3 日以内に返信
-
kind: bug status: triage
難易度 4/5 3〜5日 初心者へのやさしさ 48/100
PointCloudLibrary/pcl#6537 ·
メンテナーはふだん 3 日以内に返信
-
[cmake] QHULL/FLANN dll missing when linking single module対応中かも @SIDDARTHAREDDY8 が 5 日前に担当しました。 オープンkind: bug module: cmake
難易度 3/5 半日 初心者へのやさしさ 50/100
PointCloudLibrary/pcl#6522 · コメント 1 件 ·
メンテナーはふだん 3 日以内に返信
-
kind: bug status: triage
難易度 4/5 3〜5日 初心者へのやさしさ 35/100
PointCloudLibrary/pcl#6395 ·
メンテナーはふだん 3 日以内に返信
-
[sample_consensus] Migrated the SSE and AVX implementations of countWithinDistance to RISC-V RVV 1.0オープンkind: request status: triage
難易度 5/5 1週間以上 初心者へのやさしさ 25/100
PointCloudLibrary/pcl#6385 · リアクション 1 件 ·
メンテナーはふだん 3 日以内に返信
PointCloudLibrary/pcl の issue をすべて見る
似ている issue
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 62/100
nextcloud/passman-android#214 ·
メンテナーはふだん 1 日以内に返信
-
難易度 1/5 1〜3時間 初心者へのやさしさ 62/100
メンテナーはふだん 1 日以内に返信
-
feature wsl2
難易度 2/5 1〜3時間 初心者へのやさしさ 80/100
microsoft/WSL#42306 · コメント 3 件 ·
メンテナーはふだん 1 日以内に返信
-
2026.11.0 fails to install on Intel macOS: requirements.txt pins cryptography==50.0.2 for Darwin x86_64再び着手できるかも このイシューのプルリクエストはマージされずにクローズされました。 オープン
難易度 1/5 1時間未満 初心者へのやさしさ 87/100
esphome/esphome#22892 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信
-
bug
難易度 2/5 1〜3時間 初心者へのやさしさ 77/100
distante/esphome-components#50 · コメント 1 件 ·
メンテナーはふだん 1 日以内に返信