microsoft/cpprestsdk

utility::conversions::latin1_to_utf16 - Is there a bug for characters above 0x80?

Open

#101 geöffnet am 23. März 2016

Auf GitHub ansehen
 (1 Kommentar) (0 Reaktionen) (0 zugewiesene Personen)C++ (7.596 Stars) (1.670 Forks)batch import
bughelp wanted

Beschreibung

I've tried to use utility::conversions::latin1_to_utf16 to convert latin1 string to UTF-16. The string contained 'í' character (0xed). After converting it should become 0x00ed but it seems that converting method replaced it with 0xffed.

I think this may be result of casting signed char to utf16char and dest[i] = utf16char(s[i]); in asyncrt_utils.cpp should be replaced by dest[i] = utf16char(static_cast<unsigned char>(s[i])); to fix it. Can someone check if I'm right?

Contributor Guide

Tech Stack
cpp
Domain
apibackend
Issue Type
bug
SchwierigkeitGeschätzte Implementierungsschwierigkeit für neue Contributors, von 1 für sehr kleine Änderungen bis 5 für Expertenarbeit.
2
Geschätzte ZeitEin grober Zeitrahmen, um zu recherchieren, zu implementieren, zu testen und einen Pull Request vorzubereiten.
under 1 hour
AktivitätsstatusWie verfügbar das Issue gerade wirkt: frisch, aktiv, stale, blockiert oder wartet auf Maintainer-Input.
stale
KlarheitWie klar das Issue die erwartete Änderung, Akzeptanzkriterien und den nächsten Schritt erklärt.
clear
Voraussetzungen
basic C++ knowledgeunderstanding of signed/unsigned char
EinsteigerfreundlichkeitEin Score von 1 bis 100, der schätzt, wie zugänglich dieses Issue für First-Time Contributors ist.
70
Research-Richtung
The issue identifies a potential bug in `asyncrt utils.cpp` in the `utility::conversions::latin1 to utf16` function. The problem is that casting a signed `char` to `utf16char` (likely `unsigned short`) causes sign extension for characters above 0x80, resulting in incorrect values like 0xFFED instead of 0x00ED. The suggested fix is to use `static cast<unsigned char>` before casting to `utf16char`. To confirm, examine the source file `asyncrt utils.cpp` in the repository and test the conversion with a Latin 1 character like 'í' (0xED). The maintainer should verify the fix and ensure it doesn't break other use cases.