Almost all non-utf8 encodings are incorrect
I maintainer di solito rispondono entro 1 giorno
Nessuno ha ancora preso questa issue.
- #754 di @deepakganesh78 — chiusa senza merge
Valutazione
- Difficoltà
- 4/5
- Tempo stimato
- 3-5 giorni
- Idoneità per principianti
- 35/100
- Tipo di issue
- Bug
- Chiarezza
- Abbastanza chiara
- Stato di attività
- Tranquilla
- Stack tecnologico
- javascript, node.js
- Ambito
- backend
Direzione di ricerca
Inizia dai punti di ingresso bodyParser.urlencoded(), bodyParser.json() e bodyParser.text() e riproduci gli esempi windows-1252 e utf-16le dell’issue. Confronta il loro comportamento di decodifica con le mappature collegate di Encoding Standard; il lavoro è completato quando le codifiche legacy supportate seguono la specifica e la decodifica UTF-16 non produce stringhe non ben formate.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Descrizione
Even the most basic windows-1252 which latin1 and ascii alias to:
const express = require('express')
const bodyParser = require('body-parser')
const app = express()
app.use(bodyParser.urlencoded())
app.use(bodyParser.json())
app.use(bodyParser.text())
app.use(function (req, res) {
res.setHeader('Content-Type', 'text/plain')
res.write('you posted:\n')
res.write(`${escape(req.body)}\n`)
res.end(String(req.body))
})
app.listen(8080, async () => {
const res = await fetch('http://localhost:8080/', {
method: 'POST',
headers: { 'content-type': 'text/plain; charset=windows-1252' },
body: Uint8Array.of(0x80, 0x81, 0x82, 0x83, 0x8d, 0x9e, 0x9f)
})
console.log(await res.text())
})
Results in:
you posted:
%u20AC%uFFFD%u201A%u0192%uFFFD%u017E%u0178
€�‚ƒ�žŸ
But it should be €\x81‚ƒ\x8DžŸ instead, with no replacement chars
i.e. %u20AC%81%u201A%u0192%8D%u017E%u0178 escaped
See Encoding Standard: https://encoding.spec.whatwg.org/
All characters are mapped in https://encoding.spec.whatwg.org/index-windows-1252.txt, including 0x81 and 0x8D.
Same goes for other encodings: half of single-bytes are mapped incorrectly and contradict the spec: all of windows-* family except windows-1256, koi8-u, macintosh.
All of legacy multi-bytes that are supported also behave incorrectly
UTF-16 also behaves incorrectly:
const express = require('express')
const bodyParser = require('body-parser')
const app = express()
app.use(bodyParser.urlencoded())
app.use(bodyParser.json())
app.use(bodyParser.text())
app.use(function (req, res) {
res.setHeader('Content-Type', 'text/plain')
res.write('you posted:\n')
res.write(`Is well formed: ${req.body.isWellFormed()}\n`)
res.write(`${escape(req.body)}\n`)
res.end(String(req.body))
})
app.listen(8080, async () => {
const res = await fetch('http://localhost:8080/', {
method: 'POST',
headers: { 'content-type': 'text/plain; charset=utf-16le' },
body: Uint8Array.of(0, 0xd8, 0, 0xd8)
})
console.log(await res.text())
})
Results in:
you posted:
Is well formed: false
%uD800%uD800
��
But per spec it should never produce non-well-formed strings and should instead have produced replacements chars, i.e. %uFFFD%uFFFD escaped
See spec: https://encoding.spec.whatwg.org/#shared-utf-16-decoder
This could have potential security impact
These decoders are enabled in the default configuration
The default utf-8 decoder never produces non-well-formed strings, but the client can force that by specifying utf-16 encoding, while per spec that shouldn't be possible (produced strings should be always well-formed)
- Lingua principale
- JavaScript
- Stelle
- 5.5k
- Fork
- 802
- Merge medio
- 7h 54m
- PR unite (30g)
- 8
Preparare l'ambiente
- Nessun Dockerfile né file Docker Compose
- Nessun modello di pull request
- Leggi la guida per i contributori
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Altre issue di expressjs/body-parser
-
discuss ideas semver-major
Difficoltà 3/5 1-2 giorni Idoneità per principianti 55/100
expressjs/body-parser#780 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
-
semver-major
Difficoltà 5/5 Più di una settimana Idoneità per principianti 28/100
expressjs/body-parser#775 · 1 reazione ·
I maintainer di solito rispondono entro 1 giorno
-
Update to raw-body v4.0.0Apertadeps semver-major
Difficoltà 3/5 1-2 giorni Idoneità per principianti 65/100
expressjs/body-parser#758 · 12 commenti ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 5/5 Più di una settimana Idoneità per principianti 35/100
expressjs/body-parser#658 ·
I maintainer di solito rispondono entro 1 giorno
-
question
Difficoltà 4/5 3-5 giorni Idoneità per principianti 30/100
expressjs/body-parser#633 · 1 commento ·
I maintainer di solito rispondono entro 1 giorno
Tutte le issue di expressjs/body-parser
Issue simili
-
bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 63/100
anothaDev/luci-theme-vantage#143 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 2/5 1-3 ore Idoneità per principianti 72/100
kingcharleslzy-ai/dsh-purge#282 ·
I maintainer di solito rispondono entro 1 giorno
-
Difficoltà 1/5 Meno di un'ora Idoneità per principianti 72/100
-
a-corriger bug
Difficoltà 2/5 1-3 ore Idoneità per principianti 86/100
christian-raj/S-Aloha#340 ·
-
area:image documentation good first issue
Difficoltà 2/5 1-3 ore Idoneità per principianti 68/100
I maintainer di solito rispondono entro 1 giorno