Consider replacing pickle serializer with a user-provided fallback serializer

Offen
#363 1 Kommentar 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

Bewertung

Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Anfängerfreundlichkeit
30/100
Issue-Typ
Feature
Klarheit
Größtenteils klar
Aktivitätsstatus
Veraltet
Tech-Stack
python

Rechercherichtung

Beginne damit, das Verhalten des Fallback-Serializers des Clients nachzuverfolgen und zu untersuchen, wie Benutzer einen Serializer bereitstellen könnten. Kläre das erwartete Verhalten, wenn eine Klasse nicht codiert werden kann, einschließlich des MyClass-Beispiels und von pickle als optionalem Fallback. Als abgeschlossen gilt dies, wenn die gewählte Konfiguration und das Fehlerverhalten definiert und durch relevante Tests abgedeckt sind.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Beschreibung

Source: Internal Type: Enhancement

Pickle is currently used as the fallback serializer in the client. It is very convenient, but at the same time dangerous and causes surprising behavior.

First of all, Pickle is dangerous, since it is easy to be abuse it to execute arbitrary code. There are a many articles on the internet about that issue, such as this one: https://intoli.com/blog/dangerous-pickles/

Pickling data provides a false sense of "everything works OK" feeling. Although pickled data can only be deserialized on Python and if and only if all the classes present in pickled data are imported beforehand.

Consider the following example:

# module1/module2.py
class MyClass:
    def __init__(self, value):
        self.value = value
hz = HazelcastClient()
m = hz.get_map("mymap").blocking()
m.put("myobj", MyClass("foo"))

Since no serializer was assigned to MyClass fallback pickle serializer will be used. There are no warnings after m.put operation that the object can only be deserialized with Python code which also imports module.module2.MyClass beforehand.

I think a better way to handle this situation is, defaulting to no fallback serializer and providing the option to the user to specify it manually. So, if a class cannot be encoded we just raise an exception unless the user provided a fallback serializer (which could be pickle!).

Vorherrschende Sprache
Python
Sterne
115
Forks
78
Ø Merge
2 T. 23 Std.
Gemergte PRs (30 T.)
2

Entwicklungsumgebung

Erste Schritte

  1. Lesen Sie das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreiben Sie ins Issue, dass Sie es übernehmen — das erspart doppelte Arbeit.
  3. Forken Sie das Repository und arbeiten Sie in einem Branch.
  4. Öffnen Sie einen Pull Request, der die Issue-Nummer nennt.

Mehr aus hazelcast/hazelcast-python-client

Alle Issues in hazelcast/hazelcast-python-client

Ähnliche Issues

Weitere Issues zu Python

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.