Welcher Schlüssel: Wertspeicher für Python?

Question

Also ich schaue auf verschiedene Schlüssel: Wert (wo Wert ist entweder streng ein einzelner Wert oder möglicherweise ein Objekt) speichert für die Verwendung mit Python, und haben ein paar vielversprechende gefunden. Ich habe noch keine spezifische Anforderung, da ich mich in der Evaluierungsphase befinde. Ich bin auf der Suche nach dem, was gut ist, was schlecht ist, was sind die Eckfälle, mit denen diese Dinge gut umgehen oder nicht, etc. Ich bin mir sicher, dass einige von euch es bereits ausprobiert haben und ich würde gerne Ihre Ergebnisse hören /etc. auf den verschiedenen Schlüssel: Wert speichert mit Python. Ich suche in erster Linie an:

Memcached - http://www.danga.com/memcached/ Python Kunden: http://pypi.python.org/pypi/python-memcached/1.40http://www.tummy.com/Community/software/python-memcached/

CouchDB - http://couchdb.apache.org/ Python Kunden: http://code.google.com/p/couchdb-python/

Tokyo Tyrant - http://1978th.net/tokyotyrant/ Python Kunden: http://code.google.com/p/pytyrant/

Lightcloud - http://opensource.plurk.com/LightCloud/ Based auf Tokyo Tyrant, geschrieben in Python

R edis - http://redis.io/ Python Kunden: http://pypi.python.org/pypi/txredis/0.1.1

memcachedb - http://memcachedb.org/

So begann ich Benchmarking (einfach Schlüssel einsetzen und sie zu lesen) unter Verwendung einer einfachen Zählung zu erzeugen numerischen Tasten und einen Wert von „Eine kurze Textzeichenfolge“:

memcached: CentOS 5.3/python-2.4.3-24.el5_3.6, Libevent 1.4.12-stabil, memcached 1.4.2 mit Standardeinstellungen, 1 Gig-Speicher, 14.000 Einsätze pro Sekunde, 16.000 Sekunden zu lesen. Keine echte Optimierung, schön.

Memcachedb Ansprüche in der Größenordnung von 17.000 bis 23.000 Einsätze pro Sekunde, 44.000 bis 64.000 liest pro Sekunde.

Ich frage mich auch, wie die anderen Geschwindigkeit Geschwindigkeit stapeln.

Answer 1

Das hängt meistens von Ihrem Bedarf ab.

Lesen Sie Caveats of Evaluating Databases, um zu verstehen, wie sie zu bewerten sind.

Answer 2

Wie wäre es mit Amazon SimpleDB?

Es gibt eine Open-Source-Python-Bibliothek mit dem Namen boto für Python-Schnittstellen für Amazon Web Services.

Answer 3

shelve (Speicherung dictonaris in der Datei/Standard-Python-Modul)

ZODB - persisatnce Objektdatenbank (Python-Objekte Datenbank, keine SQL)

Mehr persistance Werkzeuge: http://wiki.python.org/moin/PersistenceTools

Answer 4

Meine 5 Cent:

Benötigen Sie verteilte Systeme mit Tera-Byte-Daten oder hoher Schreibleistung?

Nun, sie brauchen einen der großen Schlüssel: Wert/BigTable/Dynamo Art Dinge. Das würde von Cassandra, Tokyo Tyrant, Redis, etc. getan. Sie müssen sicherstellen, dass die Client-Bibliothek Sharding unterstützt, so dass Sie mehrere Datenbanken zum Schreiben haben können. Welcher hier verwendet wird, kann nur von Ihnen entschieden werden, nachdem Sie mit Daten getestet wurden, die Ihren Anforderungen entsprechen.

Benötigen Sie, dass die Daten von anderen Systemen/Sprachen als Python zugänglich sind?

Da diese Datenbanken überhaupt keine Struktur zu ihren Daten haben, wenn sie von anderen Sprachen/Clients aus zugreifbar ist, hängt Ihre Datenbank davon ab, was Sie darin speichern. Aber wenn Sie diese CouchDB benötigen, ist sie eine gute Wahl, da sie ihre Daten in einem JSON-Dokument speichert, so dass Sie Interoperabilität erhalten. Wie gut CouchDB auf wirklich massiven Daten und Sharding ist, ist jedoch unklar.

Benötigen Sie keine Interoperabilität mit anderen Sprachen als Python oder verteilten Multi-Server-Speicher?

Verwenden Sie ZODB.