hdfstore

8Hitze

1Antwort

Get Liste der HDF5 Inhalte (Pandas HDFStore)

ich aus einer Tabelle innerhalb eines HDF5 Shop kein Problem der Auswahl Inhalt haben: with pandas.HDFStore(data_store) as hdf: df_reader = hdf.select('my_table_id', chunksize=10000) Wie kann i

python pandas hdf5 hdfstore 2015-02-27

---

2Hitze

2Antwort

Wie speichert man einen Pandas DataFrame als HDFS PyTables-Tabelle (oder CArray, EArray, etc.)?

Ich habe folgende Pandas Datenrahmen: import pandas as pd df = pd.read_csv(filename.csv) Jetzt kann ich HDFStore verwenden, um das df Objekt zu schreiben in einer Datei (wie das Hinzufügen von Schl

python pandas hdf5 pytables hdfstore 2016-07-19

---

0Hitze

1Antwort

HDFStore: Wählen Sie, wenn Spalte in der Matrix ist

Ich habe eine Tabelle mit unter anderem die folgenden Spalten: >>> hdf.select('foo').columns Out[22]: Index(['bar', 'units'], dtype='object') Nun wollte ich diejenigen auszuwählen, in dem ba

python pandas hdfstore 2016-07-21

---

0Hitze

1Antwort

Pandas HDFStore seltsames Verhalten

Ich bin sehr verwirrt, ich habe zwei Skripte laufen vom selben Notebook-Server. Ich habe einen HDFStore im selben Ordner, aber für ein Skript sieht es leer aus und für das andere nicht. Hier ist der g

python pandas hdfstore 2016-06-05

---

12Hitze

1Antwort

Wie hängt man große Datenmengen an einen Pandas HDFStore an und erhält einen natürlichen eindeutigen Index?

Ich importiere große Mengen von http-Logs (80GB +) in einen Pandas HDFStore zur statistischen Verarbeitung. Selbst innerhalb einer einzelnen Importdatei muss der Inhalt beim Laden geladen werden. Mein

python indexing pandas dataframe hdfstore 2013-06-08

---

1Hitze

1Antwort

Wie behandelt man min_itemsize Ausnahme beim Schreiben in Pandas HDFStore

Ich benutze Pandas HDFStore, um dfs zu speichern, die ich aus Daten erstellt habe. store = pd.HDFStore(storeName, ...) for file in downloaded_files: try: with gzip.open(file) as f:

python-3.x exception pandas dataframe hdfstore 2016-06-13

---

5Hitze

1Antwort

Pandas HDFStore Datenrahmen aus dem Speicher entladen

OK Ich experimentiere mit Pandas, um eine 30GB CSV-Datei mit 40 Millionen + Zeilen und 150+ Spalten in HDFStore zu laden. Die Mehrzahl der Spalten sind Strings, gefolgt von Zahlen und Daten. Ich habe

python pandas hdf5 pytables hdfstore 2013-08-13

---

2Hitze

1Antwort

Pandas Hdf Holen Sie sich Tabelleninfo

Gibt es eine Möglichkeit, die Informationen einer HDF-Tabelle mit dem Pandas HDF-Speicher zu bekommen? Zum Beispiel in SQL gibt es: SELECT COUNT(*) Ich mag grundlegende Tabellengrößen lesen, ohne di

python pandas hdfstore 2016-06-23

---

1Hitze

1Antwort

Apache Hadoop: Einfügen von komprimierten Daten in HDFS

Ich muss 100 Textdateien in HDFS hochladen, um eine Datentransformation mit Apache Pig durchzuführen. In Sie Meinung nach, was ist die beste Option: a) alle Textdateien komprimieren und nur eine Datei

compression text-files hdfs hdfstore 2016-06-23

---

2Hitze

1Antwort

Speichern mehrerer Objekte in einer HDFStore-Gruppe

Ich möchte mehrere Objekte in einem HDFStore speichern, aber ich möchte es durch Gruppierung organisieren. Etwas entlang der Linien von: import pandas as pd my_store = pd.HDFStore('my_local_store.h5'

python pandas hdf5 hdfstore 2016-06-28

---