Wie bearbeitet man Daten in einer .arff-Datei?

Question

Ich versuche, eine 5 GB große .arff-Datei auf Apache Spark auszuführen, und ich möchte einige Daten in dieser Datei bearbeiten. Wie kann ich eine .arff-Datei bearbeiten?

Answer 1

Sie könnten versuchen, die arff Paket zu verwenden, um es zu öffnen:

import arff 

X = [] 
y = [] 

for row in arff.load('cpu.arff'): 
    X.append(row[:-1]) 
    y.append(row[-1]) 

here ist eine ähnliche Frage.