hadoop-streaming

7Hitze

5Antwort

Hadoop Java Fehler: Ausnahme im Thread "main" java.lang.NoClassDefFoundError: WordCount (falscher Name: org/myorg/WordCount)

Ich bin neu bei hadoop. Ich folgte dem Maichel-Noll-Tutorial, um Hadoop in einem einzelnen Knoten einzurichten. Ich habe versucht, WordCount-Programm auszuführen. Dies ist der Code, den ich verwendet

java hadoop jar hadoop-streaming 2014-11-02

---

1Hitze

1Antwort

Warum hat Hadoop in Windows7 eine RuntimeException ausgelöst: Fehler beim Konfigurieren des Objekts

Ich versuche, in Windows7 ein Hadoop-Programm im pseudoverteilten Modus auszuführen, und eine RuntimeException wurde ausgelöst. Ich weiß nicht warum und wie ich es beheben kann. Ich benutze Python für

python hadoop windows-7 hadoop-streaming runtimeexception 2016-03-25

---

5Hitze

1Antwort

Mit Python effizient Hamming-Distanzen berechnen

Ich muss eine große Anzahl von Zeichenfolgen ähnlich wie 50358c591cef4d76 vergleichen. Ich habe eine Hamming-Distanz-Funktion (mit pHash), die ich benutzen kann. Wie mache ich das effizient? Mein Pseu

python performance hadoop-streaming 2014-07-04

---

5Hitze

2Antwort

Streaming-Frameworks auf Hadoop, die ORC unterstützen, Parkett-Dateiformate

Unterstützt Hadoop-Streaming die neuen spaltenförmigen Speicherformate wie ORC und Parkett oder gibt es Frameworks auf Hadoop, mit denen Sie solche Formate lesen können?

hadoop mapreduce hive hadoop-streaming 2014-04-03

---

0Hitze

1Antwort

Hadoop-Streaming-Job fehlgeschlagen (nicht erfolgreich) in Python

So funktionieren meine Skripts perfekt, wenn ich: cat England.txt | ./mapperEngl.py | sortieren | ./reducerEngl.py Allerdings, wenn ich laufen: /shared/hadoop/Aktuell/bin/hadoop jar /shared/hadoop/cur

python hadoop hadoop-streaming 2016-05-03

---

2Hitze

1Antwort

Python MapReduce Hadoop Streaming Job, der 3 Eingabedateien benötigt?

Ich habe 3 kleine Probeneingabedateien (die eigentlichen Dateien sind viel größer), # File Name: books.txt # File Format: BookID|Title 1|The Hunger Games 2|To Kill a Mockingbird 3|Pride and Prejud

python mapreduce hadoop-streaming 2016-05-04

---

0Hitze

2Antwort

Fehler: sqoop zum Hinzufügen von Datensätzen in hdfs

Mein Szenario: Ich werde täglich 100 Datensätze in hdfs durch sqoop zu einer bestimmten Zeit erhalten. Aber, gestern habe ich nur 50 Aufzeichnungen für diese bestimmte Zeit heute ich muss 50 + 100 Auf

hadoop sqoop hadoop-streaming sqoop2 apache-sqoop 2016-05-04

---

1Hitze

1Antwort

Storm UI-Topologie funktioniert nicht

Wir führen eine Storm-Topologie in LocalCluster. Die Storm-Topologie wird ordnungsgemäß ausgeführt und kann die Storm UI (8090) verbinden. Storm UI zeigt jedoch nicht die Informationen zur laufenden T

hadoop apache-kafka apache-storm hadoop-streaming apache-storm-flux 2016-05-04

---

5Hitze

1Antwort

hadoop 2.4.0 Streaming allgemeine Optionen Parser TAB als Trennzeichen

Ich weiß, dass die Registerkarte Felder Standardeingabe Separator ist: stream.map.output.field.separator stream.reduce.input.field.separator stream.reduce.output.field.separator mapreduce.textoutpu

python hadoop utf-8 mapreduce hadoop-streaming 2015-05-27

---

0Hitze

1Antwort

Das Ergebnis mehrerer Mapper sortiert nach Reducer in Hadoop

Ich habe mehrere sehr große Dateien (fast 500MB) als Eingabe für mein MR-Programm. Ich teile (spalte) diese Dateien in Partitionen gleicher Größe. Jeder Mapper bekommt einzelne Partition einer Datei M

java hadoop hadoop-streaming hadoop-partitioning bigdata 2016-04-01

---