hortonworks-sandbox

0Hitze

1Antwort

Hortonworks VM - Hadoop-Batch-Upload?

Gibt es eine Möglichkeit, Dateien per Batch-Upload in Hadoop unter einer Hortonworks-VM mit CentOS hochzuladen? Ich sehe, dass ich das HDFS-Files-Tool der Ambari-Sandbox verwenden kann, das aber nur e

hadoop ambari hortonworks-sandbox 2016-07-20

---

3Hitze

1Antwort

Apache NiFi - OutOfMemory Fehler: GC Overhead Limit überschritten auf SplitText Prozessor

Ich versuche NiFi verwenden, um große CSV-Dateien (potenziell Milliarden von Datensätzen) mit HDF 1.2 zu verarbeiten. Ich habe meinen Flow implementiert und alles funktioniert gut für kleine Dateien.

java garbage-collection hortonworks-data-platform apache-nifi hortonworks-sandbox 2016-07-29

---

3Hitze

1Antwort

HiveContext liest nicht Schema einer Orcfile

Wenn ich laufen die folgenden: val df1 = sqlContext.read.format("orc").load(myPath) df1.columns.map(m => println(m)) Die Säulen werden als ‚_col0‘ gedruckt ‚_col1‘, ‚_col2‘ usw. In Bezug auf ihre w

scala apache-spark hive orc hortonworks-sandbox 2016-08-02

---

1Hitze

1Antwort

Verwenden der Hive-Datenbank in spark

Ich bin neu in spark und versuche, einige Abfragen auf Tpcds-Benchmark-Tabellen mit HortonWorks Sandbox auszuführen. http://www.tpc.org/tpcds/ Es gibt kein Problem bei der Verwendung von Hive durch Sh

apache-spark hive apache-spark-sql hortonworks-sandbox 2016-08-04

---