hdfs

0Hitze

1Antwort

wie hdfs Dateinamen mit Apache Bohrern bekommen

Ich mag zu zeigen, hdfs Dateinamen durch Drill bekommen, der Apache-Bohrer Bedienungsanleitung (https://drill.apache.org/docs/file-system-storage-plugin/) nicht geschrieben, wie es zu bekommen, ich br

0Hitze

1Antwort

Fehler beim Erstellen der Hive-Tabelle: FAILED: Execution Error, Rückgabecode 1 von org.apache.hadoop.hive.ql.exec.DDLTask. MetaException

Ich habe einen Hadoop Cluster mit mehreren Knoten und jetzt habe ich Hive auf dem Namenknoten installiert. Im Versuch, einige hive Tabellen aus Dateien in hdfs gespeichert zu erstellen aber ich bin di

0Hitze

1Antwort

HDFS Append an SequenceFile ist langsam

Das Anhängen an SequenceFiles scheint sehr langsam zu sein. Wir konvertieren Ordner (mit kleinen Dateien) in SequenceFiles, indem wir den Dateinamen als Schlüssel und den Inhalt als Wert verwenden. De

0Hitze

1Antwort

Warum hadoop `FileSystem.delete` gibt einen booleschen Wert zurück

Ich bin verwirrt über diese API. Wenn die Löschung fehlgeschlagen ist, sollte nicht eine Ausnahme ausgelöst werden, um den Grund zu erklären? Warum gibt es einen booleschen Wert zurück, um uns mitzute

0Hitze

1Antwort

Schreiben auf HDFS mit Python

Ich versuche, auf HDFS von Python zu schreiben. Gerade jetzt, ich bin mit https://hdfscli.readthedocs.io/en/latest/quickstart.html aber für große Datei erhalte ich zurück: File "/home/edge7/venv-dev/l

2Hitze

1Antwort

Log4j schreibt nicht in HDFS/Log4j.properties

Basierend auf der folgenden Konfiguration erwarte ich, dass mein log4j in den HDFS-Ordner schreiben soll (/ myfolder/mysubfolder). Aber es erstellt nicht einmal eine Datei mit dem Namen hadoop9.log. I

13Hitze

1Antwort

Gibt es einen hdfs-Befehl, um Dateien im HDFS-Verzeichnis nach Zeitstempel aufzulisten

Gibt es einen hdfs-Befehl zum Auflisten von Dateien im HDFS-Verzeichnis nach Zeitstempel, aufsteigend oder absteigend? Standardmäßig gibt hdfs dfs -ls Befehl unsortierte Liste von Dateien. Als ich nac

1Hitze

1Antwort

Oozie Rohbauarbeiten fließen

Ich versuche, eine einfache Shell-Aktion in Oozie zu schreiben, die die Dateien von Remote-Kopie wird hdfs.But Ich erhalte Fehler. Hier ist meine Arbeit flow.xml <workflow-app name="WorkFlowCopyLocalT

0Hitze

1Antwort

Permission Ausnahme für Sqoop

Stapel: Installierte HDP-2.3.2.0-2950 mit Ambari 2.1 Die Installation war automatisch. Da die Computer (insgesamt 9 Knoten) über eine Internetverbindung verfügten und Root-Anmeldeinformationen verwend

1Hitze

1Antwort

Was ist Hadoop (Single und Multi) Knoten, Sparkmaster und Funkenarbeiter?

Ich möchte die folgenden Begriffe verstehen: hadoop (Single-Node und Multi-Node) Funken Master Funken Arbeiter NameNode DataNode Was ich bisher verstanden ist Funken Master ist der Job Testamentsvolls