hdfs

0Hitze

1Antwort

Hallo Ich habe eine Daten von MySQL auf hdfs über sqoop-Anschluss geladen. Was nun, wenn die Zeile zwischen den vorhandenen Daten aktualisiert wird, gibt es eine Abfrage, um den Datenwert der bestehen

4Hitze

1Antwort

HDFS als Volumen in Cloudera Schnellstart-Docker

Ich bin relativ neu sowohl Hadoop und Docker. Ich habe an der Erweiterung der Cloudera/Quickstart-Docker-Bild-Docker-Datei gearbeitet und wollte einen Verzeichnis-Form-Host anhängen und ihn auf den hd

0Hitze

3Antwort

HDFS bis s3 Distcp - Access Keys

Für die Datei von HDFS S3 Eimer Kopieren verwendete ich den Befehl hadoop distcp -Dfs.s3a.access.key=ACCESS_KEY_HERE\ -Dfs.s3a.secret.key=SECRET_KEY_HERE /path/in/hdfs s3a:/BUCKET NAME Aber der Zug

0Hitze

1Antwort

Aufnahme bestimmter Quellen in ein bestimmtes Rack

Ich habe ein Cluster mit drei Racks. Für eine Reihe bestimmter Quellen möchte ich, dass sie nur in einem Rack abgelegt werden, damit ich den Verkehr von dieser bestimmten Quelle zu den anderen Zielen

0Hitze

1Antwort

new Spark StreamingContext failes mit hdfs Fehler

Ich benutze dcos über Azure ACS installiert und installiert hdfs und Funken über dcos Werkzeug mit Standardoptionen. ein SparkStreamingContext Erstellen gibt: 16/07/22 01:51:04 WARN DFSUtil: Namenode

1Hitze

2Antwort

Count-Befehl in Hadoop

Welche Informationen genau die hdfs dfs -count gibt. Es zeigt 3 Spalten in der Ausgabe. Was bedeutet diese 3 Spalten bedeutet ** hdfs dfs -count <path> **5 3603 2099476898 <path>** **

1Hitze

1Antwort

Sqoop Export zu SQL Server: Schemas?

Ich möchte Daten in HDFS in eine SQL Server-Tabelle im Schema my_schema exportieren. versuchte ich --schema wie der Importbefehl: sqoop export \ --libjars /opt/mapr/sqoop/sqoop-1.4.6/lib/sqljdbc4.jar

0Hitze

1Antwort

Wie grep in Dataset auf hdfs mit Hadoop-Streaming

Ich habe einen großen Datensatz in hdfs liegen und ich möchte einige Begriffe aus ihm grep. Was ist der Haddop-Streaming-Befehl für dasselbe? (Siehe I don t PIG verwenden möchten)

0Hitze

1Antwort

Bash nicht in der Lage Verzeichnis

In Docker zu schaffen, ich will eine Datei kopieren README.md aus einem bestehenden Verzeichnis /opt/ibm/labfiles auf einen neuen /input/tmp. Ich versuche dies hdfs dfs -put /opt/ibm/labfiles/README.m

1Hitze

1Antwort

Hadoop MapReduce Auftragserlaubnis verweigert

Ich versuche, einen Map Reduce Job auszuführen, um die Anzahl der Benutzer in einer Tabelle mit Hive zu ermitteln. Ich bekomme eine AccessControlException dabei. Nachricht an der Eingabeaufforderung: