So erstellen Sie ein Spoolind Directory als Sink in Flume

Question

Ich weiß, wie ein Spool-Verzeichnis als Quelle in Gerinne machen. Ich verwende Spool-Verzeichnis, um Dateien von einem Ordner in die hdfs-Senke zu kopieren. Gibt es eine Möglichkeit, Spool-Verzeichnis als Senke auch so zu machen, dass ich einige meiner Dateien in einen lokalen Ordner kopieren kann?

Answer 1

Der File Roll Sink schreibt Ereignisse in Dateien im lokalen Dateisystem. Das Verzeichnis, in das die Ereignisse geschrieben werden sollen, wird vom Parameter sink.directory angegeben.

#file_roll sink properties 
a1.sinks = s1 
a1.sinks.s1.type = file_roll 
a1.sinks.s1.sink.directory = /path/to/file 

Finden Sie die vollständige Dokumentation über diese Spüle here.