Ich habe ein R-Skript, das mit einer Reihe von Tweets funktioniert und ich möchte das gleiche Skript für die gleichen Daten verwenden, aber in einem Hadoop-Dateisystem gespeichert. Laut this Hortonworks Tutorial könnte ich R-Code mit Daten von meinem HDFS verwenden, aber es ist nicht ganz klar.Ausführen von R-Skript auf hadoop und mapreduce
Kann ich das gleiche R-Skript verwenden, indem ich das Mapreduce-Paradigma nutze, indem ich diese Revolution R verwende? Soll ich meinen Code ändern oder gibt es eine Möglichkeit, die gleichen Funktionen auszuführen, die für eine Hadoop-Architektur optimiert sind? Mein Wunsch wäre, meinen Code auf einer Standard-R-IDE wie R-Studio zu schreiben und sie dann auf meinen Cloud-Diensten (wie Microsoft Azure) mit mapreduce auf der Basis zu verwenden oder zu verwenden.
Wir bräuchten mehr über Ihr Skript wissen - viele der Textanalyse ist nur das Teilen und Zählen, was relativ einfach parallel zu machen ist, aber andere Operationen könnten ziemlich schwierig sein. –