apache-spark-mllib

11Hitze

1Antwort

Was ist Rang in ALS-Maschine Lernalgorithmus in Apache Spark MLLIB

Ich wollte ein Beispiel für ALS Machine Learning-Algorithmus versuchen. Und mein Code funktioniert gut, aber ich verstehe Parameter rank in Algorithmus verwendet nicht. ich in Java folgenden Code habe

11Hitze

4Antwort

So integrieren Sie Apache Spark mit der Spring MVC-Webanwendung für interaktive Benutzersitzungen

Ich versuche ein Movie Recommender System mit Apache Spark MLlib zu erstellen. Ich habe einen Code für Recommender in Java geschrieben und es funktioniert gut, wenn mit spark-submit Befehl ausgeführt

13Hitze

2Antwort

Von DataFrame zu RDD [LabeledPoint]

Ich versuche, einen Dokumentklassifikator mit Apache Spark MLlib zu implementieren, und ich habe einige Probleme, die Daten darzustellen. Mein Code ist der folgende: import org.apache.spark.sql.{Row,

32Hitze

3Antwort

So erstellen Sie den richtigen Datenrahmen für die Klassifizierung in Spark ML

Ich versuche zufällige Gesamtstrukturklassifizierung mit Spark ML api ausführen, aber ich habe Probleme mit der Erstellung von rechten Datenrahmen Eingabe in Pipeline. Hier ist Beispieldaten: age,hour

7Hitze

1Antwort

Apache Spark-ALS Empfehlungen nähern

Versuch Empfehlungssystem mit Funken MLLib des ALS zu bauen. Derzeit versuchen wir zu Empfehlungen für alle Benutzer auf täglicher Basis Präbuildereignis. Wir verwenden einfache implizite Rückmeldunge

6Hitze

4Antwort

Wie transformiere ich eine kategoriale Variable in Spark in eine Reihe von Spalten, die als {0,1} codiert sind?

Ich versuche eine logistische Regression (LogisticRegressionWithLBFGS) mit Spark MLlib (mit Scala) für ein Dataset durchzuführen, das kategoriale Variablen enthält. Ich entdecke, dass Spark nicht mit

5Hitze

1Antwort

Funken MLLib Collaborative Filtering mit neuen Benutzer

ich die Collaborative Filtering-Algorithmus in Funken implementiert Ausprobieren und leite in das folgende Problem: Angenommen, ich trainiere ein Modell mit den folgenden Daten: u1|p1|3 u1|p2|3 u2|p

11Hitze

4Antwort

Was ist der richtige Weg zum Speichern von Modellen in Spark \ PySpark

Ich arbeite mit Spark 1.3.0 mit PySpark und MLlib und ich muss meine Modelle speichern und laden. Ich verwende Code wie folgt (von der offiziellen documentation genommen) from pyspark.mllib.recommenda

15Hitze

2Antwort

Unterschied zwischen org.apache.spark.ml.classification und org.apache.spark.mllib.classification

Ich schreibe eine Spark-Anwendung und möchte Algorithmen in MLlib verwenden. Im API-Dokument habe ich zwei verschiedene Klassen für denselben Algorithmus gefunden. Zum Beispiel gibt es eine Logistisch

12Hitze

2Antwort

Verwenden von DataFrame mit MLlib

Angenommen, ich habe einen DataFrame (den ich von einem csv auf HDFS eingelesen habe) und ich möchte einige Algorithmen über MLlib darin trainieren. Wie konvertiere ich die Zeilen in LabeledPoints ode