apache-pig

0Hitze

1Antwort

Pig: Wie berechnet man Quantile für mehrere Variablen in einer Gruppe?

Ich verwende Apache DataFu (http://datafu.incubator.apache.org/docs/datafu/1.3.0/datafu/pig/stats/Quantile.html) den quantiles von mehreren Variablen in den Daten zu berechnen. Mein Vorteil ist, dass

0Hitze

1Antwort

Können wir PDF-Dateien mit Pig UDFs teilen?

Ich habe 100 pdf's, aber jedes pdf hat 40 Seiten, d. H .. es ist nicht verarbeitet. Eigentlich versuchen wir, Schwein UDF zu benutzen ?? Können wir PDF-Dateien mit Pig UDF teilen?

0Hitze

2Antwort

Schwein-Skript zum Ersetzen \ mit - in-Datum-Funktion

Ich versuche, ein Schwein Skript zu schreiben, das Datum im Format 04/15/2016 hat. Ich möchte es in 04-15-2016 konvertieren. Ich bekomme, wenn ich das unten tue: x=REPLACE(date,'\','-'); dump x; Ic

-5Hitze

1Antwort

Wie löst man den folgenden Anwendungsfall mit Hadoop?

Migrating the data from Legacy database [~50 TB] to New Database. Migrating data from staging database[ 5GB per 1 hr] to New Database. Before storing into new database we are doing data analytic(va

0Hitze

1Antwort

Pig Action in Oozie - Verwendung der Pig-Parameterdatei im Workflow nicht möglich

Verwenden Sie die Pigs-Parameterdatei in Oozie. Die Parameterdatei mit Argumentelement bereitgestellt. Es endete im Startfehler. Unten ist der Fehler " APP[visit_c] JOB[0000079-160420073357222-oozie-o

0Hitze

1Antwort

Wie instanziiert Pig UDF-Objekte

Kann mir jemand sagen, wie Pig UDF-Objekte instanziiert? Ich habe Pig benutzt, um eine Pipeline aufzubauen, um einige Daten zu verarbeiten. Ich habe die Pipeline im Multi-Node-Cluster Hadoop implement

0Hitze

2Antwort

Schwein IMPLICIT_CAST_TO_CHARARRAY Fehler

Meine Tabelle besteht aus 253 Spalten also Daten in Schweinebeutel ohne Schema-Methode geladen, wenn ich Filterbedingung auf alle Daten anwenden, die diesen Fehler bekommen, wie man es vermeidet? Irge

1Hitze

1Antwort

Wie mehrere ZIP-Dateien in HDFS entpacken

ich mehrere ZIP-Dateien in HDFS enthält zwei Arten von Dateien (A.csv & B.csv) HDFS Lage /data/jan.zip --> contains A.csv & B.csv /data/feb.zip --> contains A.csv & B.csv ich die Dateien extrahiere

0Hitze

1Antwort

Casting in Jython 2.5.3

Es gibt eine Python-Funktion, die in CPython 2.5.3 läuft, aber in Jython 2.5.3 abstürzt. Es ist Teil einer benutzerdefinierten Funktion in Apache Pig, die Jython 2.5.3 verwendet, so dass ich es nicht

2Hitze

2Antwort

Wie sind Hive udf, udaf, udtfs in Java geschrieben in einer Idee wie Eclipse debugged?

Zum Beispiel für das Debuggen von Schwein UDFs funktioniert das: http://ben-tech.blogspot.ie/2011/08/how-to-debug-pig-udfs-in-eclipse.html Ich habe ein Bienenstock-Skript, in dem ich meine Udaf verwen