etl

15Hitze

2Antwort

Wie legen Sie Abhängigkeiten zwischen DAGs in Airflow fest?

Ich verwende Airflow, um Stapeljobs zu planen. Ich habe eine DAG (A), die jede Nacht läuft und eine andere DAG (B), die einmal im Monat läuft. B hängt davon ab, dass A erfolgreich abgeschlossen wurde.

0Hitze

1Antwort

Ist es möglich, mehrere Aggregationsjobs in einem einzelnen Datenframe parallel in Spark auszuführen?

Gibt es eine Möglichkeit, mehrere unabhängige Aggregationsaufträge parallel auf einer einzigen RDD auszuführen? Erste Präferenz ist Python dann Scala und Java. Der Verlauf der Aktionen in der Reihenfo

-2Hitze

2Antwort

ETL - Abfrage benötigte

mit 3 Tabellen gleiche Spalten, aber mit unterschiedlichen values..result sollten nur gleiche Kombination wäre gesetzt ein col x col y 23 a01 23 a02 24 a11 25 a12 Tabelle b Beispiel Tabelle

0Hitze

1Antwort

Exportieren von Daten zu Excel mit SSIS und Datenfehler

Ich habe zwei verschiedene Probleme 1). Ich versuche Daten aus der SQL Server-Datenbank zu Excel zu exportieren. Das Paket erstellt jeden Tag eine neue Excel-Datei und fügt die Daten aus der Datenbank

-1Hitze

2Antwort

Kundenspezifische Datenlast in SSIS

Ich versuche, ein SSIS-Paket zu entwerfen, wo, wenn Datensätze in den Dateien zum ersten Mal kommen, als Last es zu Primärtabelle, sonst Last Sekundärtabelle zu sein. Dateien von verschiedenen Kunden

0Hitze

1Antwort

COPY Spaltenreihenfolge

Ich versuche, COPY mit HEADER-Option verwenden, aber meine Kopfzeile in Datei ist in anderer Reihenfolge als die Reihenfolge der Spalte in der Datenbank angegeben. Ist die Reihenfolge der Spaltennamen

0Hitze

1Antwort

orientdb- ETL Import vs Java-Import mit eingebetteter db

ich ein Data-Mining-Tool am Prototyping bis zur Ernte von Daten aus mehreren Quellen 1) MySQL db - 2.000.000 Ecken 20.000.000 Kanten 2) benutzerdefinierten Daten Dateien- - 2.000.000 Ecken 700.000.000

-1Hitze

1Antwort

Wie fügen Sie die Datensätze in der untergeordneten Tabelle ein, wenn Datensätze in der SSIS-Tabelle "eltern" eingefügt werden?

Ich bin mit einem Szenario in SSIS fest. Ich habe zwei Tabellen, die beide die referentielle Integrität beibehalten, das heißt, eine ist Elterntabelle und eine andere ist Kind. Wenn ich einige Datensä

0Hitze

2Antwort

Informatica powercenter Joiner Transformation

Ich bin neu bei Informatica und ich weiß, dass es eine sehr grundlegende Frage ist. Es wird empfohlen, dass wir Quelle mit weniger Zeilen als Master und Quelle mit mehr Zeilen als Detail wählen sollte

-1Hitze

1Antwort

SSIS Design-Muster für mehrere XLSB-Datei Blätter zu mehreren Tabellen

Es gibt xlsxb Dateien und jeder dieser besteht aus unterschiedlicher Anzahl von Blättern (besteht aus bis zu 9 Blatt) .Alle die Blätter sind von unterschiedlicher Struktur.Die Anforderung ist Laoad a