amazon-data-pipeline

5Hitze

1Antwort

Ich versuche, eine einfache Kette s3-Pipeline-Redshift zu laufen, aber ich habe völlig mit Eingabedatenformat stecken. Hier ist meine Datei: 1, Toyota Park, Bridgeview, IL 2, Columbus Crew Stadium, Co

6Hitze

3Antwort

So leiten Sie Daten von AWS Postgres RDS zu S3 (dann Redshift)?

Ich verwende den AWS-Datenpipeline-Dienst, um Daten von einer RDS MySql-Datenbank an s3 und dann an Redshift zu leiten, was gut funktioniert. Allerdings habe ich auch Daten in einer RDS Postres Instan

1Hitze

1Antwort

Sicherung nur neue Datensätze von DynamoDB bis S3 und sie in RedShift laden

ich sah, dass ähnliche Fragen bereits vorhanden sind: Backup AWS Dynamodb to S3 Copying only new records from AWS DynamoDB to AWS Redshift Loading data from Amazon dynamoDB to redshift Leider veraltet

8Hitze

1Antwort

Wie zu stoppen Bienenstock/Schwein in Amazon Data Pipeline installieren?

Ich brauche weder Hive noch Pig, und die Amazon Data Pipeline installiert sie standardmäßig auf jedem EMR-Cluster, den es hochfährt. Dies dauert länger als nötig. Irgendwelche Ideen zum Deaktivieren d

1Hitze

2Antwort

Verwenden Sie dieselbe EC2-Instanz für alle AWS Data Pipeline-Aktivitäten.

Ich verwende AWS Data Pipeline, um einige CSV-Daten von S3 nach Redshift zu importieren. Ich habe auch eine ShellCommandActivity hinzugefügt, um alle S3-Dateien nach Abschluss der Kopieraktivität zu e