Benutzerdefinierte Aktivität in Azure Data Factory ist nach mehreren Stunden fehlgeschlagen

Question

Ich habe benutzerdefinierte .Net-Aktivitäten in Azure Data Factory mithilfe eines HDInsight-Cluster auf Anforderung ausgeführt. Aktivität verarbeitet XML-Dateien, die in Azure Blob gespeichert sind, und verschiebt sie in Azure Data Lake Store. Er scheiterte nach 28 Stunden Ausführung mit dem folgenden Fehler:

"Error in Activity: The request was aborted: The request was canceled.."

Es gibt keine Protokolldateien für diese Aktivität laufen und über Fehler vorhanden waren, ist nicht gut genug, um das Problem zu beheben. Wie kann ich dieses Problem beheben?

Answer 1

Ich schlage vor, Sie überprüfen das Systemprotokoll. Selbst wenn Sie kein Benutzerprotokoll haben, sollten Sie ein Systemprotokoll haben, das Ihnen hilft, Ihr Problem zu untersuchen.

Sie sollten in der Lage sein, Systemprotokoll vom Detail gescheiterten Ausgabedatensatzes zu überprüfen (siehe unten)

Wenn Sie eine linkedServce für On-Demand-HDInsight erstellen, sollen Sie „linkedServiceName“ in typeProperties angeben

{ 
    "$schema": "http://datafactories.schema.management.azure.com/schemas/2015-08-01/Microsoft.DataFactory.LinkedService.json", 
    "name": "LinkedServiceOnDemand_OnCloud_HDInsight", 
    "properties": { 
     "type": "HDInsightOnDemand", 
     "typeProperties": { 
      "clusterSize": 1, 
      "timeToLive": "00:10:00", 
      "linkedServiceName": "LinkedService_OnCloud_Storage" 
     } 
    } 
} 

In diesem Speicher werden Protokolle erstellt. Wenn es nicht erstellt worden wäre, wäre die einzige Möglichkeit, einen technischen Support von Microsoft zu erhalten.