How do I fix ADF Pipeline Error 2312?

Open de ADF Monitoring-pagina en klik op de Output van de gefaalde activity run om de links naar de HDInsight-batch te volgen.. Noteer de batchId uit de foutmelding en haal het volledige log van de batch-job op via de HDInsight Spark Livy/Batch endpoint (zie Microsoft-docs: 'Get the full log of a batch job').. Analyseer de driver- en executor-logs in het cluster om de root cause van de Spark-fout te identificeren (OOM, code-exception, missing dependency, data-issue).. Los het onderliggende probleem op (clusterconfiguratie, code, dependencies of input data) en herstart de pipeline-run.. Als het probleem niet te herleiden is, neem contact op met het HDInsight-supportteam en lever de batchId en volledige logs aan.

High severityconfigurationAzure Data Factory →

ADF Pipeline Error:
ADF Pipeline Error 2312

What does this error mean?

Spark job failed on HDInsight cluster for a given batch ID; troubleshoot via the activity run Output in the Monitoring page.

Common causes

1Spark-job op het HDInsight-cluster faalt tijdens uitvoering van de batch
2Resource- of configuratieproblemen op het HDInsight Spark-cluster (memory, executors, node health)
3Fouten in de Spark-applicatiecode of afhankelijkheden (jars, packages, versieconflicten)
4Connectiviteits- of permissieproblemen tussen ADF linked service en het HDInsight-cluster

How to fix it

1Open de ADF Monitoring-pagina en klik op de Output van de gefaalde activity run om de links naar de HDInsight-batch te volgen.
2Noteer de batchId uit de foutmelding en haal het volledige log van de batch-job op via de HDInsight Spark Livy/Batch endpoint (zie Microsoft-docs: 'Get the full log of a batch job').
3Analyseer de driver- en executor-logs in het cluster om de root cause van de Spark-fout te identificeren (OOM, code-exception, missing dependency, data-issue).
4Los het onderliggende probleem op (clusterconfiguratie, code, dependencies of input data) en herstart de pipeline-run.
5Als het probleem niet te herleiden is, neem contact op met het HDInsight-supportteam en lever de batchId en volledige logs aan.

Frequently asked questions

What causes ADF Pipeline Error 2312?

Pipeline configuration or connectivity issue

Where can I find more details?

Open Azure Data Factory Monitor, find the failed run, click on the activity, and view the full error output in the Output tab.

Source · learn.microsoft.com/en-us/azure/data-factory/data-factory-troubleshoot-guide#error-code-2312