ADF Pipeline Error:
ADF Pipeline Error 3252
What does this error mean?
Spark job failed: not enough vCores available. Cause: vCore quota exhausted or too many concurrent jobs.
Common causes
- 1Onvoldoende virtual cores beschikbaar in de workspace quota
- 2Te veel gelijktijdig draaiende Spark-jobs die het vCore-budget opslokken
- 3Spark pool geconfigureerd met meer vCores dan de workspace quota toelaat
- 4Andere pipelines of notebooks claimen vCores op hetzelfde moment
How to fix it
- 1Beëindig lopende Spark-jobs in de workspace om vCores vrij te maken.
- 2Verlaag het aantal aangevraagde vCores in de Spark pool- of activity-configuratie.
- 3Verhoog de vCore-quota van de workspace via Azure Portal (Subscription > Usage + quotas).
- 4Verplaats de pipeline naar een andere workspace met beschikbare capaciteit.
- 5Raadpleeg Apache Spark core concepts om vCore-gebruik per executor te optimaliseren.
Frequently asked questions
Source · learn.microsoft.com/en-us/azure/data-factory/data-factory-troubleshoot-guide#error-code-3252