Delen via

Spark-configuraties migreren van Azure Synapse Analytics naar Fabric

Apache Spark biedt talloze configuraties die kunnen worden aangepast om de ervaring in verschillende scenario's te verbeteren. In Azure Synapse Spark en Fabric Data-engineer ing hebt u de flexibiliteit om deze configuraties of eigenschappen op te nemen om uw ervaring aan te passen. In Fabric kunt u Spark-configuraties rechtstreeks in uw Spark-taken toevoegen aan een omgeving en inline Spark-eigenschappen gebruiken. Gebruik een omgeving om Azure Synapse Spark-poolconfiguraties te verplaatsen naar Fabric.

Raadpleeg voor overwegingen met betrekking tot Spark-configuratie verschillen tussen Azure Synapse Spark en Fabric.

Vereisten

  • Als u er nog geen hebt, maakt u een Fabric-werkruimte in uw tenant.
  • Als u er nog geen hebt, maakt u een omgeving in uw werkruimte.

Optie 1: Spark-configuraties toevoegen aan aangepaste omgeving

In een omgeving kunt u Spark-eigenschappen instellen en deze configuraties worden toegepast op de geselecteerde omgevingsgroep.

  1. Open Synapse Studio: meld u aan bij Azure. Navigeer naar uw Azure Synapse-werkruimte en open Synapse Studio.
  2. Spark-configuraties zoeken:
    • Ga naar Het gebied Beheren en selecteer in Apache Spark-pools.
    • Zoek de Apache Spark-pool, selecteer Apache Spark-configuratie en zoek de naam van de Spark-configuratie voor de pool.
  3. Spark-configuraties ophalen: u kunt deze eigenschappen verkrijgen door Configuraties weergeven te selecteren of configuratie (.txt/.conf/.json-indeling) te exporteren vanuit Configuraties en bibliotheken van Apache Spark-configuraties>.
  4. Zodra u Spark-configuraties hebt, voegt u aangepaste Spark-eigenschappen toe aan uw omgeving in Fabric:
    • Ga in de omgeving naar Spark Compute>Spark-eigenschappen.
    • Spark-configuraties toevoegen. U kunt ze handmatig toevoegen of importeren uit .yml.
  5. Klik op Wijzigingen opslaan en publiceren .

Schermopname van Spark-configuraties.

Meer informatie over het toevoegen van Spark-configuraties aan een omgeving.

Gerelateerde inhoud