Apache Spark -kapasiteetin kulutuksen valvonta
Tämän artikkelin tarkoituksena on antaa ohjeita järjestelmänvalvojille, jotka haluavat valvoa hallitsemiensa kapasiteettien toimintoja. Microsoft Fabric Capacity Metrics -sovelluksessa saatavilla olevia Apache Spark -kapasiteetin kulutusraportteja hyödyntämällä järjestelmänvalvojat voivat saada merkityksellisiä tietoja kohteiden laskutettavasta Spark-kapasiteetin kulutuksesta, mukaan lukien Lakehouse, Notebook ja Apache Spark -työmääritykset. Joitakin Spark-kapasiteetin kulutustoimintoja ei raportoida sovelluksessa.
Ilmoitettu spark-kapasiteetin kulutus
Seuraavia Lakehouse-, muistikirja- ja Spark-työmääritelmien toimintoja käsitellään laskutettavana toimintona.
| Työvaiheen nimi | Nimike | Kommentit |
|---|---|---|
| Lakehousen toiminnot | Lakehouse | Käyttäjät esikatselevat Lakehouse Explorerin taulukkoa. |
| Lakehouse-taulukkokuormitus | Lakehouse | Käyttäjät lataavat delta-taulukon Lakehouse Exploreriin. |
| Muistikirjan suorittaminen | Muistikirja | Käyttäjät käyttävät muistikirjaa manuaalisesti. |
| Notebook HC run | Muistikirja | Muistikirja suoritetaan suuren samanaikaisuuden Apache Spark -istunnon alla. |
| Muistikirjan ajoitettu suoritus | Muistikirja | Muistikirja suoritetaan muistikirjojen ajoitettujen tapahtumien käynnistämänä. |
| Muistikirjaputken suorittaminen | Muistikirja | Muistikirja suoritetaan putken mukaan. |
| Muistikirjan VS Code -suoritus | Muistikirja | Notebook suoritetaan VS Codessa. |
| Spark-työn suorittaminen | Spark-työn määritelmä | Käyttäjän lähetyksen käynnistämät Spark-eräajot. |
| Spark-työn ajoitettu suoritus | Spark-työn määritelmä | Muistikirjan ajoitettujen tapahtumien käynnistämät erätyön suoritukset. |
| Spark-työputken suorittaminen | Spark-työn määritelmä | Erätyön suoritukset käynnistetään putken mukaan. |
| Spark job VS Code run | Spark-työn määritelmä | VS Codesta lähetetty Spark-työn määritys. |
Spark-kapasiteetin kulutuksesta, jota ei raportoida
On joitakin Spark-kapasiteetin kulutustoimintoja, joita ei raportoida mittarisovelluksessa. Näitä toimintoja ovat esimerkiksi järjestelmän Spark-työt kirjastonhallintaa varten ja tietyt järjestelmän Spark-työt Spark Live -varannolle tai reaaliaikaisille istunnille.
Kirjastonhallinta : kirjastonhallintaan liittyvää kapasiteetin kulutusta työtilan tasolla ei raportoida mittarisovelluksessa.
System Spark -työt – Spark-kapasiteetin kulutusta, jota ei ole liitetty muistikirjaan, Spark-työmääritykseen tai lakehouse-sijaintiin, ei sisällytetä kapasiteetin raportointiin.
Kapasiteetin kulutusraportit
Kaikki Sparkiin liittyvät toiminnot luokitellaan taustatoiminnoiksi. Spark-kaavion kapasiteetin kulutus näkyy muistikirjan, Spark-työn määrityksen tai lakehousen alla, ja se koostetaan toiminnon nimen ja kohteen mukaan.
Taustatoimintojen raportti
Taustatoiminnot näytetään tietylle aikapisteelle. Raportin taulukossa kukin rivi viittaa käyttäjätoimintoon. Tarkista Käyttäjä-sarakkeesta, kuka suoritti tietyn toiminnon. Jos tarvitset lisätietoja tietystä toiminnosta, voit etsiä sen Microsoft Fabric -valvontakeskuksesta sen toimintotunnuksen avulla.
