Työjonossa Apache Spark for Microsoft Fabricissa
Koskee seuraavia:✅ Microsoft Fabricin tietotekniikka ja datatiede
Microsoft Fabric tukee taustatöiden jonotusta, kun Fabric-kapasiteettisi Spark-käsittelyrajoitukset on saavutettu. Töiden jonotallennusjärjestelmä tarjoaa automaattisia uudelleentarjouksia työille, jotka lisätään jonoon, kunnes ne saavuttavat jonon vanhentumisen. Kun käyttäjät luovat Microsoft Fabric -kapasiteetin Azuressa, he valitsevat kapasiteetin koon analytiikkakuormituksensa koon mukaan. Kun olet ostanut kapasiteetin, järjestelmänvalvojat voivat luoda kapasiteettiin kuuluvia työtiloja Microsoft Fabricissa. Näissä työtiloissa suoritettavat spark-työtilat voivat käyttää enintään tietylle kapasiteetille varattuja ytimiä. Kun enimmäisraja on saavutettu, työt ovat joko rajoitettuja tai jonossa.
Lue lisätietoja Microsoft Fabricin Spark-samanaikaisuusrajoista
Työjonoja tuetaan muistikirjatöissä, jotka käynnistetään putkilla tai ajoitustoiminnolla, sekä Spark-työmäärityksiä varten. Jonotusta ei tueta vuorovaikutteisissa muistikirjatöistä ja muistikirjatöistä, jotka käynnistetään muistikirjan julkisen ohjelmointirajapinnan kautta.
Jono toimii FIFO(First-In-First-Out) -tavalla, jossa työt lisätään jonoon niiden lähetysajan mukaan ja niitä yritetään uudelleen ja aloitetaan jatkuvasti, kun kapasiteetti vapautetaan.
Muistiinpano
Spark-töiden jonotusta ei tueta, kun Fabric-kapasiteetti on rajoittamassa tilaa. Kaikki lähetetyt uudet työt hylätään.
Kun työ on lisätty jonoon, sen tilaksi päivitetään Ei aloitettu valvontakeskuksessa. Muistikirjat ja Spark Job -määritelmät, kun ne poimitaan jonosta ja käynnistetään, niiden tila päivitetään Ei aloitettu -tilasta Keskeneräinen -tilaan.
Muistiinpano
Jonon vanhentuminen on 24 tuntia kaikissa työpaikoissa siitä päivästä, kun ne otettiin jonoon. Kun vanhentumisaika on saavutettu, työt on määritettävä uudelleen.
Jonon koot
Fabric Spark pakottaa jonokoot työtilaan liitetyn kapasiteetin SKU-koon mukaan, mikä tarjoaa rajoittamis- ja jonotusmekanismin, jossa käyttäjät voivat lähettää töitä ostetun Fabric-kapasiteetin SKU:iden perusteella.
Seuraavassa osiossa on lueteltu useita Microsoft Fabriciin perustuvien Spark-kuormitusten jonokokoja kapasiteetin SKU:iden mukaan:
| Fabric-kapasiteetin SKU | Vastaava Power BI -varastointiyksikkö | Jonon rajoitus |
|---|---|---|
| F2 | - | 4 |
| F4 | - | 4 |
| F8 | - | 8 |
| F16 | - | 16 |
| F32 | - | 32 |
| F64 | P1 | 64 |
| F128 | P2 | 128 |
| F256 | P3 | 256 |
| F512 | P4 | 512 |
| F1024 | - | 1024 |
| F2048 | - | 2048 |
| Kokeiluversion kapasiteetti | P1 | Ei saatavilla |
Muistiinpano
Fabric-kokeilukapasiteetit eivät tue jonoon asettamista. Käyttäjien on siirryttävä maksulliseen Fabric F- tai P-varastointiyksikköön, jotta he voivat käyttää jonotusta Spark-työpaikoissa.
Kun Fabric-kapasiteetin enimmäisjonorajoitus on saavutettu, lähetetyt uudet työt rajoitetaan virhesanoman [TooManyRequestsForCapacity] avulla Tätä spark-työtä ei voida suorittaa, koska spark-käsittely- tai ohjelmointirajapintaprosenttiraja on saavutettu. Jos haluat suorittaa tämän spark-työn, peruuta aktiivinen Spark-työ valvontakeskuksen kautta, valitse suurempi kapasiteetin SKU tai yritä myöhemmin uudelleen. HTTP-tilakoodi: 430 {Learn more} HTTP-tilakoodi: 430.
Liittyvä sisältö
- Tutustu Sparkin laskutuson ja käyttöön Microsoft Fabricissa.
- Lue lisätietoja Fabric-tietotekniikan ja -tietojenkäsittelyn Spark-käsittelystä.