Jaa

Apache Spark -valvonnan yleiskatsaus

  • Artikkeli

Microsoft Fabric Spark -valvonta on suunniteltu tarjoamaan verkkokäyttöliittymäpohjaisen kokemuksen, jossa on valmiita monipuolisia ominaisuuksia Spark-sovellusten edistymisen ja tilan seurantaan, aiempien Spark-toimintojen selaamiseen, suorituskyvyn analysointiin ja optimoinniin sekä virheiden vianmäärityksen helpottamiseen. Spark-sovelluksen tietojen selaamiseen, valvontaan ja tarkasteluun on saatavilla useita aloituspisteitä.

Valvontakeskus

Valvontakeskus toimii keskitetynä portaalina Spark-aktiviteettien selaamiseen kohteiden välillä. Yhdellä silmäyksellä voit tarkastella keskeneräisiä Spark-sovelluksia, jotka on käynnistetty notebooks-, Spark Job Definitions- ja Pipelines-kohteista. Voit myös hakea ja suodattaa Spark-sovelluksia erilaisten ehtojen mukaan ja porautua alaspäin, niin saat näkyviin lisää Spark-sovelluksen Spark-suoritustietoja. Avaa Valvontakeskus valitsemalla Fabric-portaalissa Monitor Monitor siirtymisruudusta.

Kohteen viimeaikaiset suoritukset

Kun käsittelet tiettyjä kohteita, viimeisimmät työnkulut -ominaisuuden avulla voit selata kohteen nykyisiä ja viimeaikaisia toimintoja ja saada merkityksellisiä tietoja lähettäjästä, tilasta, kestosta ja muista tiedoista sinun tai muiden lähettämistä toiminnoista.

Muistikirjan tilannekohtainen valvonta

Muistikirjan tilannekohtainen valvonta tarjoaa mahdollisuuden spark-töiden tuottamiseen, valvontaan ja virheenkorjaukseen yhdessä paikassa. Voit valvoa Spark-työn edistymistä, tarkastella Spark-suoritustehtäviä ja -suorittajia sekä käyttää spark-lokeja muistikirjan solutasolla. Spark-neuvonantaja on myös sisäänrakennettu muistikirjaan, jotta se tarjoaa reaaliaikaisia neuvoja koodin ja solun Spark-suorittamiseen ja virheanalyysin suorittamiseen.

Spark-työn määrityksen sisäinen valvonta

Spark-työn määrityksen sisäinen valvonta -ominaisuuden avulla voit tarkastella Spark-työmäärityksen lähettämistä ja suoritustilaa reaaliaikaisesti sekä tarkastella Spark-työmäärityksen aiempia suorituksia ja määrityksiä. Voit siirtyä Spark-sovelluksen tietosivulle ja tarkastella lisätietoja.

Putken Spark-toimintojen sisäinen valvonta

Putken spark-toimintojen sisäisen seurannan osalta muistikirja- ja Spark-työmääritelmän toimintoihin on muodostettu syvälinkit putken sisällä. Voit tarkastella Spark-sovelluksen suoritustietoja, muistikirjaa ja Spark-työmäärityksen tilannevedosta sekä käyttää Spark-lokeja vianmääritystä varten. Jos Spark-aktiviteetit epäonnistuvat, sisäinen virhesanoma on käytettävissä myös Pipeline Spark -toiminnoissa.

Liittyvä sisältö