Monitorování stavu a výkonu eventstreamu
Funkce streamů událostí Microsoft Fabric umožňuje snadno monitorovat streamovaná data událostí, stav příjmu dat a výkon příjmu dat. Tento článek vysvětluje, jak monitorovat stav eventstreamu, kontrolovat protokoly, chyby a přehledy dat pomocí metrik.
V eventstreamu existují dva typy prostředí monitorování: přehledy dat a protokoly modulu runtime. V závislosti na vybraném zdroji nebo cíli se zobrazí jedno nebo obě zobrazení.
Požadavky
Než začnete, musíte mít:
- Přístup k pracovnímu prostoru s oprávněními Prohlížeče nebo vyššími oprávněními, kde se nachází položka Eventstream.
- Zdroj centra událostí Azure nebo cíl lakehouse přidaný do vašeho eventstreamu.
Přehledy dat
Karta Přehledy dat se zobrazí v dolním podokně hlavního editoru. Karta poskytuje metriky, které můžete použít k monitorování stavu a výkonu streamu událostí, zdrojů a cílů. Různé zdroje a cíle mají různé metriky. Když vyberete uzel na plátně hlavního editoru, metriky pro daný uzel se zobrazí na kartě Přehledy dat.
Přehledy dat v uzlu eventstreamu
Na kartě Přehledy dat se zobrazí následující metriky pro uzel eventstream:
| Metrika | Unit | Popis |
|---|---|---|
| IncomingMessages | Počet | Počet událostí nebo zpráv odesílaných do eventstreamu v zadaném období. |
| Odchozí zprávy | Počet | Počet událostí nebo zpráv odtékají z eventstreamu v zadaném období. |
| Příchozíbyty | Přijaté | Příchozí bajty pro eventstream v zadaném období. |
| Odchozíbyty | Přijaté | Odchozí bajty pro eventstream v zadaném období. |
Zobrazení přehledů dat pro eventstream:
Na plátně hlavního editoru vyberte uzel eventstreamu.
V dolním podokně vyberte kartu Přehledy dat.
Pokud v datovém proudu událostí existují data, zobrazí se graf metrik na kartě Přehledy dat.
Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Přehledy dat ve službách Azure Event Hub, Azure IoT Hub, Lakehouse, Eventhouse, odvozené datové proudy a aktivační uzly Fabric.
Následující metriky jsou k dispozici na kartě Přehledy dat pro centrum událostí Azure, Azure iot Hub, lakehouse, Eventhouse (zpracování událostí před režimem příjmu dat), odvozené uzly streamu a aktivátoru infrastruktury:
| Metrika | Unit | Popis |
|---|---|---|
| Vstupní události | Počet | Počet dat událostí, která engine eventstream načítá z eventstreamu (v prostředí Lakehouse, Eventhouse, odvozeného datového proudu nebo cílového místa aktivátoru Fabric) nebo ze zdroje událostí (v centru událostí Azure nebo IoT hubu Azure). |
| Bajty vstupních událostí | Přijaté | Množství dat událostí, která modul zpracování událostí načítá z datového proudu (v rámci lakehouse, Eventhouse, odvozeného proudu nebo cíle aktivátoru Fabric) nebo ze zdroje události (ve zdroji Azure Event Hub nebo Azure IoT Hub). |
| Výstupní události | Počet | Počet dat událostí, která motor událostí odesílá do lakehouse nebo Eventhouse (v lakehouse, Eventhouse, odvozeném datovém proudu nebo cíli aktivátoru Fabric), nebo ze zdroje událostí (v Azure Event Hub nebo zdroji Azure IoT Hub). |
| Nevyřízených vstupních událostí | Počet | Počet vstupních událostí, které jsou backlogovány v modulu událostí. |
| Chyby za běhu | Počet | Celkový počet chyb souvisejících se zpracováním událostí |
| Chyby převodu dat | Počet | Počet výstupních událostí, které se nedají převést na očekávané výstupní schéma |
| chyby deserializace | Počet | Počet vstupních událostí, které nebylo možné deserializovat uvnitř modulu eventstream. |
| Zpoždění vodoznaku | Second | Maximální zpoždění vodoznaku napříč všemi oddíly všech výstupů pro tento zdroj nebo cíl Vypočítá se jako hodinový čas zdi minus největší vodoznak. |
Pokud chcete zobrazit přehledy dat pro centrum událostí Azure, Azure IoT Hub, Lakehouse, Eventhouse ('režim zpracování událostí před příjmem'), odvozený stream a Fabric activator:
Na plátně hlavního editoru vyberte centrum událostí Azure, centrum Azure IoT, lakehouse, Eventhouse, odvozený stream nebo uzel aktivátoru Fabric.
V dolním podokně vyberte kartu Přehledy dat.
Pokud jsou data v Azure Event Hub, Azure IoT Hub, lakehouse, Eventhouse, odvozeném proudu nebo aktivátoru Fabric, zobrazí se graf metrik na kartě Přehledy dat.
Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Přehledy dat ve zdrojových uzlech konektoru streamování
Mezi zdrojové uzly konektoru streamování patří následující zdroje:
- Azure SQL Database Change Data Capture (CDC)
- Azure Service Bus
- Databáze PostgreSQL – CDC
- CdC databáze MySQL
- Azure Cosmos DB CDC
- SQL Server na databázi virtuálních počítačů (CDC)
- Azure SQL Managed Instance CDC
- Google Cloud Pub/Sub
- Datové proudy Amazon Kinesis
- Confluent Cloud Kafka
- Apache Kafka
- Amazon MSK Kafka
Na kartě Přehledy dat jsou k dispozici následující metriky pro zdrojové uzly konektoru streamování:
| Metrika | Unit | Popis |
|---|---|---|
| Odchozí události zdroje | Počet | Počet záznamů vypsaných z transformací (pokud existuje) a zapsaných do eventstreamu úkolu, který patří do pojmenovaného zdrojového konektoru pracovního procesu (od posledního restartování úkolu). |
| Zdrojové příchozí události | Počet | Před použitím transformací se jedná o počet záznamů vytvořených nebo dotazovaných úkolem, který patří do pojmenovaného zdrojového konektoru v pracovním procesu (od posledního restartování úkolu). |
| Zaprotokolované chyby konektoru | Počet | Počet chyb, které byly zaprotokolovány pro tyto úlohy konektoru. |
| Chyby zpracování konektorů | Počet | Počet chyb zpracování záznamů v těchto úlohách konektoru |
| Selhání zpracování konektorů | Počet | Počet selhání zpracování záznamů v těchto úlohách konektoru, včetně selhání opakování. |
| Přeskočeny události konektoru | Počet | Počet záznamů se vynechal kvůli chybám v rámci těchto úloh konektoru. |
Zobrazení přehledů dat pro zdroj streamovaného konektoru:
- Vyberte Použít externí zdroj a pak zvolte zdroj konektoru streamování.
- Nakonfigurujte a publikujte zdroj konektoru streamování.
- V dolním podokně v živém zobrazení vyberte kartu Přehledy dat.
- Pokud zdroj streamovaného konektoru obsahuje data, zobrazí se graf metrik na kartě Přehledy dat.
- Na pravé straně karty zaškrtněte políčka vedle metrik, které chcete zobrazit.
Protokoly modulu runtime
Karta Protokoly modulu runtime umožňuje zkontrolovat podrobné protokoly, ke kterým dochází v modulu událostí. Protokoly modulu runtime mají tři úrovně závažnosti: upozornění, chybu a informace.
Pokud chcete zobrazit protokoly prostředí runtime pro centrum událostí Azure, Azure IoT Hub, zdroj streamovacího konektoru, lakehouse, Eventhouse (režim zpracování událostí před příjmem) nebo Fabric activator:
Vyberte uzel na plátně hlavního editoru.
V dolním podokně vyberte kartu Protokoly modulu runtime.
Pokud jsou data v centru událostí Azure, Azure IoT Hubu, zdroji konektoru streamování, lakehouse, eventhouse nebo fabricovém aktivátoru, protokoly se zobrazí na kartě protokoly modulu runtime.
Prohledejte protokoly pomocí možnosti Filtrovat podle klíčových slov nebo seznam vyfiltrujte změnou závažnosti nebo typu.
Pokud chcete zobrazit nejnovější protokoly, vyberte Aktualizovat.
