Účty služby Block Blob Storage úrovně Premium
Účty úložiště objektů blob bloku úrovně Premium zpřístupní data prostřednictvím vysoce výkonného hardwaru. Data se ukládají na disky SSD (Solid-State Drive), které jsou optimalizované pro nízkou latenci. Disky SSD poskytují vyšší propustnost v porovnání s tradičními pevnými disky. Přenos souborů je mnohem rychlejší, protože data jsou uložená na okamžitě přístupných paměťových čipech. Všechny části jednotky jsou přístupné najednou. Naproti tomu výkon pevného disku (HDD) závisí na blízkosti dat s hlavičkami čtení a zápisu.
Úlohy s vysokým výkonem
Účty úložiště objektů blob bloku úrovně Premium jsou ideální pro úlohy, které vyžadují rychlou a konzistentní dobu odezvy nebo mají vysoký počet vstupních výstupních operací za sekundu (IOP). Mezi ukázkové úlohy patří:
Interaktivní úlohy. Vysoce interaktivní a aplikace v reálném čase musí rychle zapisovat data. Elektronické obchodování a mapování aplikací často vyžadují okamžité aktualizace a zpětnou vazbu uživatelů. Například v aplikaci elektronického obchodování se méně často zobrazované položky pravděpodobně neukládají do mezipaměti. Musí se ale okamžitě zobrazit zákazníkovi na vyžádání. Interaktivní úpravy nebo online herní aplikace s více přehrávači udržují kvalitní prostředí tím, že poskytují aktualizace v reálném čase.
IoT/ analýza streamování. Ve scénáři IoT se může do cloudu každou sekundu nasdílet velké množství menších operací zápisu. Velké objemy dat mohou být převzaty, agregovány pro účely analýzy a pak odstraněny téměř okamžitě. Díky vysokým možnostem příjmu dat úložiště objektů blob bloku úrovně Premium je pro tento typ úlohy efektivní.
Umělá inteligence/ strojové učení (AI/ML) AI/ML se zabývá spotřebou a zpracováním různých datových typů, jako jsou vizuály, řeč a text. Tento vysoce výkonný výpočetní typ úlohy se zabývá velkými objemy dat, která vyžadují rychlou odezvu a efektivní časy příjmu dat pro analýzu dat.
Efektivita nákladů
Účty úložiště objektů blob bloku úrovně Premium mají vyšší náklady na úložiště, ale nižší náklady na transakce oproti standardním účtům pro obecné účely verze 2. Pokud vaše aplikace a úlohy provádějí velký počet transakcí, může být úložiště objektů blob bloku úrovně Premium nákladově efektivní, zejména pokud je úloha náročné na zápis.
Ve většině případů jsou úlohy provádějící více než 35 až 40 transakcí za sekundu za terabajt (TPS/TB) vhodnými kandidáty pro tento typ účtu. Pokud například vaše úloha provádí 500 milionů operací čtení a 100 milionů operací zápisu za měsíc, můžete vypočítat TPS/TB takto:
Zápis transakcí za sekundu = 100 000 000 / (30 x 24 x 60 x 60) = 39 (zaokrouhleno na nejbližší celé číslo)
Čtení transakcí za sekundu = 500 000 000 / (30 x 24 x 60 x 60) = 193 (zaokrouhleno na nejbližší celé číslo)
Celkový počet transakcí za sekundu = 193 + 39 = 232
Za předpokladu, že váš účet měl průměrně 5 TB dat, pak tpS/TB bude 230 / 5 = 46.
Poznámka:
Ceny se liší v jednotlivých operacích a v jednotlivých oblastech. Pomocí cenové kalkulačky Azure můžete porovnat ceny mezi úrovněmi výkonu Standard a Premium.
Následující tabulka ukazuje nákladovou efektivitu účtů úložiště objektů blob bloku úrovně Premium. Čísla v této tabulce jsou založená na účtu úložiště objektů blob bloku úrovně Premium s povolenou službou Azure Data Lake Storage (označované také jako úroveň Premium pro Azure Data Lake Storage). Každý sloupec představuje počet transakcí za měsíc. Každý řádek představuje procento transakcí, které jsou načteny transakce. Každá buňka v tabulce zobrazuje procento snížení nákladů spojené s procentem transakce čtení a počtem provedených transakcí.
Předpokládejme například, že váš účet je v oblasti USA – východ 2, počet transakcí s vaším účtem překračuje 90 M a 70 % těchto transakcí jsou transakce čtení, účty úložiště objektů blob bloku úrovně Premium jsou cenově výhodnější.
Poznámka:
Pokud dáváte přednost vyhodnocení efektivity nákladů na základě počtu transakcí za sekundu pro každou TB dat, můžete použít záhlaví sloupců, která se zobrazí v dolní části tabulky.
Scénáře premium
Tato část obsahuje příklady, jak někteří naši partneři azure Storage používají úložiště objektů blob bloku úrovně Premium. Některé z nich také umožňují Azure Data Lake Storage, která představuje hierarchickou strukturu souborů, která může v určitých scénářích dále zvýšit výkon transakcí.
Tip
Pokud máte případ použití analýz, důrazně doporučujeme používat Azure Data Lake Storage spolu s účtem úložiště objektů blob bloku úrovně Premium.
Tato část obsahuje následující příklady:
- Účty služby Block Blob Storage úrovně Premium
Rychlá hydrace dat
Úložiště objektů blob bloku úrovně Premium vám může pomoct rychle hydratovat nebo vyvolat vaše prostředí. V odvětvích, jako je bankovnictví, můžou určité regulační požadavky vyžadovat, aby společnosti pravidelně rušily svá prostředí a pak je znovu znova zvrácely. Data použitá k hydrataci jejich prostředí se musí rychle načíst.
Někteří naši partneři ukládají kopii své instance MongoDB každý týden do účtu úložiště objektů blob bloku úrovně Premium. Systém se pak roztrhne. Pokud chcete systém znovu rychle znovu online, načte se a načte nejnovější kopie instance MongoDB. Pro účely auditu se předchozí kopie uchovávají v cloudovém úložišti po určitou dobu.
Interaktivní úpravy aplikací
V aplikacích, kde více uživatelů upravuje stejný obsah, se rychlost aktualizací stává kritickou pro bezproblémové uživatelské prostředí.
Někteří naši partneři vyvíjejí software pro úpravy videa. Jakákoli aktualizace, kterou uživatel provede ve videu, se okamžitě zobrazí ostatním uživatelům. Uživatelé se můžou soustředit na své úkoly místo toho, aby čekali na zobrazení aktualizací obsahu. Nízká latence přidružená k úložišti objektů blob bloku Úrovně Premium pomáhá vytvořit toto bezproblémové prostředí a prostředí pro spolupráci.
Software pro vizualizaci dat
Uživatelé můžou být mnohem produktivnější díky softwaru pro vizualizaci dat, pokud je doba vykreslování rychlá.
Viděli jsme společnosti v oblasti mapování, které používají k detekci problémů s mapami editory mapování. Tyto editory používají data generovaná z dat systému GPS (Global Positioning System) zákazníka. Pokud chcete vytvořit překrytí map, vykresluje editační software malé části mapy rychlým prováděním klíčových vyhledávání.
V jednom případě před použitím úložiště objektů blob bloku úrovně Premium používal partner clustery HBase založené na standardním úložišti pro obecné účely verze 2. Bylo ale nákladné udržovat velké clustery spuštěné po celou dobu. Tento partner se rozhodl odejít z této architektury a místo toho použil úložiště objektů blob bloku úrovně Premium pro rychlé vyhledávání klíčů. K vytváření překrývajících se rozhraní REST API použila k vykreslení dlaždic odpovídajících souřadnicím GPS. Účet úložiště objektů blob bloku úrovně Premium jim poskytl nákladově efektivní řešení a latence byly mnohem předvídatelnější.
Podniky elektronického obchodování
Kromě podpory svých zákaznických obchodů mohou firmy elektronického obchodování také poskytovat interním týmům řešení pro datové sklady a analýzy. Viděli jsme, že partneři používají účty úložiště objektů blob bloku Úrovně Premium k podpoře požadavků na nízkou latenci v těchto datových skladech a analytických řešeních. V jednom případě tým katalogu udržuje aplikaci datového skladu pro data, která se týkají nabídek, cen, způsobů expedice, dodavatelů, zásob a logistiky. Informace se dotazují, naskenují, extrahují a minují pro více případů použití. Tým na těchto datech spouští analýzy, které poskytují různým merchandisingovým týmům relevantní přehledy a informace.
Interaktivní analýzy
V téměř každém odvětví je potřeba, aby podniky interaktivně dotazovaly a analyzovaly svá data.
Datoví vědci, analytici a vývojáři můžou rychleji odvodit přehledy citlivé na čas spuštěním dotazů na data uložená v účtu úložiště objektů blob bloku úrovně Premium. Vedoucí pracovníci můžou řídicí panely načíst mnohem rychleji, když data, která se zobrazí na těchto řídicích panelech, pocházejí z účtu úložiště objektů blob bloku úrovně Premium místo účtu úložiště objektů blob úrovně Standard pro obecné účely verze 2.
V jednom scénáři potřebovali analytici rychle analyzovat telemetrická data z milionů zařízení, aby lépe pochopili, jak se používají jejich produkty, a aby mohli rozhodovat o vydávání produktů. Ukládání dat do databází SQL je nákladné. Ke snížení nákladů a ke zvýšení dotazovatelné plochy použili účet úložiště objektů blob bloku úrovně Premium a provedli výpočty v Presto a Sparku k vytváření přehledů z tabulek Hive. Díky tomu mají i zřídka přístupná data stejný výkon výpočetních prostředků jako často všechna často daná data.
K zavření mezery mezi výkonem podsekundového SQL a vstupně-výstupními operacemi presto za sekundu (IOPs) pro externí úložiště, konzistenci a rychlost jsou důležité, zejména při práci s malými optimalizovanými sloupcovými soubory řádků (ORC). Účet úložiště objektů blob bloku úrovně Premium při použití se službou Data Lake Storage opakovaně ukázal vylepšení výkonu 3X oproti standardnímu účtu pro obecné účely v2 v tomto scénáři. Dotazy se spouštěly dostatečně rychle, aby se cítily jako místní pro výpočetní počítač.
V jiném případě partner ukládá protokoly a dotazuje se z jejich řešení zabezpečení. Protokoly se generují pomocí Databricks a pak se ukládají do účtu úložiště objektů blob bloku úrovně Premium s povolenou službou Data Lake Storage. Koncoví uživatelé se na tato data dotazují a prohledávají pomocí Azure Data Exploreru. Zvolili tento typ účtu, aby zvýšili stabilitu a zvýšili výkon interaktivních dotazů. Nastavují také zásady správy Delete Action životního cyklu na několik dní, což pomáhá snížit náklady. Tato zásada brání tomu, aby data uchovávali navždy. Místo toho se data odstraní, jakmile už je nepotřebujete.
Kanály zpracování dat
V téměř každém odvětví je potřeba, aby podniky zpracovávaly data. Nezpracovaná data z více zdrojů je potřeba vyčistit a zpracovat, aby byla užitečná pro příjem dat v nástrojích, jako jsou řídicí panely dat, které pomáhají uživatelům rozhodovat.
I když rychlost zpracování není vždy hlavním zájmem při zpracování dat, některá odvětví ji vyžadují. Například společnosti v odvětví finančních služeb často potřebují spolehlivě zpracovávat data a co nejrychleji. Aby bylo možné zjistit podvod, musí tyto společnosti zpracovávat vstupy z různých zdrojů, identifikovat rizika pro své zákazníky a provádět rychlé kroky.
V některých případech jsme viděli, že partneři k ukládání dat z různých zdrojů používají více účtů úložiště úrovně Standard. Některá z těchto dat se pak přesunou do účtu úložiště objektů blob bloku úrovně Premium s povolenou službou Data Lake Storage, kde aplikace pro zpracování dat často čte nově přicházející data. Volání výpisu adresářů v tomto účtu byla mnohem rychlejší a prováděla mnohem konzistentněji, než by jinak prováděla ve standardním účtu pro obecné účely v2. Rychlost a konzistence, kterou účet nabízí, zajistilo, že nová data byla vždy co nejrychleji zpřístupněna systémům zpracování podřízeným datům. To jim pomohlo rychle zachytit potenciální bezpečnostní rizika a reagovat na ně.
Internet věcí (IoT)
IoT se stala významnou součástí našeho každodenního života. IoT se používá ke sledování pohybu aut, kontrolových světel a monitorování našeho stavu. Má také průmyslové aplikace. Například společnosti používají IoT k tomu, aby své projekty inteligentní továrny, zlepšily zemědělský výstup a na ropných plošinách pro prediktivní údržbu. Účty úložiště objektů blob bloku úrovně Premium přidávají do těchto scénářů významnou hodnotu.
Máme partnery v těžbě průmyslu. Data Lake Storage umožňují účet úložiště objektů blob bloku úrovně Premium spolu s HDInsight (Hbase) k ingestování dat snímačů časových řad z více typů dolování s velmi daňovým profilem zatížení. Úložiště objektů blob bloku úrovně Premium pomohlo vyhovět jejich potřebě pro příjem vysoké míry vzorkování. Je také nákladově efektivní, protože úložiště objektů blob bloku Úrovně Premium je optimalizované pro úlohy, které provádějí velký počet transakcí zápisu, a tato úloha generuje velký počet malých transakcí zápisu (v desítkách tisíc za sekundu).
Machine Learning
V mnoha případech je potřeba zpracovat velké množství dat pro trénování modelu strojového učení. Aby bylo zpracování dokončeno, musí výpočetní počítače běžet dlouhou dobu. V porovnání s náklady na úložiště náklady na výpočetní prostředky obvykle účtují mnohem větší procento faktury, takže snížení doby, po kterou výpočetní počítače běží, můžou vést k významným úsporám. Nízká latence, kterou získáte pomocí úložiště objektů blob bloku úrovně Premium, může výrazně zkrátit tuto dobu a fakturu.
Máme partnery, kteří nasazují kanály zpracování dat do clusterů Spark, kde spouští trénování a odvozování strojového učení. Ukládají tabulky Sparku (soubory parquet) a kontrolní body do účtu úložiště objektů blob bloku úrovně Premium. Kontrolní body Sparku můžou vytvořit velký počet vnořených souborů a složek. Operace výpisu adresáře jsou rychlé, protože kombinují nízkou latenci účtu úložiště objektů blob bloku Úrovně Premium s hierarchickou datovou strukturou dostupnou ve službě Data Lake Storage.
Máme také partnery v polovodičovém průmyslu s případy použití, které protínají IoT a strojové učení. Zařízení IoT připojená k strojům ve výrobní závodu pořují snímky polovodičových oplatek a odesílají je do svého účtu. Pomocí odvození hlubokého učení může systém informovat místní počítače, pokud dojde k problému s produkčním prostředím a pokud je potřeba provést nějakou akci. Dokážou rychle a spolehlivě načítat a zpracovávat obrázky. S využitím účtu úložiště objektů blob bloku úrovně Premium s povolenou službou Data Lake Storage to pomůžete.
Analýzy streamování v reálném čase
Aby systém podporoval interaktivní analýzy téměř v reálném čase, musí ingestovat a zpracovávat velké objemy dat a pak tato data zpřístupnit podřízeným systémům. Pro tyto typy scénářů je ideální použití účtu úložiště objektů blob bloku úrovně Premium s povolenou službou Data Lake Storage.
Společnosti v mediálním a zábavním průmyslu můžou během vysílání události generovat velký počet protokolů a telemetrických dat za krátkou dobu. Někteří naši partneři spoléhají na streamování na několik partnerů sítě pro doručování obsahu (CDN). Musí rozhodovat téměř v reálném čase o tom, kterým partnerům CDN se má přidělit provoz. Proto musí být data k dispozici pro dotazování po několika sekundách po ingestování. K usnadnění tohoto rychlého rozhodování používají data uložená v úložišti objektů blob bloku Úrovně Premium a zpracovávají tato data v Azure Data Exploreru (ADX). Veškerá telemetrie, která se nahrává do úložiště, se transformuje v ADX, kde je možné ji uložit ve známém formátu, který můžou operátoři a vedoucí pracovníci dotazovat rychle a spolehlivě.
Data se nahrají do několika účtů Blob Storage s výkonem úrovně Premium. Každý účet je připojený k prostředku Event Gridu a centra událostí. ADX načte data ze služby Blob Storage, provede všechny požadované transformace pro normalizaci dat (například dekomprese souborů ZIP nebo převod z JSON na CSV). Data se pak zpřístupní pro dotazy prostřednictvím ADX a řídicích panelů zobrazených v Grafana. Řídicí panely Grafana používají operátoři, vedoucí pracovníci a další uživatelé. Zákazník si uchovává původní protokoly ve službě Premium Performance Storage nebo si je zkopíruje do účtu úložiště pro obecné účely verze 2, kde se můžou ukládat na horkou nebo studenou úroveň přístupu pro účely dlouhodobého uchovávání a budoucí analýzy.
Začínáme s premium
Nejprve zkontrolujte, jestli jsou vaše oblíbené funkce Blob Storage kompatibilní s účty úložiště objektů blob bloku Úrovně Premium a pak vytvořte účet.
Poznámka:
Existující účet úložiště pro obecné účely verze 2 úrovně Standard nemůžete převést na účet úložiště objektů blob bloku úrovně Premium. Pokud chcete migrovat na účet úložiště objektů blob bloku Úrovně Premium, musíte vytvořit účet úložiště objektů blob bloku úrovně Premium a migrovat data do nového účtu.
Kontrola kompatibility funkcí Blob Storage
Některé funkce Blob Storage se zatím nepodporují nebo mají částečnou podporu v účtech úložiště objektů blob bloku úrovně Premium. Než zvolíte premium, projděte si článek podpory funkcí služby Blob Storage v účtech Azure Storage a zjistěte, jestli jsou funkce, které chcete použít, plně podporované ve vašem účtu. Podpora funkcí se neustále rozšiřuje, proto nezapomeňte pravidelně kontrolovat aktualizace v tomto článku.
Vytvořit nový účet úložiště
Pokud chcete vytvořit účet úložiště objektů blob bloku Úrovně Premium, nezapomeňte při vytváření účtu zvolit možnost výkonu Premium a typ účtu objektu blob bloku.
Poznámka:
Některé funkce Blob Storage se zatím nepodporují nebo mají částečnou podporu v účtech úložiště objektů blob bloku úrovně Premium. Než zvolíte premium, projděte si článek podpory funkcí služby Blob Storage v účtech Azure Storage a zjistěte, jestli jsou funkce, které chcete použít, plně podporované ve vašem účtu. Podpora funkcí se neustále rozšiřuje, proto nezapomeňte pravidelně kontrolovat aktualizace v tomto článku.
Pokud se váš účet úložiště bude používat pro analýzy, důrazně doporučujeme používat Azure Data Lake Storage spolu s účtem úložiště objektů blob bloku úrovně Premium. Pokud chcete odemknout možnosti Služby Azure Data Lake Storage, povolte nastavení hierarchického oboru názvů na kartě Upřesnit na stránce Vytvořit účet úložiště.
Následující obrázek ukazuje toto nastavení na stránce Vytvořit účet úložiště.
Úplné pokyny najdete v tématu Vytvoření účtu úložiště.