Co je transformace dat?
PLATÍ PRO: Azure Data Factory Azure Synapse Analytics
Tip
Vyzkoušejte si službu Data Factory v Microsoft Fabric, řešení pro analýzy typu all-in-one pro podniky. Microsoft Fabric zahrnuje všechno od přesunu dat až po datové vědy, analýzy v reálném čase, business intelligence a vytváření sestav. Přečtěte si, jak začít používat novou zkušební verzi zdarma.
Transformace dat zahrnuje transformaci a přeformátování dat z původního zdroje, aby byla vhodnější a užitečnější pro různé podřízené aplikace.
Organizace musí mít možnost zkoumat důležitá obchodní data pro přípravu a transformaci dat, aby poskytovaly přesnou analýzu složitých dat, která se každý den stále rozšiřují. Příprava dat je nutná, aby organizace mohly data používat v různých obchodních procesech a zkrátit dobu potřebnou k hodnotě.
Data Factory umožňuje iterativním iterativním způsobem s využitím Power Query přípravu dat bez kódu v cloudovém měřítku. Data Factory se integruje s Power Query Online a zpřístupňuje funkce Power Query M jako aktivitu kanálu.
Data Factory překládá jazyk M vygenerovaný editorem Mashup Power Query Online do kódu Sparku pro spouštění cloudového škálování překladem M do azure Data Factory Tok dat s. Transformace dat pomocí Power Query a toků dat jsou zvlášť užitečné pro datové inženýry nebo pro integrátory dat občana.
Případy použití
Rychlé interaktivní zkoumání a příprava dat
Více datových inženýrů a integrátorů dat občanů může interaktivně zkoumat a připravovat datové sady v cloudovém měřítku. S nárůstem objemu, rozmanitosti a rychlosti dat v datových jezerech potřebují uživatelé efektivní způsob, jak prozkoumat a připravit datové sady. Možná budete například muset vytvořit datovou sadu, která od roku 2017 obsahuje všechny demografické informace o zákaznících pro nové zákazníky. Nemapujete na známý cíl. Zkoumáte, uspořádáte a připravujete datové sady, abyste splnili požadavek před jeho publikováním v jezeře. Transformace se často používá pro méně formální analytické scénáře. Předem připravené datové sady je možné použít k provádění transformací a operací strojového učení v podřízených operacích.
Agilní příprava dat bez kódu
Integrátoři dat občanů tráví více než 60 % času hledáním a přípravou dat. Chtějí to udělat bez kódu, aby zlepšili provozní produktivitu. Umožňuje integrátorům dat občanů rozšířit, tvarovat a publikovat data pomocí známých nástrojů, jako je Power Query Online, škálovatelným způsobem výrazně zvyšuje jejich produktivitu. Transformace ve službě Azure Data Factory umožňuje známému mashupovém editoru Power Query Online umožnit integrátorům dat rychle opravovat chyby, standardizovat data a vytvářet vysoce kvalitní data pro podporu obchodních rozhodnutí.
Ověření a zkoumání dat
Vizuálně skenujte data bez kódu, abyste odebrali všechny odlehlé hodnoty, anomálie a přizpůsobili je obrazci pro rychlou analýzu.
Podporované zdroje
Konektor | Formát dat | Authentication type |
---|---|---|
Azure Blob Storage | CSV, Parquet, Excel | Klíč účtu, instanční objekt, MSI |
Azure Data Lake Storage Gen1 | CSV, Parquet, Excel | Instanční objekt, MSI |
Azure Data Lake Storage Gen2 | CSV, Parquet, Excel | Klíč účtu, instanční objekt, MSI |
Azure SQL Database | - | Ověřování SQL, MSI, instanční objekt |
Azure Synapse Analytics | - | Ověřování SQL, MSI, instanční objekt |
Editor mashupu
Při vytváření aktivity Power Query se všechny zdrojové datové sady stanou dotazy na datové sady a umístí se do složky ADFResource . Ve výchozím nastavení UserQuery bude odkazovat na první dotaz datové sady. Všechny transformace by se měly provádět v UserQuery, protože změny dotazů na datovou sadu nejsou podporovány ani nebudou zachovány. Přejmenování, přidávání a odstraňování dotazů se v současné době nepodporuje.
V současné době nejsou podporované všechny funkce Power Query M pro transformaci dat, i když jsou během vytváření dostupné. Při vytváření aktivit Power Query se zobrazí výzva s následující chybovou zprávou, pokud funkce není podporovaná:
The Power Query Spark Runtime does not support the function
Další informace o podporovaných transformacích najdete v tématu Transformace dat Power Query.
Související obsah
Zjistěte, jak vytvořit mash-up Power Query pro transformaci dat.