Konfigurace streamovaných zdrojů dat
Azure Databricks se může integrovat se službami zasílání zpráv datových proudů pro příjem dat téměř v reálném čase do datového jezera Databricks Lakehouse. Azure Databricks může také synchronizovat rozšířená a transformovaná data v lakehouse s jinými systémy streamování.
Strukturované streamování poskytuje nativní přístup streamování k formátům souborů podporovaným Apache Sparkem, ale Databricks doporučuje automatický zavaděč pro většinu operací strukturovaného streamování, které čtou data z cloudového úložiště objektů. Podívejte se, co je automatický zavaděč?
Ingestování streamovaných zpráv do Delta Lake umožňuje uchovávat zprávy po neomezenou dobu, což vám umožní přehrávat datové proudy bez obav o ztrátu dat z důvodu prahových hodnot uchovávání informací.
Další informace o konkrétních konfiguracích streamování z front zpráv najdete tady: