Цены на поток данных 2-го поколения для фабрики данных в Microsoft Fabric
Dataflow поколение 2 позволяет использовать низкокодовый интерфейс с более чем 300 преобразованиями данных и на основе ИИ, облегчая преобразование данных и предоставляя большую гибкость, чем любое другое средство. Поток данных 2-го поколения создается с помощью знакомых возможностей Power Query, доступных сегодня в нескольких продуктах и службах Майкрософт, таких как Excel, Power BI, Power Platform, Dynamics 365 Insights и многое другое. После публикации потока данных создается определение потока данных . Это программа, которая запускается после обновления потока данных для создания таблиц в промежуточном хранилище и /или назначении выходных данных. Во время обновления определение потока данных используется подсистемой потоков данных для создания плана оркестрации, управления ресурсами и оркестрации выполнения запросов между источниками данных, шлюзами и вычислительными ядрами, а также для создания таблиц в промежуточном хранилище или назначении данных.
На схеме показаны различные компоненты архитектуры потока данных фабрики данных 2-го поколения, включая Lakehouse, используемые для приема данных, и артефакт хранилища, используемый в качестве подсистемы вычислений и означает для записи результатов в промежуточные или поддерживаемые назначения выходных данных быстрее. Если не удается использовать вычислительные ресурсы хранилища или при отключении промежуточного хранения для запроса, подсистема Mashup будет извлекать, преобразовывать или загружать данные в промежуточные или назначения данных. Дополнительные сведения о работе потока данных 2-го поколения см. в этой записи блога: Центр внимания фабрики данных: Поток данных 2-го поколения.
При обновлении или публикации элемента потока данных 2-го поколения единицы емкости Fabric используются для следующих подсистем.
- Стандартные вычисления: плата взимается на основе времени оценки запросов во всех запросах потока данных, запущенных через подсистему Mashup.
- Вычисление потоков данных с высоким масштабированием. Плата взимается при включении промежуточного хранения на основе времени потребления ядра SQL Lakehouse (промежуточного хранилища) и хранилища (вычислительных ресурсов хранилища).
Модель ценообразования потока данных 2-го поколения
В следующей таблице показано, что для определения затрат на выполнение потока данных 2-го поколения каждое выполнение запроса использует подсистему mashup для стандартных вычислений, а длительность выполнения вычислений преобразуется в скорость потребления 16 ЦС в час. Во-вторых, для сценариев высокомасштабируемых вычислений при включении промежуточного выполнения подсистемы Lakehouse или Warehouse следует учитывать также. Длительность выполнения вычислений преобразуется в скорость потребления 6 единиц ЦС в час. В конце каждого запуска потока данных 2-го поколения потребление единицы емкости для каждого типа двигателя суммируется и выставляется в соответствии с преобразованной ценой емкости Fabric в регионе, где она развернута.
Тип ядра потока данных 2-го поколения | Счетчики потребления | Скорость потребления cu Fabric | Степень детализации отчетов о потреблении |
---|---|---|---|
Среда выполнения приложений уровня "Стандартный" | На основе каждой продолжительности выполнения запросов в подсистеме mashup в секундах. | 16 единиц ЦС в час | Элемент потока данных 2-го поколения |
Высокомасштабируемые вычислительные ресурсы потоков данных | На основе выполнения ядра SQL Lakehouse или Warehouse (с включенной промежуточной длительностью) в секундах. | 6 единиц ЦС в час | На рабочую область |
Перемещение данных | На основе длительности выполнения быстрого копирования в часах и используемых интеллектуальных ресурсов пропускной способности оптимизации. | 1,5 ЦС в час | Элемент потока данных 2-го поколения |
цены виртуальная сеть шлюза данных с помощью потока данных 2-го поколения
Шлюз данных виртуальная сеть (виртуальная сеть) оплачивается как плата за аддитивную инфраструктуру, связанную с емкостью Fabric. Это означает, что он имеет собственный счетчик и несет счет, согласованный между и дополнительными для всех запусков элементов Fabric.
Общий счет за выполнение потоков данных 2-го поколения через шлюз данных виртуальной сети вычисляется как: потоки данных 2-го поколения + плата за шлюз данных виртуальной сети.
Плата за шлюз данных виртуальной сети пропорциональна использованию шлюза данных виртуальной сети, где использование определяется как время простоя или в любой момент, когда шлюз данных виртуальной сети включен.
Скорость потребления cu шлюза данных виртуальной сети: (4 cu-hour) * (емкость Fabric за единицу)
Дополнительные сведения см. в виртуальная сеть ценах и выставлении счетов шлюзов данных.
Изменение скорости потребления рабочей нагрузки Microsoft Fabric
Ставки потребления в любое время изменяются. Корпорация Майкрософт использует разумные усилия для предоставления уведомлений по электронной почте и в продукте. Изменения применяются к дате, указанной в заметках о выпуске и блоге Microsoft Fabric. Если любое изменение скорости потребления рабочей нагрузки Microsoft Fabric существенно увеличивает единицу емкости (CU), необходимую для использования определенной рабочей нагрузки, клиенты могут использовать варианты отмены, доступные для выбранного метода оплаты.
Вычисление предполагаемых затрат с помощью приложения метрик Fabric
Приложение метрик емкости Microsoft Fabric обеспечивает видимость использования емкости для всех рабочих областей Fabric, привязанных к емкости. Он используется администраторами емкости для мониторинга производительности рабочих нагрузок и их использования по сравнению с приобретенной емкостью. Использование приложения метрик является наиболее точным способом оценки затрат на запуски обновления потока данных 2-го поколения. При нагрузочном тестировании сценария создайте элемент Dataflow 2-го поколения в новой рабочей области, чтобы уменьшить количество зарегистрированных шумов в приложении метрик Fabric.
Следующая таблица может использоваться в качестве шаблона для вычисления предполагаемых затрат с помощью приложения метрик Fabric для обновления потока данных 2-го поколения:
Метрика | Среда выполнения приложений уровня "Стандартный" | Высокомасштабируемые вычисления |
---|---|---|
Общее количество единиц CUS | секунды cu | ч секунды cu |
Счета за действующие часы cu-часов | s / (60*60) = S CU-час | h / (60*60) = H CU-hour |
Общая стоимость обновления = (S+ H CU-час) * (емкость Fabric за единицу)