Отправка файлов в том Catalog Unity
Пользовательский интерфейс «Отправка на том» позволяет загружать файлы в любом формате в том Catalog Unity, включая структурированные, полуструктурированные и неструктурированные данные. См. Что такое Unity Catalogvolumes?.
Отправленные файлы не могут превышать 5 гигабайт.
- В Databricks Runtime 13.3 LTS и более поздних версиях Databricks рекомендует использовать volumes для хранения библиотек
.whl
для вычислений с назначенными или общими режимами доступа. - В Databricks Runtime 13.3 LTS и более поздних версиях Databricks рекомендует использовать volumes для хранения сценариев JAR и инициализации для вычислений с назначенными или общими режимами доступа.
Вы можете создать Catalog Unity, управляемый table, из загруженного файла. См. создание table из данных в томе.
Вы также можете запускать различные рабочие нагрузки машинного обучения и обработки и анализа данных на файлы, отправленные в том. Кроме того, можно отправлять библиотеки, сертификаты и другие файлы конфигурации произвольных форматов, например WHL или .txt, которые необходимо использовать для настройки библиотек кластера, библиотек с областью записной книжки или зависимостей заданий.
Where вы можете получить доступ к пользовательскому интерфейсу для загрузки файлов на раздел?
Этот пользовательский интерфейс можно получить следующим образом:
- На боковой панели нажмите кнопку >
- В обозревателе Catalog щелкните Добавить>Отправить в том. Вы также можете отправлять файлы непосредственно в том или в каталог в томе при просмотре volumes в обозревателе Catalog.
- В записной книжке нажмите кнопку >"Отправить файлы в том".
Примечание.
Volumes поддерживаются только в Databricks Runtime 13.3 LTS и более поздних версиях. В Databricks Runtime 12.2 LTS и ниже операции с /Volumes
пути могут быть успешными, но может происходить запись данных на временные диски для хранения данных, подключенные к вычислительным кластерам, вместо постоянного сохранения данных в Unity Catalogvolumes, как это ожидалось.
Подготовка к работе
Перед загрузкой файлов на том Catalog Unity необходимо иметь следующее:
- Рабочая область с включенным Unity Catalog. Для получения дополнительной информации см. раздел Set о настройке и управлении Unity Catalog.
- Привилегия
WRITE VOLUME
тома, в который нужно отправить файлы. - Привилегия
USE SCHEMA
на родительском schema - Привилегия
USE CATALOG
на родителя catalog.
Дополнительные сведения см. в разделе Unity Catalog привилегий и защищаемых объектов.
Шаги по отправке файлов в том
Чтобы загрузить файлы на том Catalog Unity, сделайте следующие действия:
- Нажмите кнопку "Добавить>данные".
- Нажмите кнопку " Отправить файлы в том".
-
Select том или каталог внутри тома или вставьте путь тома.
- Если в целевой schemaнет тома, можно использовать диалоговое окно для создания нового тома.
- При необходимости можно создать новый каталог в целевом томе, указав полный путь к целевому каталогу.
- Нажмите кнопку обзора или перетащите файлы непосредственно в зону удаления.
Сведения о других способах отправки файлов в Unity Catalogсм. в статье Работа с файлами в CatalogvolumesUnity.