Поделиться через

Январь 2020 г.

  • Статья

Эти функции и доработки платформы Azure Databricks были выпущены в январе 2020 г.

Примечание.

Выпуски являются поэтапными. На обновление вашей учетной записи Azure Databricks может потребоваться до одной недели с даты выпуска.

В этом месяце были выпущены версии 3.9 и 3.11 платформы Azure Databricks. Версии 3.10 и 3.8 не выпускались. Версия 3.7 содержала только исправления ошибок.

Ожидается в ближайшее время: теги рабочей области, пула и кластера распространяются на сведения об использовании DBU и виртуальные машины Azure для улучшения отчетов по управлению затратами

10 февраля мы проведем распространение тегов в сведения об использовании Azure Databricks и виртуальные машины Azure. Эта новая функция объединяет теги рабочих областей Azure Databricks (т. е. теги групп ресурсов), теги пулов и теги кластеров и распространяет их в сведениях об использовании DBU Databricks и виртуальных машин Azure в виде тегов ресурсов. Вы сможете просматривать обобщенные сведения о тегах на Портале управления затратами Azure и в результатах экспорта сведений об использовании. Так вы сможете получить более полное представление об использовании (полной стоимости владения) Azure Databricks с точным его распределением по подразделениям и командам.

Azure Databricks и Azure Lighthouse можно использовать в одной подписке

29 января 2020 г.

Все существующие рабочие области Azure Databricks перенесены с использования управляемых блокировок на Отказ назначения. Все вновь созданные рабочие области будут иметь запрет назначения. Это не изменит существующее поведение, а уровень безопасности остается прежним. Вы можете подключить подписки, использующие Azure Databricks, но в настоящее время пользователи в управляющем арендаторе не смогут запускать рабочие области Azure Databricks в делегированной подписке.

Общедоступная версия Databricks Runtime 6.3 for Genomics

22 января 2020 г.

В основе Databricks Runtime 6.3 для Genomics лежит Databricks Runtime 6.3. Здесь реализовано множество улучшений и обновлений из Databricks Runtime 6.2 для Genomics.

Основные функции:

  • Поддержка таблиц Delta в качестве входных данных для совместного конвейера генотипирования
  • Автоматическое синтаксический анализ заметок при чтении VCF
  • Улучшенный мультиаллелик-вариантный разделитель
  • Быстрые функции линейной и логистической регрессии

Общедоступная версия Databricks Runtime 6.3 ML

22 января 2020 г.

Общедоступная версия Databricks Runtime 6.3 ML реализует сразу несколько обновлений библиотек, включая следующие:

  • PyTorch: с версии 1.3.0 до версии 1.3.1
  • torchvision: с версии 0.4.1 до версии 0.4.2
  • MLflow: c версии 1.4.0 до версии 1.5.0
  • Hyperopt: с версии 0.2.1 до версии 0.2.2

Дополнительные сведения см. в полных заметках о выпуске Databricks Runtime 6.3 для ML (EoS ).

Общедоступная версия Databricks Runtime 6.3

22 января 2020 г.

В общедоступной версии Databricks Runtime 6.3 реализованы новые функции, усовершенствования и исправления ошибок.

В этом выпуске реализована улучшенная степень параллелизма. Основные функции:

  • Улучшенная степень параллелизма для всех операций Delta Lake
  • Улучшенная поддержка сжатия файлов
  • Улучшена производительность для операций слияния, выполняемых только с вставками.

Дополнительные сведения см. в полных заметках о выпуске Databricks Runtime 6.3 (EoS ).

Кэширование дисков включено по умолчанию

7-14 января 2020 г.: версия 3.9

Теперь кэширование дисков включается по умолчанию в экземплярах серии Lsv2 для всех поддерживаемых выпусков Databricks Runtime. Сведения о выборе типов экземпляров для использования кэширования дисков.

Шаг стандартного автомасштабирования кластера теперь можно настроить

7-14 января 2020 г.: версия 3.9

По умолчанию в первом шаге стандартного автоматического масштабирования добавляются 8 узлов. Теперь можно задать значение шага в конфигурации Spark кластера. См . справочник по конфигурации вычислений.

API SCIM поддерживает разбивку на страницы для получения пользователей и получения групп (общедоступная предварительная версия)

7-14 января 2020 г.: версия 3.9

API SCIM теперь поддерживает разбивку на страницы для получения пользователей и получения групп. При указании параметров запроса startIndex и count SCIM возвращает подмножество пользователей или групп. Параметр startIndex — это индекс первого результата с основанием 1. Параметр count — это максимальное число возвращаемых пользователей или групп. Он обеспечивает масштабируемость для клиента SCIM и упрощает вызовы SCIM для администраторов Azure Databricks. См . API групп.

Ширина дорожки обозревателя файлов увеличена до 240 пикселей

7-14 января 2020 г.: версия 3.9

Увеличенная ширина позволяет не наводить указатель мыши на объекты, чтобы увидеть полное имя файла.

Завершается поддержка Databricks Runtime 3.5 LTS

1 января 2020 г.

Поддержка Databricks Runtime 3.5 LTS (долгосрочная поддержка) прекращена 2 января. См. статью "Жизненные циклы поддержки Databricks".