Marzo de 2023
Estas características y las mejoras de la plataforma de Azure Databricks se publicaron en marzo de 2023.
Nota:
Las versiones se publican por fases. Es posible que su cuenta de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.14.0
31 de marzo de 2023
La versión 1.14.0 agrega un ejemplo para rotar automáticamente un token de acceso, una run_if condición y un desencadenador de llegada de archivos al databricks_job recurso, etc. Para más información, consulte el registro de cambios de la versión 1.14.0.
Finaliza la compatibilidad con Databricks Runtime 7.3 LTS ML
31 de marzo de 2023
La compatibilidad con Databricks Runtime 7.3 LTS para Machine Learning finalizó el 31 de marzo. Consulte Ciclo de vida del soporte técnico de Databricks.
Entrenamiento distribuido con TorchDistributor
27 de marzo de 2023
Con Databricks Runtime 13.0 ML y versiones posteriores, puede realizar el entrenamiento distribuido en modelos de PyTorch ML mediante TorchDistributor. Consulte Entrenamiento distribuido con TorchDistributor.
TorchDistributor es un módulo de código abierto en PySpark que ayuda a los usuarios a hacer el entrenamiento distribuido con PyTorch en sus clústeres de Spark, por lo que permite iniciar trabajos de entrenamiento de PyTorch como trabajos de Spark.
Databricks Runtime 13.0 (versión beta)
24 de marzo de 2023
Databricks Runtime 13.0 y Databricks Runtime 13.0 ML ahora están disponibles como versiones Beta.
Consulte Databricks Runtime 13.0 (EoS) y Databricks Runtime 13.0 para Machine Learning (EoS).
Editor de archivos mejorado
24 de marzo de 2023
El editor de archivos se ha actualizado para llevar muchas de las características del cuaderno a la experiencia de edición de archivos. Además, ahora puede ejecutar directamente archivos python, SQL, R y Scala desde el editor de archivos. Para más detalles, consulteUso del cuaderno y el editor de archivos de Databricks.
Cambio de la redundancia del almacenamiento raíz de DBFS para áreas de trabajo de Azure Databricks existentes
23 de marzo de 2023
Los usuarios ahora tienen la opción de cambiar la redundancia de su cuenta de almacenamiento raíz de DBFS. Consulte Cambio de las opciones de redundancia de almacenamiento del área de trabajo.
Compatibilidad con cuadernos .ipynb (Jupyter) en Repos (versión preliminar)
22 de marzo de 2023
La compatibilidad con cuadernos de Jupyter Notebook (archivos .ipynb) está disponible en Repos. Puede clonar repositorios con cuadernos .ipynb, trabajar en la interfaz de usuario de Databricks y, a continuación, confirmar e insertar como cuadernos .ipynb. Se conservan metadatos, como un panel del cuaderno. Los administradores pueden controlar si las salidas se pueden confirmar o no.
También puede:
- Cree nuevos cuadernos .ipynb.
- Convierta cuadernos en formato de archivo .ipynb.
- Ver diferencias como Diferencias de código (cambios de código en celdas) o Diferencias sin procesar (cambios de código en JSON, incluyendo metadatos).
Consulte Permitir confirmar la salida del cuaderno .ipynb.
Compatibilidad con reload4j
21 de marzo de 2023
Reload4j 1.2.19 reemplaza log4j en Databricks Runtime versiones 10.4 y anteriores.
Nuevas direcciones IP para la región Este de Asia
15 de marzo de 2023
Azure Databricks ha agregado un nuevo plano de control dedicado para la eastasia región. Si hospeda un área de trabajo de Azure Databricks en su propia red virtual (también conocida como inyección de red virtual) en la región Este de Asia, es probable que administre el tráfico de red del área de trabajo mediante rutas personalizadas (UDR). Si es así, debe actualizar esas rutas mediante las direcciones IP y dominios adicionales enumerados en direcciones IP y dominios para los recursos y servicios de Azure Databricks.
Ejecución de celdas SQL en el cuaderno en paralelo
15 de marzo de 2023
Ahora puede ejecutar celdas SQL en cuadernos de Azure Databricks en paralelo mientras está conectado a un clúster interactivo. ConsulteEjecución de celdas SQL en paralelo.
Creación de tareas de trabajo mediante código de Python almacenado en un repositorio de Git
14 de marzo de 2023
Ahora puede recuperar código de Python de un proveedor de Git al agregar una tarea de Python a un trabajo de Azure Databricks, lo que simplifica la integración de los trabajos con los flujos de trabajo de CI/CD. Consulte Uso de Git con trabajos.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.13.0
14 de marzo de 2023
La versión 1.13.0 agrega un databricks_sql_alert recurso, y más. Para más información, consulte el registro de cambios de la versión 1.13.0.
El proveedor de Terraform de Databricks se ha actualizado a la versión 1.12.0
9 de marzo de 2023
La versión 1.12.0 agrega un databricks_model_serving recurso, deja de usar el schedule bloque dentro del databricks_sql_query recurso y más. Para más información, consulte el registro de cambios de la versión 1.12.0.
Consola de administración de SQL y consola de administración del área de trabajo combinada
9 de marzo de 2023
La consola de administración de SQL se ha combinado con la configuración de administración general para crear una experiencia unificada para los usuarios administradores. Ahora se accede a todas las configuraciones de administrador de SQL desde la consola de administración.
El servicio de modelos tiene disponibilidad general
7 de marzo de 2023
Model Serving, anteriormente Serverless Real-Time Inferencia, ahora está disponible con carácter general.
Model Serving proporciona un servicio de alta disponibilidad y baja latencia para implementar modelos. El servicio se escala o reduce verticalmente automáticamente para satisfacer los cambios de demanda dentro del intervalo de simultaneidad elegido. Consulte Servicio de modelos con Azure Databricks.
La búsqueda automática de características está disponible con disponibilidad general
7 de marzo de 2023
La búsqueda automática de características con Model Serving ya está disponible con carácter general. Para obtener más información, consulte Búsqueda automática de características con Databricks Model Serving.
Para las nuevas áreas de trabajo que usan UDR, la dirección IP de almacenamiento de Azure necesita una UDR adicional
6 de marzo de 2023
Debido a cambios en el almacenamiento raíz de DBFS para nuevas áreas de trabajo, las nuevas áreas de trabajo que usan la inserción de red virtual y definen rutas definidas por el usuario (UDR) mediante direcciones IP en lugar de las etiquetas de servicio recomendadas deben agregar una UDR de Azure adicional para cada red virtual. Para configurar las dos UDR, consulte Dirección IP de almacenamiento raíz de DBFS. Este cambio no afecta a las áreas de trabajo existentes.
El almacenamiento raíz de DBFS de Azure Databricks usa Azure Data Lake Storage Gen2 para nuevas áreas de trabajo
6 de marzo de 2023
Las nuevas áreas de trabajo de Azure Databricks usarán cuentas de almacenamiento de Azure Data Lake Storage Gen2 para la raíz de DBFS. Las áreas de trabajo de Azure Databricks existentes siguen usando Blob Storage para la raíz de DBFS. Consulte Introducción a Azure Data Lake Storage Gen2.
Nueva disponibilidad de Catalog Explorer
6 de marzo de 2023
Ahora hay disponible una nueva versión de Catalog Explorer en todas las áreas de trabajo que usan una versión compatible de Databricks Runtime 7.3 o posterior.
Visualización de consultas frecuentes y usuarios de una tabla mediante la pestaña Conclusiones
6 de marzo de 2023
Ahora puede usar la pestaña Insights de Catalog Explorer para ver las consultas y usuarios más frecuentes de cualquier tabla registrada en Unity Catalog. Debe tener el SELECT privilegio en una tabla para ver estos datos y solo verá las consultas que tiene permiso para ver. Consulte Vista de consultas frecuentes y usuarios de una tabla.
La búsqueda de coincidencias exactas está disponible en búsqueda global
3 de marzo de 2023
Ahora puede buscar frases exactas con comillas en búsqueda global. Consulte Búsqueda de objetos del área de trabajo.
Visualización de la información de linaje de los trabajos de Azure Databricks
3 de marzo de 2023
Si el catálogo de Unity está habilitado en el área de trabajo, puede ver la información de linaje de los trabajos en la interfaz de usuario de trabajos de Azure Databricks, incluidas las tablas ascendentes en las que el trabajo lee y las tablas descendentes en las que escribe el trabajo. ConsulteVisualización de la información de linaje de un trabajo.
Databricks Runtime 12.2 LTS y Databricks Runtime 12.2 LTS ML tienen disponibilidad general
2 de marzo de 2023
Databricks Runtime 12.2 LTS y Databricks Runtime 12.2 LTS ML ahora están disponibles con carácter general.
Consulte Databricks Runtime 12.2 LTS y Databricks Runtime 12.2 LTS para Machine Learning.
Los archivos del área de trabajo ahora están en versión preliminar pública
6 de marzo de 2023
Ahora puede trabajar con archivos que no son de cuadernos en Azure Databricks. Los archivos de áreas de trabajo están habilitados de forma predeterminada en todas las áreas de trabajo. Consulte ¿Qué son los archivos del área de trabajo?