Junio de 2024
Estas características y mejoras en la plataforma de Azure Databricks se publicaron en junio de 2024.
Nota:
Las versiones se publican por fases. Es posible que su cuenta de Azure Databricks no se actualice hasta una semana o más después de la fecha de lanzamiento inicial.
Cuadernos: resaltado de sintaxis desordenada
16 de junio de 2024
El resaltado de errores de sintaxis de Python en los cuadernos ahora advierte a los usuarios cuando se usan variables antes de declararlas y sugiere una corrección.
El Asistente para cuadernos diagnostica automáticamente los errores
16 de junio de 2024
El Asistente de Databricks ahora diagnostica automáticamente errores de código en cuadernos. Este usa IA generativa para analizar el código y el mensaje de error para sugerir una corrección directamente en el cuaderno. Para obtener más información, consulte Uso del Asistente de Databricks
Mejoras en el Explorador de catálogos
28 de junio de 2024
Se han realizado las siguientes mejoras en el Explorador de catálogos:
Se ha agregado una sección Acceso rápido que muestra los objetos recientes de Unity Catalog, los objetos favoritos de Unity Catalog, los catálogos y los esquemas para la exploración.
Se ha quitado la barra superior y la estructura acordeón, y se han movido los puntos de entrada para lo siguiente a un menú con el icono de engranaje en la barra lateral con el explorador de esquemas para una navegación más sencilla:
- Selección del proceso
- Delta Sharing
- Credenciales de almacenamiento
- Ubicaciones externas
- Conexiones
- Examinar DBFS
También puede acceder a Delta Sharing y Datos externos en la parte superior del Explorador de catálogos encima de la sección Acceso rápido.
Servicio de varios modelos externos desde un único punto de conexión de servicio de modelos
27 de junio de 2024
Mosaic AI Model Serving ahora admite el servicio de varios modelos externos por punto de conexión de servicio de modelos. Consulte Servicio de varios modelos externos a un punto de conexión.
Databricks Assistant ahora en disponibilidad general
27 de junio de 2024
Databricks Assistant ahora se ha publicado con disponibilidad general. Entre las funcionalidades del asistente se incluyen:
- Generar, depurar, optimizar y explicar el código.
- Crear visualizaciones a partir de los datos. Consulte Creación de visualizaciones con el Asistente de Databricks.
- Depuración de trabajos (característica en vista previa).
- Codificar y editar consultas SQL.
- Encontrará información pertinente en la base de conocimiento y la documentación de Azure Databricks.
Para obtener más información, vea ¿Qué es Databricks Assistant?
Databricks Assistant ahora proporciona títulos a subprocesos
27 de junio de 2024
Para navegar más fácilmente por los subprocesos de ayuda, Databricks Assistant proporciona títulos a los subprocesos en función del contexto de la indicación.
Consulte Uso de Databricks Assistant.
Administrador de entornos de cuadernos sin servidor
27 de junio de 2024
Puede instalar ahora dependencias de Python para cuadernos sin servidor mediante el panel lateral Entorno, que proporciona un único lugar para editar, ver y exportar los requisitos de biblioteca de un cuaderno. Consulte Instalación de dependencias de cuaderno.
Consola de depuración de cuadernos
27 de junio de 2024
Con la consola de depuración de cuadernos, ahora puede inspeccionar los valores de las variables dinámicas y ejecutar fragmentos de código durante una sesión de depuración de cuadernos.
Incorporación rápida de una programación periódica a un flujo de trabajo de Azure Databricks
28 de junio de 2024
Ahora puede agregar una programación sencilla a un flujo de trabajo de Azure Databricks especificando tan solo un intervalo y una unidad de tiempo (por ejemplo, ejecutar el flujo de trabajo cada 4 horas). Este nuevo tipo de programación complementa el tipo de programación avanzada existente, ya que le permite agregar una programación con tan solo unos pocos clics. Consulte Ejecución de trabajos según una programación.
Databricks Runtime 15.3 está disponible de forma general
24 de junio de 2024
Databricks Runtime 15.3 y Databricks Runtime 15.3 ML ahora están disponibles con carácter general.
Consulte Databricks Runtime 15.3 y Databricks Runtime 15.3 para Machine Learning.
Las zonas geográficas de Azure son GA
24 de junio de 2024
Las zonas geográficas de Azure ya están disponibles con carácter general. Las zonas geográficas de Azure administran la residencia de datos al procesar el contenido del cliente para algunas funcionalidades de inteligencia artificial.
Para obtener más información, consulte Servicios designados de Databricks.
Nueva interfaz de usuario de creación de catálogos mejorada
18 de junio de 2024
La nueva interfaz de usuario de creación de catálogos le lleva paso a paso por todo el proceso de creación y configuración de un catálogo; proporciona mensajes útiles y separa las configuraciones opcionales. Puede usar la misma interfaz de usuario para crear catálogos estándar, compartidos y externos.
Consulte Creación de catálogos.
Actualizaciones de subredes en configuraciones de conectividad de red
18 de junio de 2024
Databricks está actualizando las subredes en configuraciones de conectividad de red (NCC) en todas las regiones. Los nuevos identificadores de subred se agregan automáticamente a las reglas de firewall de Azure Storage existentes que permiten el acceso desde los identificadores de subred existentes para garantizar el acceso ininterrumpido desde Azure Databricks.
Si usa la API de configuraciones de conectividad de red para obtener los identificadores de subred y agregarlos a las reglas de red de almacenamiento para las nuevas cuentas de Azure Storage, no experimentará interrupciones. Sin embargo, si codifica de forma rígida el conjunto existente de identificadores de subred, es posible que se produzcan interrupciones. Databricks recomienda usar la API para obtener la información más reciente. Consulte la API de configuraciones de conectividad de red.
Es posible que experimente tiempo de inactividad para la API de configuraciones de conectividad de red mientras esta actualización tiene lugar entre las 20:00 y las 12:00 PDT el 20 de junio de 2024.
Las tablas del sistema de facturación están habilitadas de forma predeterminada
18 de junio de 2024
El esquema system.billing
ahora está habilitado de forma predeterminada en todas las áreas de trabajo del Unity Catalog. Consulte Referencia de tabla del sistema de utilización facturable.
Lakehouse Monitoring tiene disponibilidad general
13 de junio de 2024
La supervisión de Databricks Lakehouse ahora está disponible con carácter general.
El uso compartido de volúmenes con Delta Sharing ahora está disponible con carácter general
13 de junio de 2024
La compatibilidad con Delta Sharing para compartir datos no tabulares como un volumen ahora tiene disponibilidad general. Ahora, puede compartir volúmenes entre áreas de trabajo de Databricks en diferentes metastores de Unity Catalog (incluidas las áreas de trabajo de otras cuentas de Databricks y otras nubes).
Los volúmenes son objetos de Unity Catalog que representan un volumen lógico de almacenamiento en una ubicación de almacenamiento de objetos en la nube. Están pensados principalmente para proporcionar gobernanza sobre los recursos de datos no tabulares. Delta Sharing en Databricks proporciona una integración nativa con Unity Catalog que le permite administrar, gobernar, auditar y realizar un seguimiento del uso de los datos de los volúmenes compartidos.
Consulte Adición de volúmenes a un recurso compartido.
Las claves administradas por el cliente (CMK) para el vector de búsqueda de Databricks ahora están disponibles con disponibilidad general
12 de junio de 2024
Las claves administradas por el cliente (CMK) en los puntos de conexión de vector de búsqueda ahora están disponibles con carácter general.
Mosaic AI Agent Framework (versión preliminar pública)
12 de junio de 2024
Mosaic AI Agent Framework es un conjunto de herramientas en Databricks diseñadas para ayudar a los desarrolladores a crear, implementar y evaluar aplicaciones de generación aumentada de recuperación de calidad de producción (RAG). Agent Framework le permite crear o optimizar aplicaciones LLM en una sola plataforma mediante sus propios datos.
Agent Framework incluye las siguientes funcionalidades:
- Cree y registre agentes y cadenas.
- Parametrizar agentes y cadenas para experimentar e iterar rápidamente.
- Métricas integradas para comparar ejecuciones en la recuperación de documentos relevantes, precisión de respuesta y costo y latencia.
- Jueces LLM personalizados para la precisión de la recuperación y la respuesta.
- Implemente aplicaciones de inteligencia artificial con registro automatizado de solicitudes y respuestas.
- Aplicación de revisión integrada para obtener comentarios de los usuarios.
- Evaluación del agente para evaluar la calidad, la latencia y el costo de las aplicaciones de IA generativas.
- Seguimiento de MLflow para analizar y comparar seguimientos entre la ejecución de código.
Para obtener más información, consulte RAG (Generación aumentada de recuperación) en Azure Databricks.
La optimización predictiva ahora está disponible para disponibilidad general
11 de junio de 2024
La optimización predictiva para las tablas administradas de Unity Catalog ahora está disponible con carácter general. La optimización predictiva ahora se ejecuta OPTIMIZE
en tablas con clústeres líquidos habilitados para aplicar la agrupación en clústeres. Consulte Optimización predictiva para tablas administradas de Unity Catalog.
Optimización de rutas está disponible para atender puntos de conexión
11 de junio de 2024
Ahora puede crear puntos de conexión de servicio optimizados para el servicio de modelos o los flujos de trabajo de servicio de características. Consulte Configuración de la optimización de rutas en puntos de conexión de servicio.
Compatibilidad con el servicio de modelos con un firewall de la cuenta de almacenamiento del área de trabajo
11 de junio de 2024
El servicio de modelos ahora es compatible con la compatibilidad del firewall con la cuenta de almacenamiento del área de trabajo. Consulte Habilitación de la compatibilidad con el firewall para la cuenta de almacenamiento del área de trabajo.
La asignación de columnas ahora está disponible para disponibilidad general
10 de junio de 2024
La asignación de columnas de Delta Lake ahora está disponible con carácter general. Ahora puede usar DROP FEATURE
para deshabilitar la asignación de columnas y el protocolo de tabla de degradación. Consulte Cambio de nombre y eliminación de columnas con la asignación de columnas de Delta Lake.
Las tablas del sistema de flujo de trabajo ya están disponibles (versión preliminar pública)
10 de junio de 2024
El esquema system.lakeflow
contiene cuatro tablas nuevas que puede usar para supervisar los trabajos de la cuenta. Vea Referencia de la tabla del sistema de trabajos.
Si no tiene acceso a estas tablas del sistema, asegúrese de que ha habilitado el esquema de system.lakeflow
en la cuenta. Vea Habilitación de esquemas de tabla del sistema.
La llamada a funciones es versión preliminar pública
10 de junio de 2024
La llamada a funciones ahora está disponible en versión preliminar pública. Esta funcionalidad está disponible mediante los modelos de pago por token de las API de Foundation Model: DBRX Instruct y Meta-Llama-3-70B-Instruct. Vea Llamada a funciones en Azure Databricks.
Consulta de un índice de vector de búsqueda mediante vector_search()
10 de junio de 2024
Las funciones de IA ahora admiten vector_search()
, que permite consultar un índice de vector de búsqueda de IA de mosaico mediante SQL. Consulte Función vector_search.
Mosaic AI Vector Search ahora admite la búsqueda híbrida
7 de junio de 2024
Mosaic AI Vector Search ahora admite la búsqueda de similitud de palabras clave híbrida, que combina la búsqueda de inserción basada en vectores con técnicas tradicionales de búsqueda basadas en palabras clave. Este enfoque coincide con las palabras exactas de la consulta, mientras que también usa una búsqueda de similitud basada en vectores para capturar las relaciones semánticas y el contexto de la consulta. Al integrar estas dos técnicas, la búsqueda de similitud de palabras clave híbrida recupera documentos que contienen no solo las palabras clave exactas, sino también las que son conceptualmente similares, lo que proporciona resultados de búsqueda más completos y relevantes. Para obtener más información, vea Vector de búsqueda de Mosaic AI.
GTE ahora se admite en Model Serving
7 de junio de 2024
Mosaic AI Model Serving ahora admite Inserción de texto general (GTE), un modelo de inserción de texto que puede asignar texto a un vector de inserción. GTE se admite como parte de las API de Foundation Model y está disponible en las regiones de punto de conexión de servicio de pago por token. Consulte Uso de las API de modelo de Foundation.
Databricks Assistant: Experiencia de subprocesos y consultas habilitada de forma predeterminada
6 de junio de 2024
Databricks Assistant (versión preliminar pública) realiza un seguimiento de los subprocesos de consulta y el historial a lo largo de los contextos del editor en la experiencia de sesión de forma predeterminada. Puede administrar la habilitación en todas las áreas de trabajo de una cuenta o áreas de trabajo individuales.
Para obtener más información, vea ¿Qué es Databricks Assistant?
Editor de Markdown de bloc de notas mejorado
5 de junio de 2024
Ahora puede ver una vista previa activa de las celdas de Markdown en cuadernos y acceder a una barra de herramientas para elementos comunes de Markdown, como encabezados, listas y vínculos. Dedique más tiempo a comunicar sus ideas y menos tiempo recordar la sintaxis.
Acceso rápido a las tablas de Catalog Explorer desde cuadernos
5 de junio de 2024
Ahora puede acceder fácilmente a las tablas de Catalog Explorer directamente desde cuadernos. Mantenga el puntero sobre un nombre de tabla en una celda del cuaderno para obtener un vínculo a su página del explorador de catálogos para ver detalles como columnas, permisos y mucho más.
Controlador ODBC de Databricks 2.8.2
4 de junio de 2024
Databricks ODBC Driver (descargar) versión 2.8.2 ya está disponible. Esta versión agrega las siguientes características y mejoras nuevas:
- Los clientes ahora pueden usar comandos extendidos de SQL
PUT
,GET
, yREMOVE
para ingerir y administrar grandes conjuntos de datos en volúmenes de Unity Catalog. - Los valores de configuración predeterminados de OAuth ahora se actualizan y son compatibles. Las opciones de configuración actualizadas incluyen el punto de conexión de autorización, el identificador de cliente de OAuth, el ámbito de usuario a máquina de OAuth y el ámbito de máquina a máquina de OAuth. Para obtener más información, vea las notas de la versión.
- Se han actualizado las bibliotecas de terceros, incluido el extranjero 2.6.2 (anteriormente 2.6.0) y libCURL 8.7.1 (anteriormente 8.6.0).
- El controlador ahora acepta una entidad de certificación (CA) firmada privada si se agrega al almacén de certificados de CA raíz de confianza de Windows.
Esta versión también corrige los siguientes problemas:
- El cliente devolvió previamente un error si la longitud de un comentario de tabla superó
MaxCommentLen
. El comportamiento predeterminado ahora trunca el comentario de la tabla para ajustarse al límite especificado enMaxCommentLen
. - El cliente devolvió previamente un error al emitir
SQLCancel
en determinadas circunstancias.
La nueva interfaz de usuario de Databricks Notebook ya está disponible con carácter general
4 de junio de 2024
La nueva interfaz de usuario de Databricks Notebooks proporciona a los desarrolladores una experiencia de creación optimizada y centrada en los datos. Entre las características principales se incluyen:
- Experiencia de usuario moderna: Disfrute de una experiencia de codificación simplificada con una interfaz de usuario actualizada y otras características para mejorar la organización de Notebook.
- Nueva tabla de resultados: Realice la exploración de datos sin código con funcionalidades de búsqueda y filtrado directamente en las salidas de resultados.