Delen via

Databricks Runtime 14.1

  • Artikel

De volgende releaseopmerkingen bevatten informatie over Databricks Runtime 14.1, mogelijk gemaakt door Apache Spark 3.5.0.

Databricks heeft deze versie uitgebracht in oktober 2023.

Tip

Als u releaseopmerkingen voor Databricks Runtime-versies wilt zien die end-of-support (EoS) hebben bereikt, raadpleegt u de releaseopmerkingen voor Databricks Runtime. De EoS Databricks Runtime-versies zijn buiten gebruik gesteld en worden mogelijk niet bijgewerkt.

Nieuwe functies en verbeteringen

array_insert() is 1 gebaseerd op negatieve indexen

De array_insert functie is 1 gebaseerd op zowel positieve als negatieve indexen. Het voegt nu nieuw element toe aan het einde van invoermatrices voor de index -1. Als u het vorige gedrag wilt herstellen, stelt u in op spark.sql.legacy.negativeIndexInArrayInsert true.

Delta v2-controlepunten standaard ingeschakeld met liquide clustering

Nieuw gemaakte Delta-tabellen met vloeibare clustering maken standaard gebruik van v2-controlepunten. Zie Compatibiliteit voor tabellen met vloeistofclustering.

Delta-tabelfunctie verwijderen in openbare preview

U kunt nu enkele tabelfuncties voor Delta-tabellen verwijderen. Huidige ondersteuning omvat verwijderen deletionVectors en v2Checkpoint. Zie Delta-tabelfuncties neerzetten.

Delta delen: ontvangers kunnen batchquery's uitvoeren op gedeelde tabellen met verwijderingsvectoren (openbare preview)

Ontvangers van Delta Sharing kunnen nu batchquery's uitvoeren op gedeelde tabellen die gebruikmaken van verwijderingsvectoren. Zie Tabellen met verwijderingsvectoren of kolomtoewijzing toevoegen aan een share, tabellen lezen met verwijderingsvectoren of kolomtoewijzing ingeschakeld, en Leestabellen met verwijderingsvectoren of kolomtoewijzing ingeschakeld.

Delta delen: ontvangers kunnen batchquery's uitvoeren op gedeelde tabellen met kolomtoewijzing (openbare preview)

Ontvangers van Delta Sharing kunnen nu batchquery's uitvoeren op gedeelde tabellen die gebruikmaken van kolomtoewijzing. Zie Tabellen met verwijderingsvectoren of kolomtoewijzing toevoegen aan een share, tabellen lezen met verwijderingsvectoren of kolomtoewijzing ingeschakeld, en Leestabellen met verwijderingsvectoren of kolomtoewijzing ingeschakeld.

Streamen vanuit Unity Catalog-weergaven in openbare preview

U kunt structured streaming nu gebruiken om streaming-leesbewerkingen uit te voeren van weergaven die zijn geregistreerd bij Unity Catalog. Azure Databricks biedt alleen ondersteuning voor het streamen van leesbewerkingen vanuit weergaven die zijn gedefinieerd voor Delta-tabellen. Zie Een Unity Catalog-weergave lezen als een stream.

Apache Pulsar-connector in openbare preview

U kunt nu Structured Streaming gebruiken om gegevens van Apache Pulsar te streamen in Azure Databricks. Zie Stream van Apache Pulsar.

Bijgewerkt Snowflake-stuurprogramma

Het JDBC-stuurprogramma snowflake gebruikt nu versie 3.13.33.

SQL-sessievariabelen

Deze release introduceert de mogelijkheid om tijdelijke variabelen te declareren in een sessie die kan worden ingesteld en waarnaar vervolgens vanuit query's kan worden verwezen. Zie variabelen.

Aanroepen van benoemde parameters voor SQL en Python UDF.

U kunt nu aanroepen van benoemde parameters gebruiken voor SQL en Python UDF.

Tabelargumenten voor functies ondersteunen partitioneren en ordenen.

U kunt nu en componenten gebruiken PARTITION BY om te bepalen hoe tabelargumenten worden doorgegeven aan een functie tijdens het aanroepen vanORDER BY functies.

Nieuwe en verbeterde ingebouwde SQL-functies

De volgende ingebouwde functies zijn toegevoegd:

  • from_xml: parseert een XML STRING in een STRUCT.
  • schema_of_xml: Hiermee wordt een schema afgeleid van een XMLSTRING.
  • session_user: retourneert de aangemelde gebruiker.
  • try_reflect: retourneert NULL in plaats van de uitzondering als een Java-methode mislukt.

De volgende ingebouwde functies zijn verbeterd:

  • modus: Ondersteuning voor een optionele parameter die een deterministisch resultaat afdwingt.
  • to_char: Nieuwe ondersteuning voor DATE, TIMESTAMPen BINARY.
  • to_varchar: Nieuwe ondersteuning voor DATE, TIMESTAMPen BINARY.

Verbeterde verwerking van gecorreleerde subquery's

De mogelijkheid om correlatie in subquery's te verwerken, is uitgebreid:

  • De limiet en volgorde verwerken door in gecorreleerde scalaire (laterale) subquery's.
  • Ondersteuningsvensterfuncties in gecorreleerde scalaire subquery's.
  • Ondersteuning voor gecorreleerde verwijzingen in joinpredicaten voor scalaire en laterale subquery's

Gedragswijziging

Strikte typecontrole in Photon Parquet-lezer

Foton mislukt bij het lezen van een decimale waarde uit een Parquet-kolom die geen decimaal type is. Photon mislukt ook bij het lezen van een bytematrix met vaste lengte van Parquet als tekenreeks.

Bibliotheekupgrades

  • Bijgewerkte Python-bibliotheken:
    • filelock van 3.12.2 tot 3.12.3
    • s3transfer van 0.6.1 tot 0.6.2
  • Bijgewerkte Java-bibliotheken:
    • com.uber.h3 van 3.7.0 tot 3.7.3
    • io.airlift.aircompressor van 0.24 tot 0,25
    • io.delta.delta-sharing-spark_2.12 van 0.7.1 tot 0.7.5
    • io.netty.netty-all van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-buffer van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-codec van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-codec-http van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-codec-http2 van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-codec-socks van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-common van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-handler van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-handler-proxy van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-resolver van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-transport van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-transport-classes-epoll van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-transport-classes-kqueue van 4.1.93.Final tot 4.1.96.Final
    • io.netty.netty-transport-native-epoll van 4.1.93.Final-linux-x86_64 naar 4.1.96.Final-linux-x86_64
    • io.netty.netty-transport-native-kqueue van 4.1.93.Final-osx-x86_64 tot 4.1.96.Final-osx-x86_64
    • io.netty.netty-transport-native-unix-common van 4.1.93.Final tot 4.1.96.Final
    • net.snowflake.snowflake-jdbc van 3.13.29 tot 3.13.33
    • org.apache.orc.orc-core van 1.9.0-shaded-protobuf tot 1.9.1-shaded-protobuf
    • org.apache.orc.orc-mapreduce van 1.9.0-shaded-protobuf naar 1.9.1-shaded-protobuf
    • org.apache.orc.orc-shims van 1.9.0 tot 1.9.1

Apache Spark

Databricks Runtime 14.1 bevat Apache Spark 3.5.0. Deze release bevat alle Spark-oplossingen en -verbeteringen die zijn opgenomen in Databricks Runtime 14.0 (EoS) en de volgende aanvullende bugfixes en verbeteringen in Spark:

  • [SPARK-45088] [DBRRM-557] '[SC-142785][PYTHON][CONNECT] Getitem werken met gedupliceerde kolom' herstellen
  • [SPARK-43453] [DBRRM-557]Herstel "[SC-143135][PS] Negeren van names MultiIndex wanneer axis=1 voor concat"
  • [SPARK-45225] [SC-143207][SQL] XML: ONDERSTEUNING voor XSD-bestands-URL
  • [SPARK-45156] [SC-142782][SQL] Teruglopen inputName op backticks in de NON_FOLDABLE_INPUT foutklasse
  • [SPARK-44910] [SC-143082][SQL] Encoders.bean biedt geen ondersteuning voor superklassen met algemene typeargumenten
  • [SPARK-43453] [SC-143135][PS] De names status van MultiIndex wanneer axis=1 negeren concat
  • [SPARK-44463] [SS][VERBINDING MAKEN] Foutafhandeling verbeteren voor Verbinding stomende Python-werkrol
  • [SPARK-44960] [SC-141023][UI] Unescape en bestaat uit een foutoverzicht op ui-pagina's
  • [SPARK-44788] [SC-142980][VERBINDING MAKEN][PYTHON][SQL] Voeg from_xml en schema_of_xml toe aan pyspark, spark connect en sql-functie
  • [SPARK-44614] [SC-138460][PYTHON][VERBINDING MAKEN][3.5] Ontbrekende pakketten toevoegen in setup.py
  • [SPARK-45151] [SC-142861][CORE][UI] Ondersteuning voor threaddump op taakniveau
  • [SPARK-45056] [SC-142779][PYTHON][SS][VERBINDING MAKEN] Beëindigingstests voor streamingQueryListener en foreachBatch
  • [SPARK-45084] [SC-142828][SS] StateOperatorProgress voor het gebruik van nauwkeurige effectieve willekeurige partitienummer
  • [SPARK-44872] [SC-142405][VERBINDING MAKEN] Server testen infra en ReattachableExecuteSuite
  • [SPARK-45197] [SC-142984][CORE] Toevoegen StandaloneRestServer aan stuurprogramma's maken JavaModuleOptions
  • [SPARK-44404] [SC-139601][SQL] Namen toewijzen aan de foutklasse LEGACY_ERROR_TEMP[1009.1010.1013.1015.1016.1278]
  • [SPARK-44647] [SC-142297][SQL] Ondersteuning voor SPJ waarbij joinsleutels kleiner zijn dan clustersleutels
  • [SPARK-45088] [SC-142785][PYTHON][VERBINDING MAKEN] Werken getitem met gedupliceerde kolommen
  • [SPARK-45128] [SC-142851][SQL] Ondersteuning CalendarIntervalType in pijl
  • [SPARK-45130] [SC-142976][VERBINDING MAKEN][ML][PYTHON] Vermijd spark connect ML-model om invoer pandas-dataframe te wijzigen
  • [SPARK-45034] [SC-142959][SQL] Ondersteuning voor deterministische modusfunctie
  • [SPARK-45173] [SC-142931][UI] Verwijder een aantal overbodige bronmappingbestanden in de gebruikersinterface
  • [SPARK-45162] [SC-142781][SQL] Ondersteuning voor kaarten en matrixparameters die zijn samengesteld via call_function
  • [SPARK-45143] [SC-142840][PYTHON][VERBINDING MAKEN] PySpark compatibel maken met PyArrow 13.0.0
  • [SPARK-45174] [SC-142837][CORE] Steunen spark.deploy.maxDrivers
  • [SPARK-45167] [SC-142956][VERBINDING MAKEN][PYTHON] Python-client moet worden aangeroepen release_all
  • [SPARK-36191] [SC-142777][SQL] Limiet en volgorde verwerken op in gecorreleerde scalaire (laterale) subquery's
  • [SPARK-45159] [SC-142829][PYTHON] Benoemde argumenten alleen verwerken wanneer dat nodig is
  • [SPARK-45133] [SC-142512][VERBINDING MAKEN] Spark Connect-query's voltooid maken wanneer de laatste resultaattaak is voltooid
  • [SPARK-44801] [SC-140802][SQL][UI] Vastleggen van het analyseren van mislukte query's in listener en gebruikersinterface
  • [SPARK-45139] [SC-142527][SQL] DatabricksDialect toevoegen om conversie van SQL-type af te handelen
  • [SPARK-45157] [SC-142546][SQL] if Herhaalde controles voorkomen [On|Off|HeapColumnVector
  • [SPARK-45077] [SC-142069][UI] Upgrade dagre-d3.js van 04.3 naar 0.6.4 herstellen
  • [SPARK-45145] [SC-142521][VOORBEELD] JavaSparkSQLCli-voorbeeld toevoegen
  • [SPARK-43295] [SC-142254][PS] Ondersteuning voor kolommen voor tekenreekstypen voor DataFrameGroupBy.sum"
  • [SPARK-44915] [SC-142383][CORE] Controleer de controlesom van opnieuw gekoppelde PVC's shuffle-gegevens voordat u herstelt
  • [SPARK-45147] [SC-142524][CORE] Gebruik verwijderen System.setSecurityManager
  • [SPARK-45104] [SC-142206][UI] Upgraden graphlib-dot.min.js naar 1.0.2
  • [SPARK-44238] [SC-141606][CORE][SQL] Een nieuwe readFrom methode introduceren met bytematrixinvoer voor BloomFilter
  • [SPARK-45060] [SC-141742][SQL] Een interne fout in to_char()de NULL indeling oplossen
  • [SPARK-43252] [SC-142381][SQL] Vervang de foutklasse _LEGACY_ERROR_TEMP_2016 door een interne fout
  • [SPARK-45069] [SC-142279][SQL] SQL-variabele moet altijd worden omgezet na externe verwijzing
  • [SPARK-44911] [SC-142388][SQL] Hive-tabel maken met een ongeldige kolom moet foutklasse retourneren
  • [SPARK-42754] [SC-125567][SQL][UI] Probleem met achterwaartse compatibiliteit in geneste SQL-uitvoering oplossen
  • [SPARK-45121] [SC-142375][VERBINDING MAKEN][PS] Ondersteuning Series.empty voor Spark Connect.
  • [SPARK-44805] [SC-142203][SQL] getBytes/getShorts/getInts/etc. moet werken in een kolomvector met een woordenlijst
  • [SPARK-45027] [SC-142248][PYTHON] Interne functies/variabelen verbergen voor pyspark.sql.functions automatisch aanvullen
  • [SPARK-45073] [SC-141791][PS][VERBINDING MAKEN] Vervangen LastNotNull door Last(ignoreNulls=True)
  • [SPARK-44901] [SC-141676][SQL] Handmatige backport: API toevoegen in python UDTF -analysemethode om partitionerings-/bestelexpressies te retourneren
  • [SPARK-45076] [SC-141795][PS] Overschakelen naar ingebouwde repeat functie
  • [SPARK-44162] [SC-141605][CORE] Ondersteuning voor G1GC in spark-metrische gegevens
  • [SPARK-45053] [SC-141733][PYTHON][SECUNDAIR] Logboekverbetering in python-versie komt niet overeen
  • [SPARK-44866] [SC-142221][SQL] Toevoegen SnowflakeDialect om het booleaanse type correct te verwerken
  • [SPARK-45064] [SC-141775][PYTHON][VERBINDING MAKEN] De ontbrekende scale parameter toevoegen in ceil/ceiling
  • [SPARK-45059] [SC-141757][VERBINDING MAKEN][PYTHON] Functies toevoegen try_reflect aan Scala en Python
  • [SPARK-43251] [SC-142280][SQL] Vervang de foutklasse _LEGACY_ERROR_TEMP_2015 door een interne fout
  • [SPARK-45052] [SC-141736][SQL][PYTHON][VERBINDING MAKEN] Naam van de uitvoerkolom van functiealiassen consistent maken met SQL
  • [SPARK-44239] [SC-141502][SQL] Vrij geheugen toegewezen door grote vectoren wanneer vectoren opnieuw worden ingesteld
  • [SPARK-43295] [SC-142254][PS] Ondersteuning voor kolommen van tekenreekstypen voor DataFrameGroupBy.sum
  • [SPARK-45080] [SC-142062][SS] Ondersteuning voor kolom in DSv2-streaminggegevensbronnen expliciet aanroepen
  • [SPARK-45036] [SC-141768][SQL] SPJ: Vereenvoudig de logica voor het verwerken van gedeeltelijk geclusterde distributie
  • [SPARK-45077] [SC-142069][UI] Upgrade dagre-d3.js van 0.4.3 naar 0.6.4
  • [SPARK-45091] [SC-142020][PYTHON][VERBINDING MAKEN][SQL] Functie floor/round/bround accepteert kolomtype scale
  • [SPARK-45090] [SC-142019][PYTHON][VERBINDING MAKEN] DataFrame.{cube, rollup} ondersteuning voor kolomdinals
  • [SPARK-44743] [SC-141625][SQL] Functie toevoegen try_reflect
  • [SPARK-45086] [SC-142052][UI] Hexadecimaal weergeven voor hashcode voor threadvergrendeling
  • [SPARK-44952] [SC-141644][SQL][PYTHON] Ondersteuning voor benoemde argumenten in geaggregeerde Pandas UDF's
  • [SPARK-44987] [SC-141552][SQL] Een naam toewijzen aan de foutklasse _LEGACY_ERROR_TEMP_1100
  • [SPARK-45032] [SC-141730][VERBINDING MAKEN] Compilatiewaarschuwingen met betrekking tot Top-level wildcard is not allowed and will error under -Xsource:3
  • [SPARK-45048] [SC-141629][VERBINDING MAKEN] Aanvullende tests toevoegen voor python-client en uitvoerbare uitvoering
  • [SPARK-45072] [SC-141807][VERBINDING MAKEN] Buitenste bereiken voor ammonite-klassen herstellen
  • [SPARK-45033] [SC-141759][SQL] Ondersteuning voor kaarten op geparameteriseerde sql()
  • [SPARK-45066] [SC-141772][SQL][PYTHON][VERBINDING MAKEN] repeat Functie kolomtype accepteren n
  • [SPARK-44860] [SC-141103][SQL] Functie SESSION_USER toevoegen
  • [SPARK-45074] [SC-141796][PYTHON][VERBINDING MAKEN] DataFrame.{sort, sortWithinPartitions} ondersteuning voor kolomdinals
  • [SPARK-45047] [SC-141774][PYTHON][VERBINDING MAKEN] DataFrame.groupBy ondersteuningsdinals
  • [SPARK-44863] [SC-140798][UI] Een knop toevoegen om threaddump te downloaden als een txt in de Spark-gebruikersinterface
  • [SPARK-45026] [SC-141604][VERBINDING MAKEN] spark.sql moet ondersteuning bieden voor gegevenstypen die niet compatibel zijn met pijl
  • [SPARK-449999] [SC-141145][CORE] Herstructureren ExternalSorter om controles shouldPartition bij het aanroepen te verminderen getPartition
  • [SPARK-42304] [SC-141501][SQL] Naam wijzigen _LEGACY_ERROR_TEMP_2189 in GET_TABLES_BY_TYPE_UNSUPPORTED_BY_HIVE_VERSION
  • [SPARK-43781] [SC-139450][SQL] IllegalStateException herstellen bij het groeperen van twee gegevenssets die zijn afgeleid van dezelfde bron
  • [SPARK-45018] [SC-141516][PYTHON][VERBINDING MAKEN] CalendarIntervalType toevoegen aan Python-client
  • [SPARK-45024] [SC-141513][PYTHON][VERBINDING MAKEN] Enkele configuraties uitfilteren bij het maken van een sessie
  • [SPARK-45017] [SC-141508][PYTHON] Toevoegen CalendarIntervalType aan PySpark
  • [SPARK-44720] [SC-139375][VERBINDING MAKEN] Gegevensset gebruiken encoder in plaats van AgnosticEncoder
  • [SPARK-44982] [SC-141027][VERBINDING MAKEN] Spark Connect-serverconfiguraties markeren als statisch
  • [SPARK-44839] [SC-140900][SS][VERBINDING MAKEN] Betere foutlogboekregistratie wanneer de gebruiker probeert spark-sessie te serialiseren
  • [SPARK-44865] [SC-140905][SS] De kolom Met StreamingRelationV2 ondersteunen metagegevens
  • [SPARK-45001] [SC-141141][PYTHON][VERBINDING MAKEN] DataFrame.foreachPartition implementeren
  • [SPARK-44497] [SC-141017][WEBUI] Taakpartitie-id weergeven in de taaktabel
  • [SPARK-45006] [SC-141143][UI] Gebruik dezelfde datumnotatie van andere UI-datumelementen voor de x-as van tijdlijnen
  • [SPARK-45000] [SC-141135][PYTHON][VERBINDING MAKEN] DataFrame.foreach implementeren
  • [SPARK-44967] [SC-141137][SQL][VERBINDING MAKEN] Eenheid moet eerst worden overwogen voordat u Booleaanse waarde gebruikt voor TreeNodeTag
  • [SPARK-44993] [SC-141088][CORE] Toevoegen door opnieuw te gebruiken ShuffleChecksumUtils.compareChecksumsShuffleChecksumTestHelp.compareChecksums
  • [SPARK-44807] [SC-140176][VERBINDING MAKEN] Dataset.metadataColumn toevoegen aan Scala-client
  • [SPARK-44965] [SC-141098][PYTHON] Interne functies/variabelen verbergen uit pyspark.sql.functions
  • [SPARK-44983] [SC-141030][SQL] Converteer binair naar tekenreeks to_char voor de indelingen: hex, , base64utf-8
  • [SPARK-44980] [DBRRM-462][SC-141024][PYTHON][VERBINDING MAKEN] Overgenomen namedtuples herstellen om te werken in createDataFrame
  • [SPARK-44985] [SC-141033][CORE] ToString gebruiken in plaats van stacktrace voor het opnieuw genereren van threadDump
  • [SPARK-44984] [SC-141028][PYTHON][VERBINDING MAKEN] Verwijderen _get_alias uit DataFrame
  • [SPARK-44975] [SC-141013][SQL] BinaryArithmetic useless onderdrukking verwijderen opgelost
  • [SPARK-44969] [SC-140957][SQL] Opnieuw ArrayInsert gebruiken in ArrayAppend
  • [SPARK-44549] [SC-140714][SQL] Ondersteuningsvensterfuncties in gecorreleerde scalaire subquery's
  • [SPARK-44938] [SC-140811][SQL] De standaardwaarde van spark.sql.maxSinglePartitionBytes 128 min wijzigen
  • [SPARK-44918] [SC-140816][SQL][PYTHON] Ondersteuning voor benoemde argumenten in scalaire Python/Pandas UDF's
  • [SPARK-44966] [SC-140907][CORE][VERBINDING MAKEN] De nooit gewijzigd wijzigen var in val
  • [SPARK-41471] [SC-140804][SQL] Spark shuffle verminderen wanneer slechts één zijde van een join KeyGroupedPartitioning is
  • [SPARK-44214] [SC-140528][CORE] Livelogboekgebruikersinterface van Spark-stuurprogramma ondersteunen
  • [SPARK-44861] [SC-140716][CONNECT] jsonignore SparkListenerConnectOperationStarted.planRequest
  • [SPARK-44776] [SC-140519][VERBINDING MAKEN] ProducedRowCount toevoegen aan SparkListenerConnectOperationFinished
  • [SPARK-42017] [SC-140765][PYTHON][VERBINDING MAKEN] df['col_name'] moet de kolomnaam valideren
  • [SPARK-40178] [SC-140433][SQL][COONECT] Ondersteuning voor samenvoegingshints met gemak voor PySpark en R
  • [SPARK-44840] [SC-140593][SQL] array_insert() 1 maken voor negatieve indexen
  • [SPARK-44939] [SC-140778][R] Ondersteuning voor Java 21 in SparkR SystemRequirements
  • [SPARK-44936] [SC-140770][CORE] Het logboek vereenvoudigen wanneer Spark HybridStore de geheugenlimiet bereikt
  • [SPARK-44908] [SC-140712][ML][VERBINDING MAKEN] Functionaliteit voor cross validator foldCol-param herstellen
  • [SPARK-44816] [SC-140717][VERBINDING MAKEN] Foutbericht verbeteren wanneer UDF-klasse niet wordt gevonden
  • [SPARK-44909] [SC-140710][ML] Sla het starten van de logboekstreamingserver van de torch over wanneer deze niet beschikbaar is
  • [SPARK-44920] [SC-140707][CORE] Gebruik await() in plaats van awaitUninterruptibly() in TransportClientFactory.createClient()
  • [SPARK-44905] [SC-140703][SQL] Stateful lastRegex veroorzaakt NullPointerException op deval voor regexp_replace
  • [SPARK-43987] [SC-139594][Willekeurige volgorde] Afzonderlijke finalizeShuffleMerge Processing to Dedicated Thread Pools
  • [SPARK-42768] [SC-140549][SQL] Standaard AQE inschakelen in cacheabonnement
  • [SPARK-44741] [SC-139447][CORE] Ondersteuning voor op regex gebaseerde MetricFilter in StatsdSink
  • [SPARK-44751] [SC-140532][SQL] Xml FileFormat Interface-implementatie
  • [SPARK-44868] [SC-140438][SQL] Datum/tijd converteren naar tekenreeks op to_char/to_varchar
  • [SPARK-44748] [SC-140504][SQL] Query uitvoeren voor de COMPONENT PARTITION BY in UDTF TABLE-argumenten
  • [SPARK-44873] [SC-140427] Ondersteuning voor wijzigingsweergave met geneste kolommen in Hive-client
  • [SPARK-44876] [SC-140431][PYTHON] Met pijl geoptimaliseerde Python-UDF in Spark Connect herstellen
  • [SPARK-44520] [SC-137845][SQL] Vervang de term UNSUPPORTED_DATA_SOURCE_FOR_DIRECT_QUERY door UNSUPPORTED_DATASOURCE_FOR_DIRECT_QUERY en openbaarmakingshoofdmap AE
  • [SPARK-42664] [SC-139769][VERBINDING MAKEN] Ondersteuningsfunctie bloomFilter voor DataFrameStatFunctions
  • [SPARK-43567] [SC-139227][PS] Ondersteuning use_na_sentinel voor factorize
  • [SPARK-44859] [SC-140254][SS] Onjuiste eigenschapsnaam in gestructureerd streaming-document corrigeren
  • [SPARK-44822] [SC-140182][PYTHON][SQL] Python UDFS standaard niet-deterministisch maken
  • [SPARK-44731] [SC-139524][PYTHON][VERBINDING MAKEN] TimestampNTZ werken met letterlijke gegevens in Python Spark Connect
  • [SPARK-44836] [SC-140180][PYTHON] Pijl herstructureren Python UDTF
  • [SPARK-44714] [SC-139238] Beperking van LCA-resolutie met betrekking tot query's met
  • [SPARK-44749] [SC-139664][SQL][PYTHON] Ondersteuning voor benoemde argumenten in Python UDTF
  • [SPARK-44737] [SC-139512][SQL][UI] Er mogen geen json-indelingsfouten worden weergegeven op de SQL-pagina voor niet-SparkThrowables op SQL Tab
  • [SPARK-44665] [SC-139307][PYTHON] Ondersteuning toevoegen voor pandas DataFrame assertDataFrameEqual
  • [SPARK-44736] [SC-139622][VERBINDING MAKEN] Dataset.explode toevoegen aan Spark Connect Scala-client
  • [SPARK-44732] [SC-139422][SQL] Ondersteuning voor ingebouwde XML-gegevensbronnen
  • [SPARK-44694] [SC-139213][PYTHON][VERBINDING MAKEN] Actieve sessies herstructureren en beschikbaar maken als API
  • [SPARK-44652] [SC-138881] Fout genereren wanneer slechts één df geen is
  • [SPARK-44562] [SC-138824][SQL] OptimizeOneRowRelationSubquery toevoegen in batch subquery
  • [SPARK-44717] [SC-139319][PYTHON][PS] Respecteer timestampNTZ bij het opnieuwamplen
  • [SPARK-42849] [SC-139365] [SQL] Sessievariabelen
  • [SPARK-44236] [SC-139239][SQL] WholeStageCodegen uitschakelen wanneer deze is ingesteld spark.sql.codegen.factoryMode op NO_CODEGEN
  • [SPARK-44695] [SC-139316][PYTHON] Foutbericht voor verbeteren voor DataFrame.toDF
  • [SPARK-44680] [SC-139234][SQL] De fout voor parameters in verbeteren DEFAULT
  • [SPARK-43402] [SC-138321][SQL] FileSourceScanExec biedt ondersteuning voor het omlaag pushen van gegevensfilters met scalaire subquery
  • [SPARK-44641] [SC-139216][SQL] Onjuist resultaat in bepaalde scenario's wanneer SPJ niet wordt geactiveerd
  • [SPARK-44689] [SC-139219][VERBINDING MAKEN] De afhandeling van uitzonderingen van functie SparkConnectPlanner#unpackScalarScalaUDF universeler maken
  • [SPARK-41636] [SC-139061][SQL] Zorg ervoor dat selectFilters predicaten in deterministische volgorde worden geretourneerd
  • [SPARK-44132] [SC-139197][SQL] Materialize Stream of join column names to avoid codegen failure
  • [SPARK-42330] [SC-138838][SQL] De naam RULE_ID_NOT_FOUND toewijzen aan de foutklasse _LEGACY_ERROR_TEMP_2175
  • [SPARK-44683] [SC-139214][SS] Het niveau van logboekregistratie wordt niet correct doorgegeven aan de provider van de rocksDB-statusopslag
  • [SPARK-44658] [SC-138868][CORE] ShuffleStatus.getMapStatus moet worden geretourneerd None in plaats van Some(null)
  • [SPARK-44603] [SC-138353] Pyspark.testing toevoegen aan setup.py
  • [SPARK-44252] [SC-137505][SS] Definieer een nieuwe foutklasse en kijk of de laadstatus van DFS mislukt
  • [SPARK-29497] [DBRRM-396][SC-138477][VERBINDING MAKEN] Er wordt een fout gegenereerd wanneer UDF niet kan worden gedeserialiseerd.
  • [SPARK-44624] [DBRRM-396][SC-138900][VERBINDING MAKEN] ExecutePlan opnieuw proberen in het geval de eerste aanvraag de server niet heeft bereikt
  • [SPARK-41400] [DBRRM-396][SC-138287][VERBINDING MAKEN] Afhankelijkheid van connect-clientkatalysator verwijderen
  • [SPARK-44059] [SC-138833][SQL] Betere foutberichten voor SQL benoemde argumnts toevoegen
  • [SPARK-44620] [SC-138831][SQL][PS][VERBINDING MAKEN] Behoud ResolvePivot de Plan_ID_TAG
  • [SPARK-43838] [SC-137413][SQL] Subquery in één tabel herstellen met een component kan niet worden geoptimaliseerd
  • [SPARK-44555] [SC-138820][SQL] CheckError() gebruiken om Uitzondering in opdrachtsuite te controleren en een aantal foutklassenamen toe te wijzen
  • [SPARK-44280] [SC-138821][SQL] ConvertJavaTimestampToTimestamp toevoegen in JDBCDialect-API
  • [SPARK-44602] [SC-138337][SQL][VERBINDING MAKEN][PS] Behoud WidenSetOperationTypes de Plan_ID_TAG
  • [SPARK-42941] [SC-138389][SS][VERBINDING MAKEN] Python StreamingQueryListener
  • [SPARK-43838] [SC-137413][SQL] Subquery herstellen op één ta...
  • [SPARK-44538] [SC-138178][VERBINDING MAKEN][SQL] Rij.jsonValue en vrienden opnieuw instellen
  • [SPARK-44421] [SC-138434][SPARK-44423][VERBINDING MAKEN] Uitvoering opnieuw koppelen in Spark Connect
  • [SPARK-43838] [SC-137413][SQL] Subquery in één tabel herstellen met een component kan niet worden geoptimaliseerd
  • [SPARK-44587] [SC-138315][SQL][VERBINDING MAKEN] Verhoging protobuf marshaller recursielimiet
  • [SPARK-44605] [SC-138338][CORE] Interne ShuffleWriteProcessor-API verfijnen
  • [SPARK-44394] [SC-138291][VERBINDING MAKEN][WEBUI] Een Spark UI-pagina toevoegen voor Spark Connect
  • [SPARK-44585] [SC-138286][MLLIB] Waarschuwingsvoorwaarde in MLLib RankingMetrics ndcgAk oplossen
  • [SPARK-44198] [SC-138137][CORE] Ondersteuning voor doorgifte van het logboekniveau aan de uitvoerders
  • [SPARK-44454] [SC-138071][SQL][HIVE] Ondersteuning voor HiveShim getTablesByType
  • [SPARK-44425] [SC-138135][VERBINDING MAKEN] Controleer of de door de gebruiker opgegeven sessionId een UUID is
  • [SPARK-43611] [SC-138051][SQL][PS][CONNCECT] Behoud ExtractWindowExpressions de PLAN_ID_TAG
  • [SPARK-44560] [SC-138117][PYTHON][VERBINDING MAKEN] Tests en documentatie voor Arrow Python UDF verbeteren
  • [SPARK-44482] [SC-138067][VERBINDING MAKEN] De verbindingsserver moet het bindingsadres opgeven
  • [SPARK-44528] [SC-138047][VERBINDING MAKEN] Het juiste gebruik van hasattr() voor Connect-dataframe ondersteunen
  • [SPARK-44525] [SC-138043][SQL] Foutbericht verbeteren wanneer de aanroepmethode niet wordt gevonden
  • [SPARK-44355] [SC-137878][SQL] WithCTE verplaatsen naar opdrachtquery's

Ondersteuning voor Databricks ODBC-/JDBC-stuurprogramma's

Databricks ondersteunt ODBC-/JDBC-stuurprogramma's die in de afgelopen 2 jaar zijn uitgebracht. Download de onlangs uitgebrachte stuurprogramma's en upgrade (download ODBC, download JDBC).

Zie onderhoudsupdates voor Databricks Runtime 14.1.

Systeemomgeving

  • Besturingssysteem: Ubuntu 22.04.3 LTS
  • Java: Zulu 8.72.0.17-CA-linux64
  • Scala: 2.12.15
  • Python: 3.10.12
  • R: 4.3.1
  • Delta Lake: 3.0.0

Geïnstalleerde Python-bibliotheken

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
anyio 3.5.0 argon2-cffi 21.3.0 argon2-cffi-bindingen 21.2.0
asttokens 2.0.5 attrs 22.1.0 backcall 0.2.0
beautifulsoup4 4.11.1 zwart 22.6.0 bleken 4.1.0
oogklep 1.4 boto3 1.24.28 botocore 1.27.96
certifi 2022.12.7 cffiffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 klikken 8.0.4 comm 0.1.2
contourpy 1.0.5 cryptografie 39.0.1 wielrijder 0.11.0
Cython 0.29.32 databricks-sdk 0.1.6 dbus-python 1.2.18
foutopsporing 1.6.7 decorateur 5.1.1 defusedxml 0.7.1
distlib 0.3.7 docstring-to-markdown 0,11 invoerpunten 0,4
Uitvoeren 0.8.3 facets-overview 1.1.1 fastjsonschema 2.18.0
filelock 3.12.3 fonttools 4.25.0 GCC-runtimebibliotheek 1.10.0
googleapis-common-protos 1.60.0 grpcio 1.48.2 grpcio-status 1.48.1
httplib2 0.20.2 idna 3.4 importlib-metadata 4.6.4
ipykernel 6.25.0 ipython 8.14.0 ipython-genutils 0.2.0
ipywidgets 7.7.2 jedi 0.18.1 Jeepney 0.7.1
Jinja2 3.1.2 jmespath 0.10.0 joblib 1.2.0
jsonschema 4.17.3 jupyter-client 7.3.4 jupyter-server 1.23.4
jupyter_core 5.2.0 jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0
sleutelhanger 23.5.0 kiwisolver 1.4.4 launchpadlib 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 lxml 4.9.1
MarkupSafe 2.1.1 matplotlib 3.7.0 matplotlib-inline 0.1.6
Mccabe 0.7.0 mistune 0.8.4 more-itertools 8.10.0
mypy-extensions 0.4.3 nbclassic 0.5.2 nbclient 0.5.13
nbconvert 6.5.4 nbformat 5.7.0 nest-asyncio 1.5.6
nodeenv 1.8.0 notebook 6.5.2 notebook_shim 0.2.2
numpy 1.23.5 oauthlib 3.2.0 verpakking 22,0
Pandas 1.5.3 pandocfilters 1.5.0 parso 0.8.3
pathspec 0.10.3 Patsy 0.5.3 pexpect 4.8.0
pickleshare 0.7.5 Kussen 9.4.0 pit 22.3.1
platformdirs 2.5.2 plotly 5.9.0 pluggy 1.0.0
prometheus-client 0.14.1 prompt-toolkit 3.0.36 protobuf 4.24.0
psutil 5.9.0 psycopg2 2.9.3 ptyprocess 0.7.0
pure-eval 0.2.2 pyarrow 8.0.0 pycparser 2.21
pydantic 1.10.6 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.32
pyparsing 3.0.9 pyright 1.1.294 pyrsistent 0.18.0
python-dateutil 2.8.2 python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1
pytoolconfig 1.2.5 pytz 2022.7 pyzmq 23.2.0
requests 2.28.1 touw 1.7.0 s3transfer 0.6.2
scikit-learn 1.1.1 seaborn 0.12.2 SecretStorage 3.3.1
Send2Trash 1.8.0 setuptools 65.6.3 Zes 1.16.0
sniffio 1.2.0 soepsieve 2.3.2.post1 ssh-import-id 5,11
stack-data 0.2.0 statsmodels 0.13.5 vasthoudendheid 8.1.0
terminado 0.17.1 threadpoolctl 2.2.0 tinycss2 1.2.1
tokenize-rt 4.2.1 tomli 2.0.1 tornado 6.1
traitlets 5.7.1 typing_extensions 4.4.0 ujson 5.4.0
upgrades zonder toezicht 0,1 urllib3 1.26.14 virtualenv 20.16.7
wadllib 1.3.6 wcwidth 0.2.5 webencodings 0.5.1
websocket-client 0.58.0 whatthepatch 1.0.2 wiel 0.38.4
widgetsnbextension 3.6.1 yapf 0.31.0 zipp 1.0.0
SciPy 1.10.1

Geïnstalleerde R-bibliotheken

R-bibliotheken worden geïnstalleerd vanuit de Posit Pakketbeheer CRAN-momentopname op 2023-02-10.

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
pijl 12.0.1 askpass 1.1 assertthat 0.2.1
backports 1.4.1 base 4.3.1 base64enc 0.1-3
bit 4.0.5 bit64 4.0.5 blob 1.2.4
opstarten 1.3-28 brouwsel 1.0-8 Brio 1.1.3
bezem 1.0.5 bslib 0.5.0 cachem 1.0.8
beller 3.7.3 caret 6.0-94 cellranger 1.1.0
Chron 2.3-61 class 7.3-22 cli 3.6.1
clipr 0.8.0 klok 0.7.0 cluster 2.1.4
codetools 0.2-19 colorspace 2.1-0 commonmark 1.9.0
compiler 4.3.1 configuratie 0.3.1 Strijd 1.2.0
cpp11 0.4.4 Crayon 1.5.2 aanmeldingsgegevens 1.3.2
curl 5.0.1 data.table 1.14.8 gegevenssets 4.3.1
DBI 1.1.3 dbplyr 2.3.3 Desc 1.4.2
devtools 2.4.5 diagram 1.6.5 diffobj 0.3.5
verteren 0.6.33 downlit 0.4.3 dplyr 1.1.2
dtplyr 1.3.1 e1071 1.7-13 beletselteken 0.3.2
evaluate 0.21 fansi 1.0.4 farver 2.1.1
fastmap 1.1.1 fontawesome 0.5.1 forcats 1.0.0
foreach 1.5.2 buitenlands 0.8-82 smeden 0.2.0
Fs 1.6.2 toekomst 1.33.0 future.apply 1.11.0
gorgelen 1.5.1 Generics 0.1.3 Gert 1.9.2
ggplot2 3.4.2 Gh 1.4.0 gitcreds 0.1.2
glmnet 4.1-7 globals 0.16.2 lijm 1.6.2
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
afbeeldingen 4.3.1 grDevices 4.3.1 rooster 4.3.1
gridExtra 2.3 gsubfn 0,7 gtable 0.3.3
hardhat 1.3.0 haven 2.5.3 highr 0.10
Hms 1.1.3 htmltools 0.5.5 htmlwidgets 1.6.2
httpuv 1.6.11 httr 1.4.6 httr2 0.2.3
ids 1.0.1 ini 0.3.1 ipred 0.9-14
isoband 0.2.7 Iterators 1.0.14 jquerylib 0.1.4
jsonlite 1.8.7 KernSmooth 2.23-21 breiwerk 1,43
Labeling 0.4.2 later 1.3.1 latwerk 0.21-8
lava 1.7.2.1 levenscyclus 1.0.3 listenv 0.9.0
lubridate 1.9.2 magrittr 2.0.3 Markdown 1,7
MASSA 7.3-60 Matrix 1.5-4.1 memoise 2.0.1
methoden 4.3.1 mgcv 1.8-42 Mime 0,12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modeller 0.1.11
munsell 0.5.0 nlme 3.1-162 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.0.6 parallel 4.3.1
parallel 1.36.0 pilaar 1.9.0 pkgbuild 1.4.2
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.2.1
plogr 0.2.0 plyr 1.8.8 loven 1.0.0
prettyunits 1.1.1 Proc 1.18.4 processx 3.8.2
prodlim 2023.03.31 profvis 0.3.8 Voortgang 1.2.2
progressr 0.13.0 Beloften 1.2.0.1 Proto 1.0.0
proxy 0.4-27 ps 1.7.5 purrr 1.0.1
r2d3 0.2.6 R6 2.5.1 ragg 1.2.5
randomForest 4.7-1.1 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.11 RcppEigen 0.3.3.9.3
leesbewerking 2.1.4 readxl 1.4.3 recepten 1.0.6
Rematch 1.0.1 opnieuw overeenkomen2 2.1.2 Afstandsbedieningen 2.4.2
reprex 2.0.2 hervorm2 1.4.4 rlang 1.1.1
rmarkdown 2.23 RODBC 1.3-20 roxygen2 7.2.3
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.3.1 rstudioapi 0.15.0 rversions 2.1.2
rvest 1.0.3 Sass 0.4.6 weegschaal 1.2.1
selectr 0.4-2 sessioninfo 1.2.2 vorm 1.4.6
glanzend 1.7.4.1 sourcetools 0.1.7-1 sparklyr 1.8.1
SparkR 3.5.0 ruimtelijk 7.3-15 Splines 4.3.1
sqldf 0.4-11 SQUAREM 2021.1 Stats 4.3.1
stats4 4.3.1 stringi 1.7.12 stringr 1.5.0
overleving 3.5-5 sys 3.4.2 systemfonts 1.0.4
tcltk 4.3.1 testthat 3.1.10 tekstvorm 0.3.6
tibble 3.2.1 tidyr 1.3.0 tidyselect 1.2.0
tidyverse 2.0.0 timechange 0.2.0 timeDate 4022.108
tinytex 0,45 tools 4.3.1 tzdb 0.4.0
urlchecker 1.0.1 usethis 2.2.2 utf8 1.2.3
utils 4.3.1 uuid 1.1-0 vctrs 0.6.3
viridisLite 0.4.2 Vroom 1.6.3 Waldo 0.5.1
snor 0.4.1 withr 2.5.0 xfun 0,39
xml2 1.3.5 xopen 1.0.0 xtable 1.8-4
yaml 2.3.7 ritssluiting 2.3.0

Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.12-clusterversie)

Groeps-id Artefact-id Versie
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.390
com.amazonaws aws-java-sdk-cloudformation 1.12.390
com.amazonaws aws-java-sdk-cloudfront 1.12.390
com.amazonaws aws-java-sdk-cloudhsm 1.12.390
com.amazonaws aws-java-sdk-cloudsearch 1.12.390
com.amazonaws aws-java-sdk-cloudtrail 1.12.390
com.amazonaws aws-java-sdk-cloudwatch 1.12.390
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.390
com.amazonaws aws-java-sdk-codedeploy 1.12.390
com.amazonaws aws-java-sdk-cognitoidentity 1.12.390
com.amazonaws aws-java-sdk-cognitosync 1.12.390
com.amazonaws aws-java-sdk-config 1.12.390
com.amazonaws aws-java-sdk-core 1.12.390
com.amazonaws aws-java-sdk-datapipeline 1.12.390
com.amazonaws aws-java-sdk-directconnect 1.12.390
com.amazonaws aws-java-sdk-directory 1.12.390
com.amazonaws aws-java-sdk-dynamodb 1.12.390
com.amazonaws aws-java-sdk-ec2 1.12.390
com.amazonaws aws-java-sdk-ecs 1.12.390
com.amazonaws aws-java-sdk-efs 1.12.390
com.amazonaws aws-java-sdk-elasticache 1.12.390
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.390
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.390
com.amazonaws aws-java-sdk-elastictranscoder 1.12.390
com.amazonaws aws-java-sdk-emr 1.12.390
com.amazonaws aws-java-sdk-glacier 1.12.390
com.amazonaws aws-java-sdk-glue 1.12.390
com.amazonaws aws-java-sdk-iam 1.12.390
com.amazonaws aws-java-sdk-importexport 1.12.390
com.amazonaws aws-java-sdk-kinesis 1.12.390
com.amazonaws aws-java-sdk-kms 1.12.390
com.amazonaws aws-java-sdk-lambda 1.12.390
com.amazonaws aws-java-sdk-logs 1.12.390
com.amazonaws aws-java-sdk-machinelearning 1.12.390
com.amazonaws aws-java-sdk-opsworks 1.12.390
com.amazonaws aws-java-sdk-rds 1.12.390
com.amazonaws aws-java-sdk-redshift 1.12.390
com.amazonaws aws-java-sdk-route53 1.12.390
com.amazonaws aws-java-sdk-s3 1.12.390
com.amazonaws aws-java-sdk-ses 1.12.390
com.amazonaws aws-java-sdk-simpledb 1.12.390
com.amazonaws aws-java-sdk-simpleworkflow 1.12.390
com.amazonaws aws-java-sdk-sns 1.12.390
com.amazonaws aws-java-sdk-sqs 1.12.390
com.amazonaws aws-java-sdk-ssm 1.12.390
com.amazonaws aws-java-sdk-storagegateway 1.12.390
com.amazonaws aws-java-sdk-sts 1.12.390
com.amazonaws aws-java-sdk-support 1.12.390
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.390
com.amazonaws jmespath-java 1.12.390
com.clearspring.analytics stroom 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.7.0
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-gearceerd 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml klasgenoot 1.3.4
com.fasterxml.jackson.core jackson-annotaties 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.15.1
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.cafeïne cafeïne 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guave 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configuratie 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.netje.netlib arpack 3.0.3
dev.netje.netlib Blas 3.0.3
dev.netje.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.25
io.delta delta-sharing-spark_2.12 0.7.5
io.dropwizard.metrics metrische aantekening 4.2.19
io.dropwizard.metrics metrische gegevenskern 4.2.19
io.dropwizard.metrics metrische gegevensgrafiet 4.2.19
io.dropwizard.metrics metrische statuscontroles 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metrics-servlets 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-sokken 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty netty-handler 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx verzamelaar 0.12.0
jakarta.annotatie jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation activering 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine pekelen 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-CSV 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.33
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr tekenreekstemplate 3.2.1
org.apache.ant ant 1.9.16
org.apache.ant ant-jsch 1.9.16
org.apache.ant ant-launcher 1.9.16
org.apache.arrow pijlnotatie 12.0.1
org.apache.arrow arrow-memory-core 12.0.1
org.apache.arrow arrow-memory-netty 12.0.1
org.apache.arrow pijlvector 12.0.1
org.apache.avro avro 1.11.2
org.apache.avro avro-ipc 1.11.2
org.apache.avro avro-mapred 1.11.2
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator curator-recepten 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy klimop 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.20.0
org.apache.logging.log4j log4j-api 2.20.0
org.apache.logging.log4j log4j-core 2.20.0
org.apache.logging.log4j log4j-slf4j2-impl 2.20.0
org.apache.mesos mesos 1.11.0-shaded-protobuf
org.apache.orc orc-core 1.9.1-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.1-shaded-protobuf
org.apache.orc orc-shims 1.9.1
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-gearceerd 4.23
org.apache.yetus aantekeningen voor doelgroepen 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-vervolg 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-common 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance opnieuw verpakt 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core jersey-common 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator sluimerstand-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Aantekeningen 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.9
org.mlflow mlflow-spark 2.2.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.0
org.roaringbitmap RoaringBitmap 0.9.45
org.roaringbitmap Shims 0.9.45
org.rocksdb rocksdbjni 8.3.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.9.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest scalatest-compatibel 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.threeten threeten-extra 1.7.1
org.tukaani xz 1,9
org.typelevel algebra_2.12 2.0.1
org.typelevel katten-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1