Delen via

Databricks Runtime 15.3

  • Artikel

De volgende releaseopmerkingen bevatten informatie over Databricks Runtime 15.3, mogelijk gemaakt door Apache Spark 3.5.0.

Databricks heeft deze versie uitgebracht in juni 2024.

Tip

Als u releaseopmerkingen voor Databricks Runtime-versies wilt zien die end-of-support (EoS) hebben bereikt, raadpleegt u de releaseopmerkingen voor Databricks Runtime. De EoS Databricks Runtime-versies zijn buiten gebruik gesteld en worden mogelijk niet bijgewerkt.

Nieuwe functies en verbeteringen

PySpark DataSources biedt nu ondersteuning voor het lezen en schrijven van stromen

PySpark DataSources, waarmee het lezen van aangepaste gegevensbronnen en het schrijven naar aangepaste gegevenssinks mogelijk is, biedt nu ondersteuning voor het lezen en schrijven van stromen. Zie aangepaste gegevensbronnen van PySpark.

Kolomtoewijzing uitschakelen met drop-functie

U kunt nu kolomtoewijzing DROP FEATURE uitschakelen voor Delta-tabellen en het tabelprotocol downgraden. Zie Kolomtoewijzing uitschakelen.

Syntaxis en functies van varianttype in openbare preview

Systeemeigen Apache Spark-ondersteuning voor het werken met semi-gestructureerde gegevens als VARIANT type is nu beschikbaar in Spark DataFrames en SQL. Zie Queryvariantgegevens.

Ondersteuning voor varianttypen voor Delta Lake in openbare preview

U kunt nu VARIANT semi-gestructureerde gegevens opslaan in tabellen die worden ondersteund door Delta Lake. Bekijk de variantondersteuning in Delta Lake.

Ondersteuning voor verschillende modi van schemaontwikkeling in weergaven

MET CREATE VIEW en ALTER VIEW kunt u nu een schemabindingsmodus instellen, zodat u kunt verbeteren hoe weergaven schemawijzigingen in onderliggende objecten verwerken. Met deze functie kunnen weergaven schemawijzigingen in de onderliggende objecten tolereren of aanpassen. Hiermee worden wijzigingen in het queryschema opgelost die het gevolg zijn van wijzigingen in objectdefinities.

Ondersteuning voor observe() methoden die zijn toegevoegd aan de Spark Connect Scala-client

De Spark Connect Scala-client ondersteunt nu de Dataset.observe() methoden. Met ondersteuning voor deze methoden kunt u metrische gegevens definiëren voor een Dataset object met behulp van de ds.observe("name", metrics...) of ds.observe(observationObject, metrics...) methoden.

Verbeterde latentie voor opnieuw opstarten van stromen voor automatisch laden

Deze release bevat een wijziging waarmee de latentie voor het opnieuw opstarten van de stroom voor Auto Loader wordt verbeterd. Deze verbetering wordt geïmplementeerd door het laden van de status door de RocksDB-statusopslag asynchroon te maken. Met deze wijziging ziet u een verbetering van de begintijden voor streams met grote statussen, bijvoorbeeld streams met een groot aantal al opgenomen bestanden.

Een DataFrame retourneren als een pyarrow.Table

Deze release bevat de DataFrame.toArrow() functie om het schrijven van een DataFrame rechtstreeks naar een Apache Arrow-object pyarrow.Table te ondersteunen. Zie Apache Arrow in PySpark voor meer informatie over het gebruik van Pijl in PySpark.

Prestatieverbetering voor sommige vensterfuncties

Deze release bevat een wijziging die de prestaties van sommige Spark-vensterfuncties verbetert, met name functies die geen component of parameter window_frame bevattenORDER BY. In deze gevallen kan het systeem de query herschrijven om deze uit te voeren met behulp van een statistische functie. Met deze wijziging kan de query sneller worden uitgevoerd door gedeeltelijke aggregatie te gebruiken en de overhead van actieve vensterfuncties te voorkomen. De Spark-configuratieparameter spark.databricks.optimizer.replaceWindowsWithAggregates.enabled bepaalt deze optimalisatie en is standaard ingesteld true op. Als u deze optimalisatie wilt uitschakelen, gaat u spark.databricks.optimizer.replaceWindowsWithAggregates.enabled naar false.

Ondersteuning voor de try_mod toegevoegde functie

In deze release wordt ondersteuning toegevoegd voor de functie PySpark try_mod() . Deze functie ondersteunt de met ANSI SQL compatibele berekening van het restgetal van het delen van twee numerieke waarden. Als het argument deler 0 is, retourneert de try_mod() functie null in plaats van een uitzondering te genereren. U kunt de try_mod() functie gebruiken in plaats van mod of %, waardoor een uitzondering wordt gegenereerd als het argument deler 0 is en ANSI SQL is ingeschakeld.

Ondersteuning voor een optionele bereikparameter in de list_secrets()

Met deze release kunt u de resultaten van de tabelfunctie list_secrets() beperken tot een specifiek bereik.

Bugfixes

WriteIntoDeltaCommand metrische gegevens in de Spark-gebruikersinterface worden nu correct weergegeven

Deze release bevat een oplossing voor de metrische gegevens die worden weergegeven op het tabblad SQL van de Spark-gebruikersinterface voor het Execute WriteIntoDeltaCommand knooppunt. Voorheen waren de metrische gegevens voor dit knooppunt allemaal nul.

De groupby() functie in de Pandas-API negeerde het as_index=False argument

Deze release bevat een oplossing voor een probleem met de groupby() functie in de Pandas-API in Spark. Voordat deze oplossing werd opgelost, bevatten een groupby() met het opnieuw labelen van samengevoegde kolommen en het as_index=False argument geen groepssleutels in het resulterende DataFrame.

Parseringsfout met meerdere vensterfuncties die verwijzen naar uitvoer van de andere functies

In deze release wordt een probleem opgelost dat zich kan voordoen wanneer een Spark-query meerdere opeenvolgende vensterfuncties heeft, waarbij de vensterfuncties verwijzen naar uitvoer van de andere vensterfuncties. In zeldzame gevallen kan het systeem een van de verwijzingen verwijderen, wat leidt tot fouten bij het evalueren van de query. Hiermee worden deze verwijzingen naar projecten opgelost om ervoor te zorgen dat query's worden geëvalueerd. Deze wijziging wordt beheerd door de Spark-configuratieparameter spark.databricks.optimizer.collapseWindows.projectReferences, die standaard is ingesteld op true . Als u deze wijziging wilt uitschakelen, stelt u in spark.databricks.optimizer.collapseWindows.projectReferences op false.

Bibliotheekupgrades

  • Bijgewerkte Python-bibliotheken:
    • filelock van 3.13.1 tot 3.13.4
  • Bijgewerkte R-bibliotheken:
  • Bijgewerkte Java-bibliotheken:
    • org.rocksdb.rocksdbjni van 8.3.2 tot 8.11.4

Apache Spark

Databricks Runtime 15.3 bevat Apache Spark 3.5.0. Deze release bevat alle Spark-oplossingen en -verbeteringen die zijn opgenomen in Databricks Runtime 15.2, evenals de volgende aanvullende bugfixes en verbeteringen in Spark:

  • [SPARK-48211] [DBRRM-1041][15.x][15.3] Revert "[SC-165552][SQL] DB2: Read SMALLINT as Sho...
  • [SPARK-47904] [DBRRM-1040][GEDRAG-33][SC-163409] SPARK-47904 herstellen: Hoofdlettergebruik behouden in Avro-schema bij gebruik van enableStableIdentifiersForUnionType
  • [SPARK-48288] [SC-166141] Brongegevenstype toevoegen voor connectorcast-expressie
  • [SPARK-48175] [SC-166341][SQL][PYTHON] Sorteringsgegevens opslaan in metagegevens en niet in type voor SER/DE
  • [SPARK-48172] [SC-166078][SQL] Problemen met ontsnapping in JDBCDialects oplossen
  • [SPARK-48186] [SC-165544][SQL] Ondersteuning voor AbstractMapType toevoegen
  • [SPARK-48031] [SC-166523] Verouderde weergaven grootvader voor SCHEMABINDING
  • [SPARK-48369] [SC-166566][SQL][PYTHON][VERBINDING MAKEN] Functie toevoegen timestamp_add
  • [SPARK-48330] [SC-166458][SS][PYTHON] Probleem met time-out van python-streaminggegevensbron opgelost voor een groot triggerinterval
  • [SPARK-48369] [SC-166494][SQL][PYTHON][CONNECT] Functie timestamp_addtoevoegen "
  • [SPARK-48336] [SC-166495][PS][VERBINDING MAKEN] Implementeren ps.sql in Spark Connect
  • [SPARK-48369] [SC-166494][SQL][PYTHON][VERBINDING MAKEN] Functie toevoegen timestamp_add
  • [SPARK-47354] [SC-165546][SQL] Ondersteuning voor sortering toevoegen voor variantexpressies
  • [SPARK-48161] [SC-165325][SQL] Herstelde pull-aanvraag herstellen - Ondersteuning voor sortering toevoegen voor JSON-expressies
  • [SPARK-48031] [SC-166391] Decompose viewSchemaMode-configuratie, SHOW CREATE TABLE-ondersteuning toevoegen
  • [SPARK-48268] [SC-166217][CORE] Een configuratie toevoegen voor SparkContext.setCheckpointDir
  • [SPARK-48312] [ES-1076198][SQL] Prestaties van Alias.removeNonInheritableMetadata verbeteren
  • [SPARK-48294] [SC-166205][SQL] Kleine letters in nestedTypeMissingElementTypeError verwerken
  • [SPARK-47254] [SC-158847][SQL] Namen toewijzen aan de foutklassen _LEGACY_ERROR_TEMP_325[1-9]
  • [SPARK-47255] [SC-158749][SQL] Namen toewijzen aan de foutklassen _LEGACY_ERROR_TEMP_323[6-7] en _LEGACY_ERROR_TEMP_324[7-9]
  • [SPARK-48310] [SC-166239][PYTHON][VERBINDING MAKEN] Eigenschappen in cache moeten kopieën retourneren
  • [SPARK-48308] [SC-166152][Core] Gegevensschema's samenvoegen zonder partitiekolommen in FileSourceStrategy
  • [SPARK-48301] [SC-166143][SQL] Naam wijzigen CREATE_FUNC_WITH_IF_NOT_EXISTS_AND_REPLACE in CREATE_ROUTINE_WITH_IF_NOT_EXISTS_AND_REPLACE
  • [SPARK-48287] [SC-166139][PS][VERBINDING MAKEN] De ingebouwde timestamp_diff methode toepassen
  • [SPARK-47607] [SC-166129] Documentatie toevoegen voor gestructureerd logboekregistratieframework
  • [SPARK-48297] [SC-166136][SQL] Een regressie TRANSFORM-component herstellen met char/varchar
  • [SPARK-47045] [SC-156808][SQL] Vervangen IllegalArgumentException door SparkIllegalArgumentException in sql/api
  • [SPARK-46991] [SC-156399][SQL] Vervangen IllegalArgumentException door SparkIllegalArgumentException in catalyst
  • [SPARK-48031] [SC-165805][SQL] Ontwikkeling van weergaveschema's ondersteunen
  • [SPARK-48276] [SC-166116][PYTHON][VERBINDING MAKEN] De ontbrekende __repr__ methode toevoegen voor SQLExpression
  • [SPARK-48278] [SC-166071][PYTHON][VERBINDING MAKEN] De tekenreeksweergave van Cast
  • [SPARK-48272] [SC-166069][SQL][PYTHON][VERBINDING MAKEN] Functie toevoegen timestamp_diff
  • [SPARK-47798] [SC-162492][SQL] Verrijk het foutbericht voor de leesfouten van decimale waarden
  • [SPARK-47158] [SC-158078][SQL] De juiste naam toewijzen en sqlState aan _LEGACY_ERROR_TEMP_(2134|2231)
  • [SPARK-48218] [SC-166082][CORE] TransportClientFactory.createClient kan NPE-oorzaak FetchFailedException veroorzaken
  • [SPARK-48277] [SC-166066] Foutbericht voor ErrorClassesJsonReader.getErrorMessage verbeteren
  • [SPARK-47545] [SC-165444][VERBINDING MAKEN] Ondersteuning voor gegevenssets observe voor de Scala-client
  • [SPARK-48954] [SC-171672][SQL] Functie toevoegen try_mod
  • [SPARK-43258] [SC-158151][SQL] Namen toewijzen aan fout _LEGACY_ERROR_TEMP_202[3,5]
  • [SPARK-48267] [SC-165903][SS] Regressie e2e-test met SPARK-47305
  • [SPARK-48263] [SC-165925] Functieondersteuning voor niet-UTF8_BINARY tekenreeksen sorteren
  • [SPARK-48260] [SC-165883][SQL] Coördinatie van uitvoerdoorvoering uitschakelen in één test van ParquetIOSuite
  • [SPARK-47834] [SC-165645][SQL][VERBINDING MAKEN] Afgeschafte functies markeren met @deprecated in SQLImplicits
  • [SPARK-48011] [SC-164061][Core] LogKey-naam opslaan als een waarde om te voorkomen dat nieuwe tekenreeksexemplaren worden gegenereerd
  • [SPARK-48074] [SC-164647][Core] De leesbaarheid van JSON-logboekregistraties verbeteren
  • [SPARK-44953] [SC-165866][CORE] Een waarschuwing registreren wanneer het bijhouden van willekeurige volgorde wordt ingeschakeld aan de zijkant een ander ondersteund DA-mechanisme
  • [SPARK-48266] [SC-165897][VERBINDING MAKEN] Pakketobject org.apache.spark.sql.connect.dsl verplaatsen om de map te testen
  • [SPARK-47847] [SC-165651][CORE] Afkeuren spark.network.remoteReadNioBufferConversion
  • [SPARK-48171] [SC-165178][CORE] Het gebruik van afgeschafte constructors van o.rocksdb.Logger
  • [SPARK-48235] [SC-165669][SQL] Geef join rechtstreeks door in plaats van alle argumenten ombroadcastBuildSide en getShuffleHashJoinBuildSide te krijgen
  • [SPARK-48224] [SC-165648][SQL] Toewijzingssleutels van varianttype niet weigeren
  • [SPARK-48248] [SC-165791][PYTHON] Geneste matrix opgelost om verouderde conf van inferArrayTypeFromFirstElement te respecteren
  • [SPARK-47409] [SC-165568][SQL] Ondersteuning toevoegen voor sortering voor het type StringTrim van functies/expressies (voor UTF8_BINARY & LCASE)
  • [SPARK-48143] [ES-1095638][SQL] Lichtgewicht uitzonderingen gebruiken voor controlestroom tussen UnivocityParser en FailureSafeParser
  • [SPARK-48146] [SC-165668][SQL] Statistische functie in onderliggende expressie-assertie corrigeren
  • [SPARK-48161] [SC-165325][SQL] Ondersteuning voor sortering voor JSON-expressies toevoegen
  • [SPARK-47963] [CORE] Het externe Spark-ecosysteem kan gebruikmaken van gestructureerde mechanismen voor logboekregistratie
  • [SPARK-48180] [SC-165632][SQL] Fout verbeteren wanneer UDTF-aanroep met TABLE-argument haakjes rond meerdere PARTITIE/ORDER BY exprs vergeet
  • [SPARK-48002] [SC-164132][PYTHON][SS] Test toevoegen voor waargenomen metrische gegevens in PySpark StreamingQueryListener
  • [SPARK-47421] [SC-165548][SQL] Ondersteuning voor sortering voor URL-expressies toevoegen
  • [SPARK-48161] [SC-165325][SQL] Ondersteuning voor sortering toevoegen voor JSON-expressies
  • [SPARK-47359] [SC-164328][SQL] De functie TRANSLATE ondersteunen om te werken met gesorteerde tekenreeksen
  • [SPARK-47365] [SC-165643][PYTHON] Methode Add toArrow() DataFrame to PySpark
  • [SPARK-48228] [SC-165649][PYTHON][VERBINDING MAKEN] De ontbrekende functievalidatie implementeren in ApplyInXXX
  • [SPARK-47986] [SC-165549][VERBINDING MAKEN][PYTHON] Kan geen nieuwe sessie maken wanneer de standaardsessie wordt gesloten door de server
  • [SPARK-47963] "[CORE] Het externe Spark-ecosysteem kan gebruikmaken van mechanismen voor gestructureerde logboekregistratie"
  • [SPARK-47963] [CORE] Het externe Spark-ecosysteem kan gebruikmaken van gestructureerde mechanismen voor logboekregistratie
  • [SPARK-48208] [SC-165547][SS] Sla het leveren van metrische gegevens over geheugengebruik van RocksDB over als gebonden geheugengebruik is ingeschakeld
  • [SPARK-47566] [SC-164314][SQL] Ondersteuning voor de functie SubstringIndex om te werken met gesorteerde tekenreeksen
  • [SPARK-47589] [SC-162127][SQL]Hive-Thriftserver: LogError migreren met variabelen naar gestructureerd framework voor logboekregistratie
  • [SPARK-48205] [SC-165501][PYTHON] De wijzigingsfunctie voor privé[sql] verwijderen voor Python-gegevensbronnen
  • [SPARK-48173] [SC-165181][SQL] CheckAnalysis zou het hele queryplan moeten zien
  • [SPARK-48197] [SC-165520][SQL] Voorkom assertiefout voor ongeldige lambda-functie
  • [SPARK-47318] [SC-162573][CORE] Voegt HKDF-ronde toe aan AuthEngine-sleutel derivation om de standaard KEX-procedures te volgen
  • [SPARK-48184] [SC-165335][PYTHON][VERBINDING MAKEN] Altijd de seed van Dataframe.sample aan clientzijde instellen
  • [SPARK-48128] [SC-165004][SQL] Voor BitwiseCount/bit_count-expressie corrigeert u de syntaxisfout van het codegen voor booleaanse invoer
  • [SPARK-48147] [SC-165144][SS][VERBINDING MAKEN] Listeners aan de clientzijde verwijderen wanneer de lokale Spark-sessie wordt verwijderd
  • [SPARK-48045] [SC-165299][PYTHON] Pandas API groupby met multi-agg-relabel negeert as_index=False
  • [SPARK-48191] [SC-165323][SQL] Ondersteuning voor UTF-32 voor tekenreekscodering en -decodering
  • [SPARK-45352] [SC-137627][SQL] Vouwbare vensterpartities elimineren
  • [SPARK-47297] [SC-165179][SQL] Ondersteuning voor sortering toevoegen voor indelingsexpressies
  • [SPARK-47267] [SC-165170][SQL] Ondersteuning voor sortering toevoegen voor hash-expressies
  • [SPARK-47965] [SC-163822][CORE] Vermijd orNull in TypedConfigBuilder en OptionalConfigEntry
  • [SPARK-48166] [SQL] Vermijd het gebruik van BadRecordException als gebruikersgerichte fout in VariantExpressionEvalUtils
  • [SPARK-48105] [SC-165132][SS] De racevoorwaarde tussen het lossen en momentopnamen van de statusopslag herstellen
  • [SPARK-47922] [SC-163997][SQL] De try_parse_json-expressie implementeren
  • [SPARK-47719] [SC-161909][SQL] Spark.sql.legacy.timeParse wijzigen...
  • [SPARK-48035] [SC-165136][SQL] Probleem opgelost try_add/try_multiply semantisch gelijk is aan optellen/vermenigvuldigen
  • [SPARK-48107] [SC-164878][PYTHON] Tests uitsluiten van Python-distributie
  • [SPARK-46894] [SC-164447][PYTHON] PySpark-foutvoorwaarden verplaatsen naar een zelfstandig JSON-bestand
  • [SPARK-47583] [SC-163825][CORE] SQL Core: LogError migreren met variabelen naar een gestructureerd framework voor logboekregistratie
  • [SPARK-48064] '[SC-164697][SQL] Update-foutberichten voor routinegerelateerde foutklassen' herstellen
  • [SPARK-48048] [SC-164846][VERBINDING MAKEN][SS] Ondersteuning voor listener aan clientzijde toegevoegd voor Scala
  • [SPARK-48064] [SC-164697][SQL] Foutberichten bijwerken voor routinefoutenklassen
  • [SPARK-48056] [SC-164715][VERBINDING MAKEN][PYTHON] Plan opnieuw uitvoeren als er een SESSION_NOT_FOUND fout optreedt en er geen gedeeltelijk antwoord is ontvangen
  • [SPARK-48124] [SC-165009][CORE] Gestructureerde logboekregistratie voor Connect-Repl standaard uitschakelen
  • [SPARK-47922] [SC-163997][SQL] De try_parse_json-expressie implementeren
  • [SPARK-48065] [SC-164817][SQL] SPJ: allowJoinKeysSubsetOfPartitionKeys is te strikt
  • [SPARK-48114] [SC-164956][CORE] Sjabloon regex vooraf compileren om onnodig werk te voorkomen
  • [SPARK-48067] [SC-164773][SQL] Standaardkolommen voor varianten herstellen
  • [SPARK-47922] [SC-163997][SQL] De try_parse_json-expressie implementeren
  • [SPARK-48075] [SC-164709] [SS] Typecontrole toevoegen voor PySpark avro-functies
  • [SPARK-47793] [SC-164324][SS][PYTHON] SimpleDataSourceStreamReader implementeren voor python-streaminggegevensbron
  • [SPARK-48081] [SC-164719] ClassCastException in NTile.checkInputDataTypes() corrigeren wanneer het argument niet kan worden gevouwen of van een onjuist type
  • [SPARK-48102] [SC-164853][SS] Duur bijhouden voor het verkrijgen van metrische bron-/sinkgegevens tijdens het rapporteren van de voortgang van streamingquery's
  • [SPARK-47671] [SC-164854][Core] Gestructureerde logboekregistratie inschakelen in log4j2.properties.template en docs bijwerken
  • [SPARK-47904] [SC-163409][SQL] Hoofdlettergebruik behouden in Avro-schema bij gebruik van enableStableIdentifiersForUnionType
  • [SPARK-48058] [SC-164695][SPARK-43727][PYTHON][VERBINDING MAKEN] UserDefinedFunction.returnType de DDL-tekenreeks parseren
  • [SPARK-46922] [SC-156102][CORE][SQL] Runtime-gebruikersfouten niet verpakken
  • [SPARK-48047] [SC-164576][SQL] Geheugendruk van lege TreeNode-tags verminderen
  • [SPARK-47934] [SC-164648] [CORE] Afsluitende slashes in HistoryServer URL-omleidingen controleren
  • [SPARK-47921] [SC-163826][VERBINDING MAKEN] Het maken van ExecuteJobTag in ExecuteHolder corrigeren
  • [SPARK-48014] [SC-164150][SQL] Wijzig de makeFromJava-fout in EvaluatePython in een gebruikersgerichte fout
  • [SPARK-47903] [SC-163424][PYTHON] Ondersteuning toevoegen voor resterende scalaire typen in de PySpark Variant-bibliotheek
  • [SPARK-48068] [SC-164579][PYTHON] mypy moet een parameter hebben --python-executable
  • [SPARK-47846] [SC-163074][SQL] Ondersteuning voor varianttype toevoegen in from_json expressie
  • [SPARK-48050] [SC-164322][SS] Logische planning registreren bij het starten van de query
  • [SPARK-47810] [SC-163076][SQL] Equivalente expressie vervangen door <=> in joinvoorwaarde
  • [SPARK-47741] [SC-164290] Stack overflow-verwerking toegevoegd in parser
  • [SPARK-48053] [SC-164309][PYTHON][VERBINDING MAKEN] SparkSession.createDataFrame moet waarschuwen voor niet-ondersteunde opties
  • [SPARK-47939] [SC-164171][SQL] Implementeer een nieuwe Analyzer-regel om ParameterizedQuery te verplaatsen binnen ExplainCommand en DescribeQueryCommand
  • [SPARK-48063] [SC-164432][CORE] Standaard inschakelen spark.stage.ignoreDecommissionFetchFailure
  • [SPARK-48016] [SC-164280][SQL] Een fout in try_divide functie oplossen bij decimalen
  • [SPARK-48033] [SC-164291][SQL] Expressies herstellen RuntimeReplaceable die worden gebruikt in standaardkolommen
  • [SPARK-48010] [SC-164051][SQL][ES-1109148] Vermijd herhaalde aanroepen naar conf.resolver in resolveExpression
  • [SPARK-48003] [SC-164323][SQL] Ondersteuning voor sortering toevoegen voor statistische hll-schets
  • [SPARK-47994] [SC-164175][SQL] Fout opgelost met CASE WHEN column filter push down in SQLServer
  • [SPARK-47984] [SC-163837][ML][SQL] Wijzigen MetricsAggregate/V2Aggregator#serialize/deserialize om aan te roepen SparkSerDeUtils#serialize/deserialize
  • [SPARK-48042] [SC-164202][SQL] Een tijdstempelnotatie gebruiken met tijdzone op klasseniveau in plaats van kopieën te maken op methodeniveau
  • [SPARK-47596] [SPARK-47600][SPARK-47604][SPARK-47804] Gestructureerde logboekmigraties
  • [SPARK-47594] [SPARK-47590][SPARK-47588][SPARK-47584] Gestructureerde logboekmigraties
  • [SPARK-47567] [SC-164172][SQL] De functie LOCATE ondersteunen om te werken met gesorteerde tekenreeksen
  • [SPARK-47764] [SC-163820][CORE][SQL] Shuffle-afhankelijkheden opschonen op basis van ShuffleCleanupMode
  • [SPARK-48039] [SC-164174][PYTHON][VERBINDING MAKEN] De foutklasse bijwerken voor group.apply
  • [SPARK-47414] [SC-163831][SQL] Ondersteuning voor sortering in kleine letters voor regexp-expressies
  • [SPARK-47418] [SC-163818][SQL] Voeg met de hand gemaakte implementaties toe voor unicode-compatibele kleine letters, startsWith en endsWith en optimaliseer UTF8_BINARY_LCASE
  • [SPARK-47580] [SC-163834][SQL] SQL-katalysator: elimineren van niet-benoemde variabelen in foutenlogboeken
  • [SPARK-47351] [SC-164008][SQL] Ondersteuning voor sortering toevoegen voor tekenreeksexpressies van StringToMap & Mask
  • [SPARK-47292] [SC-164151][SS] safeMapToJValue moet rekening houden met null-getypte waarden
  • [SPARK-47476] [SC-164014][SQL] Ondersteuning voor de functie REPLACE om te werken met gesorteerde tekenreeksen
  • [SPARK-47408] [SC-164104][SQL] MathExpressions corrigeren die stringType gebruiken
  • [SPARK-47350] [SC-164006][SQL] Ondersteuning voor sortering toevoegen voor splitpart-tekenreeksexpressie
  • [SPARK-47692] [SC-163819][SQL] Standaardtekenreekstype-betekenis in impliciete cast oplossen
  • [SPARK-47094] [SC-161957][SQL] SPJ: het aantal buckets dynamisch opnieuw verdelen wanneer ze niet gelijk zijn
  • [SPARK-48001] [SC-164000][CORE] Ongebruikt verwijderen private implicit def arrayToArrayWritable uit SparkContext
  • [SPARK-47986] [SC-163999][VERBINDING MAKEN][PYTHON] Kan geen nieuwe sessie maken wanneer de standaardsessie wordt gesloten door de server
  • [SPARK-48019] [SC-164121] Onjuist gedrag in ColumnVector/ColumnarArray oplossen met woordenlijst en null-waarden
  • [SPARK-47743] [SPARK-47592][SPARK-47589][SPARK-47581][SPARK-47586][SPARK-47593][SPARK-47595][SPARK-47587][SPARK-47603] Gestructureerde logboekmigraties
  • [SPARK-479999] [SC-163998][SS] Logboekregistratie bij het maken van momentopnamen verbeteren en vermeldingen toevoegen/verwijderen uit de statuscachetoewijzing in de provider van de statusopslag met HDFS-back-up
  • [SPARK-47417] [SC-162872][SQL] Ondersteuning voor sortering: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Zinnen
  • [SPARK-47712] [SC-161871][VERBINDING MAKEN] Invoegtoepassingen voor verbinding toestaan om gegevenssets te maken en te verwerken
  • [SPARK-47411] [SC-163351][SQL] Ondersteuning voor stringInstr & FindInSet-functies om te werken met gesorteerde tekenreeksen
  • [SPARK-47360] [SC-163014][SQL] Ondersteuning voor sortering: Overlay, FormatString, Length, BitLength, OctetLength, SoundEx, Luhncheck
  • [SPARK-47413] [SC-163323][SQL] - ondersteuning toevoegen aan subtekenreeks/links/rechts voor sorteringen
  • [SPARK-47983] [SC-163835][SQL] Demote spark.sql.pyspark.legacy.inferArrayTypeFromFirstElement.enabled to internal
  • [SPARK-47964] [SC-163816][PYTHON][VERBINDING MAKEN] SQLContext en HiveContext verbergen in pyspark-connect
  • [SPARK-47985] [SC-163841][PYTHON] Functies vereenvoudigen met lit
  • [SPARK-47633] [SC-163453][SQL] De uitvoer van het plan aan de rechterkant opnemen voor LateralJoin#allAttributes consistentere canonicalisatie
  • [SPARK-47909] '[PYTHON][CONNECT] Bovenliggende DataFrame-klasse f...
  • [SPARK-47767] [SC-163096][SQL] Verschuivingswaarde weergeven in TakeOrderedAndProjectExec
  • [SPARK-47822] [SC-162968][SQL] Hash-expressies verbieden om het variantgegevenstype te hashen
  • [SPARK-47490] [SC-160494][SS] Fix RocksDB Logger constructor use to vermijd afschaffing waarschuwing
  • [SPARK-47417] Revert "[SC-162872][SQL] Collation support: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Sentences"
  • [SPARK-47352] [SC-163460][SQL] Boven-, Onder-, InitCap-sorteringsbewustzijn oplossen
  • [SPARK-47909] [PYTHON][VERBINDING MAKEN] Bovenliggende DataFrame-klasse voor Spark Connect en Spark Classic
  • [SPARK-47417] [SC-162872][SQL] Ondersteuning voor sortering: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Zinnen

Ondersteuning voor Databricks ODBC-/JDBC-stuurprogramma's

Databricks ondersteunt ODBC-/JDBC-stuurprogramma's die in de afgelopen 2 jaar zijn uitgebracht. Download de onlangs uitgebrachte stuurprogramma's en upgrade (download ODBC, download JDBC).

Zie onderhoudsupdates voor Databricks Runtime 15.3.

Systeemomgeving

  • Besturingssysteem: Ubuntu 22.04.4 LTS
  • Java: Zulu 8.78.0.19-CA-linux64
  • Scala: 2.12.18
  • Python: 3.11.0
  • R: 4.3.2
  • Delta Lake: 3.2.0

Geïnstalleerde Python-bibliotheken

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
asttokens 2.0.5 astunparse 1.6.3 azure-core 1.30.1
azure-storage-blob 12.19.1 azure-storage-file-datalake 12.14.0 backcall 0.2.0
zwart 23.3.0 oogklep 1.4 boto3 1.34.39
botocore 1.34.39 cachetools 5.3.3 certifi 2023.7.22
cffiffi 1.15.1 chardet 4.0.0 charset-normalizer 2.0.4
klikken 8.0.4 cloudpickle 2.2.1 comm 0.1.2
contourpy 1.0.5 cryptografie 41.0.3 wielrijder 0.11.0
Cython 0.29.32 databricks-sdk 0.20.0 dbus-python 1.2.18
foutopsporing 1.6.7 decorateur 5.1.1 distlib 0.3.8
invoerpunten 0,4 Uitvoeren 0.8.3 facets-overview 1.1.1
filelock 3.13.4 fonttools 4.25.0 gitdb 4.0.11
GitPython 3.1.43 google-api-core 2.18.0 google-auth 2.29.0
google-cloud-core 2.4.1 google-cloud-storage 2.16.0 google-crc32c 1.5.0
google-resumable-media 2.7.0 googleapis-common-protos 1.63.0 grpcio 1.60.0
grpcio-status 1.60.0 httplib2 0.20.2 idna 3.4
importlib-metadata 6.0.0 ipyflow-core 0.0.198 ipykernel 6.25.1
ipython 8.15.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 jedi 0.18.1 Jeepney 0.7.1
jmespath 0.10.0 joblib 1.2.0 jupyter_client 7.4.9
jupyter_core 5.3.0 sleutelhanger 23.5.0 kiwisolver 1.4.4
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
matplotlib 3.7.2 matplotlib-inline 0.1.6 mlflow-skinny 2.11.3
more-itertools 8.10.0 mypy-extensions 0.4.3 nest-asyncio 1.5.6
numpy 1.23.5 oauthlib 3.2.0 verpakking 23.2
Pandas 1.5.3 parso 0.8.3 pathspec 0.10.3
Patsy 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Kussen 9.4.0 pit 23.2.1 platformdirs 3.10.0
plotly 5.9.0 prompt-toolkit 3.0.36 proto-plus 1.23.0
protobuf 4.24.1 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 pure-eval 0.2.2 pyarrow 14.0.1
pyasn1 0.4.8 pyasn1-modules 0.2.8 pyccolo 0.0.52
pycparser 2.21 pydantic 1.10.6 Pygments 2.15.1
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.38
pyparsing 3.0.9 python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1
pytz 2022.7 PyYAML 6,0 pyzmq 23.2.0
requests 2.31.0 RSA 4.9 s3transfer 0.10.1
scikit-learn 1.3.0 scipy 1.11.1 seaborn 0.12.2
SecretStorage 3.3.1 setuptools 68.0.0 Zes 1.16.0
smmap 5.0.1 sqlparse 0.5.0 ssh-import-id 5,11
stack-data 0.2.0 statsmodels 0.14.0 vasthoudendheid 8.2.2
threadpoolctl 2.2.0 tokenize-rt 4.2.1 tornado 6.3.2
traitlets 5.7.1 typing_extensions 4.10.0 tzdata 2022.1
ujson 5.4.0 upgrades zonder toezicht 0,1 urllib3 1.26.16
virtualenv 20.24.2 wadllib 1.3.6 wcwidth 0.2.5
wiel 0.38.4 zipp 3.11.0

Geïnstalleerde R-bibliotheken

R-bibliotheken worden geïnstalleerd vanuit de Posit Pakketbeheer CRAN-momentopname.

Bibliotheek Versie Bibliotheek Versie Bibliotheek Versie
pijl 14.0.0.2 askpass 1.2.0 assertthat 0.2.1
backports 1.4.1 base 4.3.2 base64enc 0.1-3
bigD 0.2.0 bit 4.0.5 bit64 4.0.5
bitops 1.0-7 blob 1.2.4 opstarten 1.3-28
brouwsel 1.0-10 Brio 1.1.4 bezem 1.0.5
bslib 0.6.1 cachem 1.0.8 beller 3.7.3
caret 6.0-94 cellranger 1.1.0 Chron 2.3-61
class 7.3-22 cli 3.6.2 clipr 0.8.0
klok 0.7.0 cluster 2.1.4 codetools 0.2-19
colorspace 2.1-0 commonmark 1.9.1 compiler 4.3.2
configuratie 0.3.2 Strijd 1.2.0 cpp11 0.4.7
Crayon 1.5.2 aanmeldingsgegevens 2.0.1 curl 5.2.0
data.table 1.15.0 gegevenssets 4.3.2 DBI 1.2.1
dbplyr 2.4.0 Desc 1.4.3 devtools 2.4.5
diagram 1.6.5 diffobj 0.3.5 verteren 0.6.34
downlit 0.4.3 dplyr 1.1.4 dtplyr 1.3.1
e1071 1.7-14 beletselteken 0.3.2 evaluate 0.23
fansi 1.0.6 farver 2.1.1 fastmap 1.1.1
fontawesome 0.5.2 forcats 1.0.0 foreach 1.5.2
buitenlands 0.8-85 smeden 0.2.0 Fs 1.6.3
toekomst 1.33.1 future.apply 1.11.1 gorgelen 1.5.2
Generics 0.1.3 Gert 2.0.1 ggplot2 3.4.4
Gh 1.4.0 git2r 0.33.0 gitcreds 0.1.2
glmnet 4.1-8 globals 0.16.2 lijm 1.7.0
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
afbeeldingen 4.3.2 grDevices 4.3.2 rooster 4.3.2
gridExtra 2.3 gsubfn 0,7 gt 0.10.1
gtable 0.3.4 hardhat 1.3.1 haven 2.5.4
highr 0.10 Hms 1.1.3 htmltools 0.5.7
htmlwidgets 1.6.4 httpuv 1.6.14 httr 1.4.7
httr2 1.0.0 ids 1.0.1 ini 0.3.1
ipred 0.9-14 isoband 0.2.7 Iterators 1.0.14
jquerylib 0.1.4 jsonlite 1.8.8 juicyjuice 0.1.0
KernSmooth 2.23-21 breiwerk 1.45 Labeling 0.4.3
later 1.3.2 latwerk 0.21-8 lava 1.7.3
levenscyclus 1.0.4 listenv 0.9.1 lubridate 1.9.3
magrittr 2.0.3 Markdown 1.12 MASSA 7.3-60
Matrix 1.5-4.1 memoise 2.0.1 methoden 4.3.2
mgcv 1.8-42 Mime 0,12 miniUI 0.1.1.1
mlflow 2.10.0 ModelMetrics 1.2.2.2 modeller 0.1.11
munsell 0.5.0 nlme 3.1-163 nnet 7.3-19
numDeriv 2016.8-1.1 openssl 2.1.1 parallel 4.3.2
parallel 1.36.0 pilaar 1.9.0 pkgbuild 1.4.3
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.4
plogr 0.2.0 plyr 1.8.9 loven 1.0.0
prettyunits 1.2.0 Proc 1.18.5 processx 3.8.3
prodlim 2023.08.28 profvis 0.3.8 Voortgang 1.2.3
progressr 0.14.0 Beloften 1.2.1 Proto 1.0.0
proxy 0.4-27 ps 1.7.6 purrr 1.0.2
R6 2.5.1 ragg 1.2.7 randomForest 4.7-1.1
rappdirs 0.3.3 rcmdcheck 1.4.0 RColorBrewer 1.1-3
Rcpp 1.0.12 RcppEigen 0.3.3.9.4 reactable 0.4.4
reactR 0.5.0 leesbewerking 2.1.5 readxl 1.4.3
recepten 1.0.9 Rematch 2.0.0 opnieuw overeenkomen2 2.1.2
Afstandsbedieningen 2.4.2.1 reprex 2.1.0 hervorm2 1.4.4
rlang 1.1.3 rmarkdown 2,25 RODBC 1.3-23
roxygen2 7.3.1 rpart 4.1.21 rprojroot 2.0.4
Rserve 1.8-13 RSQLite 2.3.5 rstudioapi 0.15.0
rversions 2.1.2 rvest 1.0.3 Sass 0.4.8
weegschaal 1.3.0 selectr 0.4-2 sessioninfo 1.2.2
vorm 1.4.6 glanzend 1.8.0 sourcetools 0.1.7-1
sparklyr 1.8.4 ruimtelijk 7.3-15 Splines 4.3.2
sqldf 0.4-11 SQUAREM 2021.1 Stats 4.3.2
stats4 4.3.2 stringi 1.8.3 stringr 1.5.1
overleving 3.5-5 swagger 3.33.1 sys 3.4.2
systemfonts 1.0.5 tcltk 4.3.2 testthat 3.2.1
tekstvorm 0.3.7 tibble 3.2.1 tidyr 1.3.1
tidyselect 1.2.0 tidyverse 2.0.0 timechange 0.3.0
timeDate 4032.109 tinytex 0,49 tools 4.3.2
tzdb 0.4.0 urlchecker 1.0.1 usethis 2.2.2
utf8 1.2.4 utils 4.3.2 uuid 1.2-0
V8 4.4.1 vctrs 0.6.5 viridisLite 0.4.2
Vroom 1.6.5 Waldo 0.5.2 snor 0.4.1
withr 3.0.0 xfun 0,41 xml2 1.3.6
xopen 1.0.0 xtable 1.8-4 yaml 2.3.8
zeallot 0.1.0 ritssluiting 2.3.1

Geïnstalleerde Java- en Scala-bibliotheken (Scala 2.12-clusterversie)

Groeps-id Artefact-id Versie
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.12.610
com.amazonaws aws-java-sdk-cloudformation 1.12.610
com.amazonaws aws-java-sdk-cloudfront 1.12.610
com.amazonaws aws-java-sdk-cloudhsm 1.12.610
com.amazonaws aws-java-sdk-cloudsearch 1.12.610
com.amazonaws aws-java-sdk-cloudtrail 1.12.610
com.amazonaws aws-java-sdk-cloudwatch 1.12.610
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.610
com.amazonaws aws-java-sdk-codedeploy 1.12.610
com.amazonaws aws-java-sdk-cognitoidentity 1.12.610
com.amazonaws aws-java-sdk-cognitosync 1.12.610
com.amazonaws aws-java-sdk-config 1.12.610
com.amazonaws aws-java-sdk-core 1.12.610
com.amazonaws aws-java-sdk-datapipeline 1.12.610
com.amazonaws aws-java-sdk-directconnect 1.12.610
com.amazonaws aws-java-sdk-directory 1.12.610
com.amazonaws aws-java-sdk-dynamodb 1.12.610
com.amazonaws aws-java-sdk-ec2 1.12.610
com.amazonaws aws-java-sdk-ecs 1.12.610
com.amazonaws aws-java-sdk-efs 1.12.610
com.amazonaws aws-java-sdk-elasticache 1.12.610
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.610
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.610
com.amazonaws aws-java-sdk-elastictranscoder 1.12.610
com.amazonaws aws-java-sdk-emr 1.12.610
com.amazonaws aws-java-sdk-glacier 1.12.610
com.amazonaws aws-java-sdk-glue 1.12.610
com.amazonaws aws-java-sdk-iam 1.12.610
com.amazonaws aws-java-sdk-importexport 1.12.610
com.amazonaws aws-java-sdk-kinesis 1.12.610
com.amazonaws aws-java-sdk-kms 1.12.610
com.amazonaws aws-java-sdk-lambda 1.12.610
com.amazonaws aws-java-sdk-logs 1.12.610
com.amazonaws aws-java-sdk-machinelearning 1.12.610
com.amazonaws aws-java-sdk-opsworks 1.12.610
com.amazonaws aws-java-sdk-rds 1.12.610
com.amazonaws aws-java-sdk-redshift 1.12.610
com.amazonaws aws-java-sdk-route53 1.12.610
com.amazonaws aws-java-sdk-s3 1.12.610
com.amazonaws aws-java-sdk-ses 1.12.610
com.amazonaws aws-java-sdk-simpledb 1.12.610
com.amazonaws aws-java-sdk-simpleworkflow 1.12.610
com.amazonaws aws-java-sdk-sns 1.12.610
com.amazonaws aws-java-sdk-sqs 1.12.610
com.amazonaws aws-java-sdk-ssm 1.12.610
com.amazonaws aws-java-sdk-storagegateway 1.12.610
com.amazonaws aws-java-sdk-sts 1.12.610
com.amazonaws aws-java-sdk-support 1.12.610
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.610
com.amazonaws jmespath-java 1.12.610
com.clearspring.analytics stroom 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.17.1
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-gearceerd 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml klasgenoot 1.3.4
com.fasterxml.jackson.core jackson-annotaties 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.16.0
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.cafeïne cafeïne 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java 1.1-natives
com.github.fommil.netlib native_system-java 1.1
com.github.fommil.netlib native_system-java 1.1-natives
com.github.fommil.netlib netlib-native_ref-linux-x86_64 1.1-natives
com.github.fommil.netlib netlib-native_system-linux-x86_64 1.1-natives
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Tink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 23.5.26
com.google.guava guave 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.ibm.icu icu4j 72.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe configuratie 1.4.3
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.netje.netlib arpack 3.0.3
dev.netje.netlib Blas 3.0.3
dev.netje.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.25
io.delta delta-sharing-client_2.12 1.0.5
io.dropwizard.metrics metrische aantekening 4.2.19
io.dropwizard.metrics metrische gegevenskern 4.2.19
io.dropwizard.metrics metrische gegevensgrafiet 4.2.19
io.dropwizard.metrics metrische statuscontroles 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metrics-servlets 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-sokken 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty netty-handler 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty-transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx verzamelaar 0.12.0
jakarta.annotatie jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation activering 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine pekelen 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-CSV 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr tekenreekstemplate 3.2.1
org.apache.ant ant 1.10.11
org.apache.ant ant-jsch 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow pijlnotatie 15.0.0
org.apache.arrow arrow-memory-core 15.0.0
org.apache.arrow arrow-memory-netty 15.0.0
org.apache.arrow pijlvector 15.0.0
org.apache.avro avro 1.11.3
org.apache.avro avro-ipc 1.11.3
org.apache.avro avro-mapred 1.11.3
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.curator curator-client 2.13.0
org.apache.curator curator-framework 2.13.0
org.apache.curator curator-recepten 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy klimop 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.22.1
org.apache.logging.log4j log4j-api 2.22.1
org.apache.logging.log4j log4j-core 2.22.1
org.apache.logging.log4j log4j-layout-template-json 2.22.1
org.apache.logging.log4j log4j-slf4j2-impl 2.22.1
org.apache.orc orc-core 1.9.2-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.2-shaded-protobuf
org.apache.orc orc-shims 1.9.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-gearceerd 4.23
org.apache.yetus aantekeningen voor doelgroepen 0.13.0
org.apache.zookeeper zookeeper 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.collections eclipse-collections 11.1.0
org.eclipse.collections eclipse-collections-api 11.1.0
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty jetty-vervolg 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-common 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance opnieuw verpakt 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core jersey-common 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator sluimerstand-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Aantekeningen 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mlflow mlflow-spark_2.12 2.9.1
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 0.9.45-databricks
org.roaringbitmap Shims 0.9.45-databricks
org.rocksdb rocksdbjni 8.11.4
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.11.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest scalatest-compatibel 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.7.1
org.tukaani xz 1,9
org.typelevel algebra_2.12 2.0.1
org.typelevel katten-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1