Databricks Runtime 16.0
Följande viktig information innehåller information om Databricks Runtime 16.0, som drivs av Apache Spark 3.5.0.
Databricks släppte den här versionen i november 2024.
Dricks
Information om hur du ser viktig information för Databricks Runtime-versioner som har nått supportens slut (EoS) finns i Viktig information om Databricks Runtime-slut. EoS Databricks Runtime-versionerna har dragits tillbaka och kanske inte uppdateras.
Förändringar i beteende
- Icke-bakåtkompatibel ändring: JDK 17 är nu standard
- Icke-bakåtkompatibel ändring: Värdbaserad RStudio är livets slut
- Icke-bakåtkompatibel ändring: Borttagning av stöd för att ändra
byte
,short
int
ochlong
typer till bredare typer - Korrekt parsning av regexmönster med negation i kapslad teckengruppering
- Förbättra identifiering av dubbletter av matchning i Delta Lake
MERGE
- Installationsmetod för klusterbibliotek kan inte längre åsidosättas
- Standardtidsgräns på två timmar för biblioteksinstallationer med klusteromfattning
- Installera bibliotek från DBFS och ställa in spark-konfigurationen
spark.databricks.driver.dbfsLibraryInstallationAllowed
är inaktiverade - Funktionerna
addArtifact()
är nu konsekventa mellan olika beräkningstyper
Icke-bakåtkompatibel ändring: JDK 17 är nu standard
I Databricks Runtime 16.0 och senare växlas JDK-standardversionen från JDK 8 till JDK 17. Den här ändringen görs på grund av den planerade utfasningen och slutet av stödet för JDK 8. Detta påverkar följande:
- Java-kod som körs på Azure Databricks-beräkning måste vara kompatibel med Java 17.
- Scala-kod som körs i notebook-filer eller Azure Databricks-beräkning måste vara kompatibel med Java 17.
- Java- och Scala-bibliotek som är installerade på beräkning måste vara kompatibla med Java 17.
- Versioner av Apache Hive-metaarkivklienten under 2.x. Om du ställer in Spark-konfigurationen
spark.sql.hive.metastore.version
på en version som är lägre än 2.x orsakas kompatibilitetsproblem med Java 17 och anslutningsfel i Hive-metaarkivet. Databricks rekommenderar att du uppgraderar Hive till en version över 2.0.0.
Om du behöver återgå till Java 8 lägger du till följande i Spark-miljövariablerna när du konfigurerar din Azure Databricks-beräkning:
JNAME=zulu8-ca-amd64
Om du använder ARM-instanser använder du följande:
JNAME=zulu8-ca-arm64
Mer information om hur du anger JDK-versioner med Azure Databricks-beräkning finns i Skapa ett kluster som använder JDK 17.
Hjälp med att migrera din kod från Java 8 finns i följande guider:
Icke-bakåtkompatibel ändring: Värdbaserad RStudio är livets slut
Med den här versionen är Databricks-värdbaserade RStudio Server slutpunkt och otillgänglig på alla Azure Databricks-arbetsytor som kör Databricks Runtime 16.0 och senare. Mer information och en lista över alternativ till RStudio finns i Utfasning av Hosted RStudio Server.
Icke-bakåtkompatibel ändring: Borttagning av stöd för att ändra byte
, short
int
och long
typer till bredare typer
I Databricks Runtime 15.4.3 och senare kan följande datatypändringar inte längre tillämpas på tabeller med funktionen för typbreddning aktiverad:
byte
,short
ochint
long
tilldecimal
.byte
,short
ochint
tilldouble
.
Den här ändringen görs för att säkerställa konsekvent beteende i Delta- och Iceberg-tabeller. Mer information om typbreddning finns i Typbreddning.
Korrekt parsning av regexmönster med negation i kapslad teckengruppering
Den här versionen innehåller en ändring som stöder korrekt parsning av regex-mönster med negation i kapslad teckengruppering. Till exempel [^[abc]]
parsas som "alla tecken som inte är ett av "abc".
Dessutom var Photon-beteendet inkonsekvent med Spark för kapslade teckenklasser. Regex-mönster som innehåller kapslade teckenklasser använder inte längre Photon och använder i stället Spark. En kapslad teckenklass är ett mönster som innehåller hakparenteser inom hakparenteser, till exempel [[a-c][1-3]]
.
Förbättra identifiering av dubbletter av matchning i Delta Lake MERGE
I Databricks Runtime 15.4 LTS och nedan MERGE
misslyckas åtgärderna om fler än en rad i källtabellen matchar samma rad i måltabellen baserat på villkoret MERGE
som anges i ON
-satsen. I Databricks Runtime 16.0 och senare tar MERGE
du även hänsyn till villkor som anges i WHEN MATCHED
-satsen. Se Upsert i en Delta Lake-tabell med hjälp av sammanslagning.
Installationsmetod för klusterbibliotek kan inte längre åsidosättas
Spark-konfigurationerna spark.databricks.libraries.enableSparkPyPI
, spark.databricks.libraries.enableMavenResolution
och spark.databricks.libraries.enableCRANResolutionnow
nu standardvärdet true
och kan inte åsidosättas.
Standardtidsgräns på två timmar för biblioteksinstallationer med klusteromfattning
I Databricks Runtime 16.0 och senare har biblioteksinstallationen med klusteromfattning en standardtidsgräns på två timmar. Biblioteksinstallationer som tar längre tid än den här tidsgränsen misslyckas och installationen avslutas. När du konfigurerar ett kluster kan du ändra tidsgränsen med hjälp av Spark-konfigurationen spark.databricks.driver.clusterLibraryInstallationTimeoutSec
.
Installera bibliotek från DBFS och ställa in spark-konfigurationen spark.databricks.driver.dbfsLibraryInstallationAllowed
är inaktiverade
I Databricks Runtime 16.0 och senare är installation av bibliotek från DBFS helt inaktiverat. Den här ändringen görs för att förbättra säkerheten för bibliotek på en Databricks-arbetsyta. I Databricks Runtime 16.0 och senare kan du dessutom inte längre använda Spark-konfigurationen spark.databricks.driver.dbfsLibraryInstallationAllowed
.
Funktionerna addArtifact()
är nu konsekventa mellan olika beräkningstyper
Med den här versionen packas arkivet upp automatiskt när du använder addArtifact(archive = True)
för att lägga till ett beroende till delad eller serverlös Azure Databricks-beräkning. Den här ändringen gör beteendet "addArtifact(archive = True) på dessa beräkningstyper konsekvent med en användarberäkning, som redan stöder automatisk uppackning av arkiv.
Nya funktioner och förbättringar
- Mer tillförlitlig omläsning av ändrade Python-moduler med förbättringar av
autoreload
- Avro-stöd för rekursivt schema
- Utökat stöd för Confluent Schema Registry för Avro
- Framtvinga relustering på tabeller med flytande klustring
- Delta-API:erna för Python och Scala stöder nu identitetskolumner
- Detaljerad åtkomstkontroll för beräkning av en användare är allmänt tillgänglig
- Skapa flytande klustrade tabeller under direktuppspelningsskrivningar
- Stöd för OPTIMIZE FULL-satsen
- Stöd för WITH-alternativspecifikation i INSERT och tabellreferens
- Nya SQL-funktioner
- Aktivera automatisk schemautveckling vid sammanslagning av data i en Delta-tabell
Mer tillförlitlig omläsning av ändrade Python-moduler med förbättringar av autoreload
I Databricks Runtime 16.0 och senare förbättrar uppdateringar autoreload
av tillägget säkerheten och tillförlitligheten vid omläsning av ändrade Python-moduler som importerats från arbetsytefiler. Med dessa ändringar autoreload
läser , när det är möjligt, bara in den del av en modul som har ändrats i stället för hela modulen. Dessutom föreslår Azure Databricks nu automatiskt att tillägget används autoreload
om modulen har ändrats sedan den senaste importen. Se Läsa in automatiskt för Python-moduler.
Avro-stöd för rekursivt schema
Nu kan du använda alternativet recursiveFieldMaxDepth
med from_avro
funktionen och avro
datakällan. Det här alternativet anger det maximala djupet för schemarekursion på Avro-datakällan. Se Läsa och skriva strömmande Avro-data.
Utökat stöd för Confluent Schema Registry för Avro
Azure Databricks stöder nu Avro-schemareferens med Confluent Schema Registry. Se Autentisera till ett externt Confluent-schemaregister.
Framtvinga relustering på tabeller med flytande klustring
I Databricks Runtime 16.0 och senare kan du använda syntaxen OPTIMIZE FULL
för att framtvinga omargning av alla poster i en tabell med flytande klustring aktiverat. Se Framtvinga omargning för alla poster.
Delta-API:erna för Python och Scala stöder nu identitetskolumner
Nu kan du använda Delta-API:erna för Python och Scala för att skapa tabeller med identitetskolumner. Se Använda identitetskolumner i Delta Lake.
Detaljerad åtkomstkontroll för beräkning av en användare är allmänt tillgänglig
I Databricks Runtime 16.0 och senare är detaljerad åtkomstkontroll för beräkning av en användare allmänt tillgänglig. I arbetsytor som är aktiverade för serverlös beräkning skickar beräkningsresursen frågan till den serverlösa beräkningen för att köra datafiltrering om en fråga körs på beräkning som stöds, till exempel en enskild användarberäkning och frågan kommer åt något av följande objekt:
- Vyer som definierats över tabeller där användaren inte har behörighet.
SELECT
- Dynamiska vyer.
- Tabeller med radfilter eller kolumnmasker tillämpade.
- Materialiserade vyer och strömmande tabeller.
Skapa flytande klustrade tabeller under direktuppspelningsskrivningar
Du kan nu använda clusterBy
för att aktivera flytande klustring när du skapar nya tabeller med strukturerade direktuppspelningsskrivningar. Se Aktivera flytande klustring.
Stöd för OPTIMIZE FULL-satsen
Databricks Runtime 16.0 stöder OPTIMIZE FULL-satsen . Den här satsen optimerar alla poster i en tabell som använder flytande klustring, inklusive data som tidigare kan ha klustrats.
Stöd för WITH-alternativspecifikation i INSERT och tabellreferens
Databricks Runtime 16.0 stöder en alternativspecifikation för tabellreferenser och tabellnamn för en INSERT
-instruktion som kan användas för att styra datakällornas beteende.
Nya SQL-funktioner
Följande SQL-funktioner läggs till i Databricks Runtime 16.0:
-
Den här funktionen är en feltolerant version av url_decode. Den här funktionen returnerar
NULL
om indata inte är en giltig URL-kodad sträng. -
Om indatauttrycket till
zeroifnull()
funktionen ärNULL
returnerar funktionen 0. Annars returneras värdet för indatauttrycket. -
Returnerar
NULL
om indata är 0 eller dess indata om det inte är 0. Om indatauttrycket tillnullifzero()
funktionen är 0 returnerarNULL
funktionen . Om indatauttrycket inte är 0 returneras värdet för indatauttrycket
Aktivera automatisk schemautveckling vid sammanslagning av data i en Delta-tabell
Den här versionen lägger till stöd för withSchemaEvolution()
medlemmen i DeltaMergeBuilder
klassen. Använd withSchemaEvolution()
för att aktivera automatisk schemautveckling under MERGE
åtgärder. Exempel: mergeBuilder.whenMatched(...).withSchemaEvolution().execute()}}
Andra förändringar
SparkR är nu inaktuellt
I Databricks Runtime 16.0 och senare är SparkR i Databricks inaktuellt inför utfasningen i den kommande Spark 4-versionen. Se Apache Spark Deprecate SparkR-tråden.
Databricks rekommenderar att du använder sparklyr i stället.
Databricks Runtime 16.0 stöds inte med PVC
Databricks Runtime 16.0 stöds inte av Databricks Private Virtual Cloud (PVC). Du måste använda Databricks Runtime 15.4 eller senare med alla PVC-versioner.
Felkorrigeringar
Auto Loader räddar nu Avro-posttyper med tomma scheman
När du läser in en Avro-fil i en Delta-tabell med automatisk inläsning record
läggs nu typer i filen som har ett tomt schema till i den räddade datakolumnen. Eftersom du inte kan mata in tomma komplexa datatyper i en Delta-tabell löser detta ett problem med att läsa in vissa Avro-filer. Mer information om räddade data finns i Vad är den räddade datakolumnen?.
Korrigering för fel vid skrivning av tidsstämplar med tidszoner som innehåller en andra förskjutning.
Den här versionen åtgärdar ett fel som påverkar vissa tidsstämplar med tidszoner som innehåller en andra förskjutning. Den här buggen gör att sekunderna utelämnas när du skriver till JSON, XML eller CSV, vilket leder till felaktiga tidsstämpelvärden.
Om du vill återgå till det tidigare beteendet använder du följande alternativ när du skriver till något av de berörda formaten: .option("yyyy-MM-dd'T'HH:mm:ss[.SSS][XXX]")
.
Biblioteksuppgraderingar
- Uppgraderade Python-bibliotek:
- azure-core från 1.30.2 till 1.31.0
- azure-storage-blob från 12.19.1 till 12.23.0
- azure-storage-file-datalake från 12.14.0 till 12.17.0
- svart från 23.3.0 till 24.4.2
- blinker från 1.4 till 1.7.0
- boto3 från 1.34.39 till 1.34.69
- botocore från 1.34.39 till 1.34.69
- certifi från 2023.7.22 till 2024.6.2
- cffi från 1.15.1 till 1.16.0
- klicka från 8.0.4 till 8.1.7
- comm från 0.1.2 till 0.2.1
- contourpy från 1.0.5 till 1.2.0
- kryptografi från 41.0.3 till 42.0.5
- Cython från 0.29.32 till 3.0.11
- databricks-sdk från 0.20.0 till 0.30.0
- dbus-python från 1.2.18 till 1.3.2
- filelock från 3.13.4 till 3.15.4
- fonttools från 4.25.0 till 4.51.0
- GitPython från 3.1.43 till 3.1.37
- google-api-core från 2.18.0 till 2.20.0
- google-auth från 2.31.0 till 2.35.0
- google-cloud-storage från 2.17.0 till 2.18.2
- google-crc32c från 1.5.0 till 1.6.0
- google-resumable-media från 2.7.1 till 2.7.2
- googleapis-common-protos från 1.63.2 till 1.65.0
- httplib2 från 0.20.2 till 0.20.4
- idna från 3.4 till 3.7
- ipykernel från 6.25.1 till 6.28.0
- ipython från 8.15.0 till 8.25.0
- jedi från 0.18.1 till 0.19.1
- jmespath från 0.10.0 till 1.0.1
- joblib från 1.2.0 till 1.4.2
- jupyter_client från 7.4.9 till 8.6.0
- jupyter_core från 5.3.0 till 5.7.2
- launchpadlib från 1.10.16 till 1.11.0
- lazr.restfulclient från 0.14.4 till 0.14.6
- matplotlib från 3.7.2 till 3.8.4
- mlflow-skinny från 2.11.4 till 2.15.1
- more-itertools från 8.10.0 till 10.3.0
- mypy-extensions från 0.4.3 till 1.0.0
- nest-asyncio från 1.5.6 till 1.6.0
- numpy från 1.23.5 till 1.26.4
- oauthlib från 3.2.0 till 3.2.2
- förpackning från 23.2 till 24.1
- patsy från 0.5.3 till 0.5.6
- pip från 23.2.1 till 24.2
- ritat från 5.9.0 till 5.22.0
- prompt-toolkit från 3.0.36 till 3.0.43
- pyarrow från 14.0.1 till 15.0.2
- pydantik från 1.10.6 till 2.8.2
- PyGObject från 3.42.1 till 3.48.2
- PyJWT från 2.3.0 till 2.7.0
- pyodbc från 4.0.38 till 5.0.1
- python-dateutil från 2.8.2 till 2.9.0.post0
- python-lsp-jsonrpc från 1.1.1 till 1.1.2
- pytz från 2022.7 till 2024.1
- PyYAML från 6.0 till 6.0.1
- pyzmq från 23.2.0 till 25.1.2
- begäranden från 2.31.0 till 2.32.2
- scikit-learn från 1.3.0 till 1.4.2
- scipy från 1.11.1 till 1.13.1
- seaborn från 0.12.2 till 0.13.2
- setuptools från 68.0.0 till 74.0.0
- smmap från 5.0.1 till 5.0.0
- sqlparse från 0.5.0 till 0.5.1
- statsmodels från 0.14.0 till 0.14.2
- tornado från 6.3.2 till 6.4.1
- drag från 5.7.1 till 5.14.3
- typing_extensions från 4.10.0 till 4.11.0
- ujson från 5.4.0 till 5.10.0
- virtualenv från 20.24.2 till 20.26.2
- hjul från 0.38.4 till 0.43.0
- zipp från 3.11.0 till 3.17.0
- Uppgraderade R-bibliotek:
- pil från 14.0.0.2 till 16.1.0
- backports från 1.4.1 till 1.5.0
- bas från 4.3.2 till 4.4.0
- bitops från 1,0-7 till 1,0-8
- starta från 1.3-28 till 1.3-30
- brio från 1.1.4 till 1.1.5
- kvast från 1.0.5 till 1.0.6
- bslib från 0.6.1 till 0.8.0
- cachem från 1.0.8 till 1.1.0
- uppringare från 3.7.3 till 3.7.6
- cli från 3.6.2 till 3.6.3
- klockan från 0.7.0 till 0.7.1
- kluster från 2.1.4 till 2.1.6
- codetools från 0.2-19 till 0.2-20
- colorspace från 2.1-0 till 2.1-1
- kompilator från 4.3.2 till 4.4.0
- krita från 1.5.2 till 1.5.3
- curl från 5.2.0 till 5.2.1
- data.table från 1.15.0 till 1.15.4
- datauppsättningar från 4.3.2 till 4.4.0
- DBI från 1.2.1 till 1.2.3
- dbplyr från 2.4.0 till 2.5.0
- sammanfatta från 0.6.34 till 0.6.36
- från 0,4,3 till 0,4,4
- utvärdera från 0,23 till 0,24,0
- farver från 2.1.1 till 2.1.2
- fastmap från 1.1.1 till 1.2.0
- utländsk från 0,8-85 till 0,8-86
- fs från 1.6.3 till 1.6.4
- från 1.33.1 till 1.34.0
- future.apply från 1.11.1 till 1.11.2
- gert från 2.0.1 till 2.1.0
- ggplot2 från 3.4.4 till 3.5.1
- gh från 1.4.0 till 1.4.1
- globals från 0.16.2 till 0.16.3
- grafik från 4.3.2 till 4.4.0
- grDevices från 4.3.2 till 4.4.0
- rutnät från 4.3.2 till 4.4.0
- gt från 0.10.1 till 0.11.0
- gtable från 0.3.4 till 0.3.5
- hardhat från 1.3.1 till 1.4.0
- highr från 0,10 till 0,11
- htmltools från 0.5.7 till 0.5.8.1
- httpuv från 1.6.14 till 1.6.15
- httr2 från 1.0.0 till 1.0.2
- ipred från 0,9-14 till 0,9-15
- KernSmooth från 2.23-21 till 2.23-22
- stickning från 1,45 till 1,48
- lattice från 0.21-8 till 0.22-5
- lava från 1.7.3 till 1.8.0
- markdown från 1.12 till 1.13
- MASS från 7,3-60 till 7,3-60,0,1
- Matris från 1.5-4.1 till 1.6-5
- metoder från 4.3.2 till 4.4.0
- mgcv från 1,8-42 till 1,9-1
- mlflow från 2.10.0 till 2.14.1
- munsell från 0.5.0 till 0.5.1
- nlme från 3.1-163 till 3.1-165
- openssl från 2.1.1 till 2.2.0
- parallell från 4.3.2 till 4.4.0
- parallellt från 1.36.0 till 1.38.0
- pkgbuild från 1.4.3 till 1.4.4
- pkgdown från 2.0.7 till 2.1.0
- pkgload från 1.3.4 till 1.4.0
- processx från 3.8.3 till 3.8.4
- prodlim från 2023.08.28 till 2024.06.25
- löften från 1.2.1 till 1.3.0
- ps från 1.7.6 till 1.7.7
- ragg från 1.2.7 till 1.3.2
- Rcpp från 1.0.12 till 1.0.13
- RcppEigen från 0.3.3.9.4 till 0.3.4.0.0
- reactR från 0.5.0 till 0.6.0
- recept från 1.0.9 till 1.1.0
- fjärranslutningar från 2.4.2.1 till 2.5.0
- reprex från 2.1.0 till 2.1.1
- rlang från 1.1.3 till 1.1.4
- rmarkdown från 2,25 till 2,27
- roxygen2 från 7.3.1 till 7.3.2
- rpart från 4.1.21 till 4.1.23
- RSQLite från 2.3.5 till 2.3.7
- rstudioapi från 0.15.0 till 0.16.0
- rvest från 1.0.3 till 1.0.4
- sass från 0.4.8 till 0.4.9
- form från 1.4.6 till 1.4.6.1
- glänsande från 1.8.0 till 1.9.1
- sparklyr från 1.8.4 till 1.8.6
- spatial från 7,3-15 till 7,3-17
- splines från 4.3.2 till 4.4.0
- statistik från 4.3.2 till 4.4.0
- stats4 från 4.3.2 till 4.4.0
- stringi från 1.8.3 till 1.8.4
- överlevnad från 3,5-5 till 3,6-4
- swagger från 3.33.1 till 5.17.14.1
- systemfonts från 1.0.5 till 1.1.0
- tcltk från 4.3.2 till 4.4.0
- testthat från 3.2.1 till 3.2.1.1
- textshaping från 0.3.7 till 0.4.0
- tidyselect från 1.2.0 till 1.2.1
- tinytex från 0,49 till 0,52
- verktyg från 4.3.2 till 4.4.0
- usethis från 2.2.2 till 3.0.0
- från 4.3.2 till 4.4.0
- uuid från 1.2-0 till 1.2-1
- V8 från 4.4.1 till 4.4.2
- withr från 3.0.0 till 3.0.1
- xfun från 0,41 till 0,46
- xopen från 1.0.0 till 1.0.1
- yaml från 2.3.8 till 2.3.10
- Uppgraderade Java-bibliotek:
- com.amazonaws.aws-java-sdk-autoscaling från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudformation från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudfront från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudhsm från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudsearch från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudtrail från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudwatch från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cloudwatchmetrics från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-codedeploy från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cognitoidentity från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-cognitosync från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-config från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-core från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-datapipeline från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-directconnect från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-directory från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-dynamodb från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-ec2 från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-ecs från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-efs från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-elasticache från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-elasticbeanstalk från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-elasticloadbalancing från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-elastictranscoder från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-emr från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-glacier från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-glue från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-iam från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-importexport från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-kinesis från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-kms från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-lambda från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-logs från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-machinelearning från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-opsworks från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-rds från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-redshift från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-route53 från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-s3 från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-ses från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-simpledb från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-simpleworkflow från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-sns från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-sqs från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-ssm från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-storagegateway från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-sts från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-support från 1.12.610 till 1.12.638
- com.amazonaws.aws-java-sdk-workspaces från 1.12.610 till 1.12.638
- com.amazonaws.jmespath-java från 1.12.610 till 1.12.638
- com.google.protobuf.protobuf-java från 2.6.1 till 3.25.1
- io.airlift.aircompressor från 0,25 till 0,27
- io.delta.delta-sharing-client_2.12 från 1.1.3 till 1.2.0
- io.netty.netty-all från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-buffert från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-codec från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-codec-http från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-codec-http2 från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-codec-socks från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-common från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-handler från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-handler-proxy från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-resolver från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-transport från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-transport-classes-epoll från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-transport-classes-kqueue från 4.1.96.Final till 4.1.108.Final
- io.netty.netty-transport-native-epoll från 4.1.96.Final-linux-x86_64 till 4.1.108.Final-linux-x86_64
- io.netty.netty-transport-native-kqueue från 4.1.96.Final-osx-x86_64 till 4.1.108.Final-osx-x86_64
- io.netty.netty-transport-native-unix-common från 4.1.96.Final till 4.1.108.Final
- org.apache.ivy.ivy från 2.5.1 till 2.5.2
- org.apache.zookeeper.zookeeper från 3.6.3 till 3.9.2
- org.apache.zookeeper.zookeeper-jute från 3.6.3 till 3.9.2
- org.rocksdb.rocksdbjni från 8.11.4 till 9.2.1
- org.scalactic.scalactic_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-compatible från 3.2.15 till 3.2.16
- org.scalatest.scalatest-core_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-diagrams_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-featurespec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-flatspec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-freespec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-funspec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-funsuite_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-matchers-core_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-mustmatchers_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-propspec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-refspec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-shouldmatchers_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest-wordspec_2.12 från 3.2.15 till 3.2.16
- org.scalatest.scalatest_2.12 från 3.2.15 till 3.2.16
Apache Spark
Databricks Runtime 16.0 innehåller Apache Spark 3.5.0. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 15.4 LTS, samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:
- [SPARK-49093] [DBRRM-1371] Återställ "[SC-172958][SQL] GROUP BY med MapType-nes...
- [SPARK-49898] [DBRRM-1282][SC-178410] Åtgärda dokumentation och standard för loggningsloggens loggningsflagga för aktivitetsmått för händelseloggar från SPARK-42204
- [SPARK-49743] [ES-1260022][BEHAVE-157][SC-177475][SQL] OptimizeCsvJsonExpr bör inte ändra schemafält vid beskärning av GetArrayStructFields
- [SPARK-49816] [SC-177896][SQL] Bör endast uppdatera out-going-ref-count för refererad yttre CTE-relation
- [SPARK-48939] [SC-177022][SC-172766][AVRO] Stöd för läsning av Avro med rekursiv schemareferens
- [SPARK-49688] [SC-177468][ES-1242349][ANSLUT] Åtgärda ett datarace mellan avbrott och körningsplan
- [SPARK-49771] [SC-177466][PYTHON] Förbättra Pandas Scalar Iter UDF-fel när utdatarader överskrider indatarader
- [SPARK-48866] [SC-170772][SQL] Åtgärda tips om giltig teckenuppsättning i felmeddelandet för INVALID_PARAMETER_VALUE. TECKENUPPSÄTTNING
- [SPARK-48195] [FIXFORWARD][SC-177267][CORE] Spara och återanvänd RDD/Broadcast som skapats av SparkPlan
- [SPARK-49585] [ANSLUT] Ersätt körningskarta i Sessionshållare med operationID-uppsättning
- [SPARK-49211] [SC-174257][SQL] V2-katalogen kan också stödja inbyggda datakällor
- [SPARK-49684] Minimera livslängden för sessionsåterställningslåset
- [SPARK-48059] [SPARK-48145][SPARK-48134][SPARK-48182][SPARK-48209][SPARK-48291] Strukturerat loggramverk på Java-sidan
- [SPARK-48857] [SC-170661][SQL] Begränsa teckenuppsättningar i CSVOptions
- [SPARK-49152] [SC-173690][SQL] V2SessionCatalog bör använda V2Command
- [SPARK-42846] [SC-176588][SQL] Ta bort feltillståndet _LEGACY_ERROR_TEMP_2011
- [SPARK-48195] [SC-177267][CORE] Spara och återanvänd RDD/Broadcast som skapats av SparkPlan
- [SPARK-49630] [SC-177379][SS] Lägg till platta till alternativ för att bearbeta samlingstyper med tillståndsdatakällans läsare
- [SPARK-49699] [SC-177154][SS] Inaktivera PruneFilters för strömmande arbetsbelastningar
- [SPARK-48781] [SC-175282][SQL] Lägga till katalog-API:er för inläsning av lagrade procedurer
- [SPARK-49667] [SC-177068][SQL] Tillåt inte CS_AI sorteringar med uttryck som använder StringSearch
- [SPARK-49737] [SC-177207][SQL] Inaktivera bucketing på sorterade kolumner i komplexa typer
- [SPARK-48712] [SC-169794][SQL] Förbättring av perf för kodning med tomma värden eller UTF-8-teckenuppsättning
- [SPARK-49038] [SC-173933][SQL] SQLMetric ska rapportera raw-värdet i ackumulatoruppdateringshändelsen
- [SPARK-48541] [SC-169066][CORE] Lägga till en ny slutkod för utförare som dödats av TaskReaper
- [SPARK-48774] [SC-170138][SQL] Använda SparkSession i SQLImplicits
- [SPARK-49719] [SC-177139][SQL] Skapa
UUID
ochSHUFFLE
acceptera heltalseed
- [SPARK-49713] [SC-177135][PYTHON][ANSLUT] Gör så att funktionen
count_min_sketch
accepterar talargument - [SPARK-47601] [SC-162499][GRAPHX] Graphx: Migrera loggar med variabler till ett strukturerat loggningsramverk
- [SPARK-49738] [SC-177219][SQL] Slutmed felkorrigering
- [SPARK-48623] [SC-170822][CORE] Strukturerade loggningsmigreringar [del 3]
- [SPARK-49677] [SC-177148][SS] Kontrollera att ändringsloggfiler skrivs vid incheckning och att forceSnapshot-flaggan också återställs
- [SPARK-49684] [SC-177040][ANSLUT] Ta bort globala lås från sessions- och körningshanterare
- [SPARK-48302] [SC-168814][PYTHON] Bevara null-värden i kartkolumner i PyArrow-tabeller
- [SPARK-48601] [SC-169025][SQL] Ge ett mer användarvänligt felmeddelande när du anger ett null-värde för JDBC-alternativet
- [SPARK-48635] [SC-169263][SQL] Tilldela klasser till kopplingstypfel och as-of-join-fel
- [SPARK-49673] [SC-177032][ANSLUT] Öka CONNECT_GRPC_ARROW_MAX_BATCH_SIZE till 0,7 * CONNECT_GRPC_MAX_MESSAGE_SIZE
- [SPARK-49693] [SC-177071][PYTHON][ANSLUT] Förfina strängrepresentationen av
timedelta
- [SPARK-49687] [SC-176901][SQL] Fördröj sortering i
validateAndMaybeEvolveStateSchema
- [SPARK-49718] [SC-177112][PS] Växla
Scatter
diagram till exempeldata - [SPARK-48472] [SC-169044][SQL] Aktivera reflekterande uttryck med sorterade strängar
- [SPARK-48484] [SC-167484][SQL] Korrigering: V2Write använder samma TaskAttemptId för olika uppgiftsförsök
- [SPARK-48341] [SC-166560][ANSLUT] Tillåt att plugin-program använder QueryTest i sina tester
- [SPARK-42252] [SC-168723][CORE] Lägg till
spark.shuffle.localDisk.file.output.buffer
och inaktuellspark.shuffle.unsafe.file.output.buffer
- [SPARK-48314] [SC-166565][SS] Dubbla inte cachefiler för FileStreamSource med Trigger.AvailableNow
- [SPARK-49567] [SC-176241][PYTHON] Använd
classic
i ställetvanilla
för från PySpark-kodbasen - [SPARK-48374] [SC-167596][PYTHON] Stöd för ytterligare pyarrowtabellkolumntyper
- [SPARK-48300] [SC-166481][SQL] Codegen-stöd för
from_xml
- [SPARK-49412] [SC-177059][PS] Beräkna alla lådritningsmått i ett enda jobb
- [SPARK-49692] [SC-177031][PYTHON][ANSLUT] Förfina strängrepresentationen av literaldatum och datetime
- [SPARK-49392] [ES-1130351][SC-176705][SQL] Fånga upp fel när det inte går att skriva till en extern datakälla
- [SPARK-48306] [SC-166241][SQL] Förbättra UDT i felmeddelandet
- [SPARK-44924] [SC-166379][SS] Lägga till konfiguration för FileStreamSource-cachelagrade filer
- [SPARK-48176] [SC-165644][SQL] Justera namnet på FIELD_ALREADY_EXISTS felvillkor
- [SPARK-49691] [SC-176988][PYTHON][ANSLUT] Funktionen
substring
bör acceptera kolumnnamn - [SPARK-49502] [SC-176077][CORE] Undvik NPE i SparkEnv.get.shuffleManager.unregisterShuffle
- [SPARK-49244] [SC-176703][SQL] Ytterligare undantagsförbättringar för parser/tolk
- [SPARK-48355] [SC-176684][SQL] Stöd för CASE-instruktion
- [SPARK-49355] [SC-175121][SQL]
levenshtein
bör kontrollera om värdena förcollation
alla parametertyper är samma - [SPARK-49640] [SC-176953][PS] Tillämpa reservoarsampling i
SampledPlotBase
- [SPARK-49678] [SC-176857][CORE] Support
spark.test.master
iSparkSubmitArguments
- [SPARK-49680] [SC-176856][PYTHON] Begränsa
Sphinx
byggparallellitet till 4 som standard - [SPARK-49396] Återställ "[SC-176030][SQL] Ändra nullability-kontrollen för CaseWhen-uttryck"
- [SPARK-48419] [SC-167443][SQL] Vikbar spridning ersätter vikbar kolumnstimul...
- [SPARK-49556] [SC-176757][SQL] Lägg till SQL-pipe-syntax för SELECT-operatorn
- [SPARK-49438] [SC-175237][SQL] Åtgärda det vackra namnet på
FromAvro
&ToAvro
-uttrycket - [SPARK-49659] [SC-1229924][SQL] Lägg till ett trevligt användaranslutet fel för skalära underfrågor i VALUES-satsen
- [SPARK-49646] [SC-176778][SQL] korrigerar underkry decorrelation för union/set-åtgärder när parentOuterReferences har referenser som inte omfattas av collectedChildOuterReferences
- [SPARK-49354] [SC-175034][SQL]
split_part
bör kontrollera om värdena förcollation
alla parametertyper är samma - [SPARK-49478] [SC-175914][ANSLUT] Hantera null-mått i ConnectProgressExecutionListener
- [SPARK-48358] [SC-176374][SQL] Stöd för REPEAT-instruktion
- [SPARK-49183] [SC-173680][SQL] V2SessionCatalog.createTable bör respektera PROP_IS_MANAGED_LOCATION
- [SPARK-49611] [SC-176791][SQL] Introducera TVF
collations()
och ta bortSHOW COLLATIONS
kommandot - [SPARK-49261] [SC-176589][SQL] Ersätt inte literaler i aggregerade uttryck med grupp-efter-uttryck
- [SPARK-49099] [SC-173229][SQL] CatalogManager.setCurrentNamespace bör respektera den anpassade sessionskatalogen
- [SPARK-49594] [SC-176569][SS] Lägga till kontroll av om columnFamilies har lagts till eller tagits bort för att skriva StateSchemaV3-fil
- [SPARK-49578] [SC-176385][SQL] Ta bort ANSI-konfigurationsförslaget i CAST_INVALID_INPUT och CAST_OVERFLOW
- [SPARK-48882] [SC-174256][SS] Tilldela namn till strömmande utdataläge relaterade felklasser
- [SPARK-49155] [SC-176506][SQL][SS] Använd lämpligare parametertyp för att konstruera
GenericArrayData
- [SPARK-49519] [SC-176388][SQL] Sammanslagningsalternativ för tabell och relation när du skapar FileScanBuilder
- [SPARK-49591] [SC-176587][SQL] Lägg till kolumnen Logisk typ i variant readme
- [SPARK-49596] [SC-176423][SQL] Förbättra prestanda för
FormatString
- [SPARK-49525] [SC-176044][SS][ANSLUT] Mindre loggförbättring av strömningsfrågans lyssnare på serversidan
- [SPARK-49583] [SC-176272][SQL] Definiera undervillkoret
SECONDS_FRACTION
fel för ett ogiltigt bråkmönster för sekunder - [SPARK-49536] [SC-176242] Hantera fel i förinläsning av datakälla för python-direktuppspelning
- [SPARK-49443] [SC-176273][SQL][PYTHON] Implementera to_variant_object uttryck och gör schema_of_variant uttryck skriva ut OBJEKT för för variantobjekt
- [SPARK-49544] [SASP-3990][SC-176557][ANSLUT] Ersätt grovlåsning i SparkConnectExecutionManager med ConcurrentMap
- [SPARK-49548] [SASP-3990][SC-176556][ANSLUT] Ersätt grovlåsning i SparkConnectSessionManager med ConcurrentMap
- [SPARK-49551] [SC-176218][SS] Förbättra RocksDB-loggen för replayChangelog
- [SPARK-49595] [SC-176396][ANSLUT][SQL] Korrigering
DataFrame.unpivot/melt
i Spark Connect Scala-klienten - [SPARK-49006] [SC-176162] Implementera rensning för OperatorStateMetadataV2- och StateSchemaV3-filer
- [SPARK-49600] [SC-176426][PYTHON] Ta bort
Python 3.6 and older
-relaterad logik fråntry_simplify_traceback
- [SPARK-49303] [SC-176013][SS] Implementera TTL för ValueState i transformWithStateInPandas API
- [SPARK-49191] [SC-176243][SS] Lägg till stöd för att läsa transformWithState-karttillståndsvariabler med tillståndsdatakällans läsare
- [SPARK-49593] [SC-176371][SS] Utlösa RocksDB-undantag till anroparen på DB stäng om ett fel visas
- [SPARK-49334] [SC-174803][SQL]
str_to_map
bör kontrollera om värdena förcollation
alla parametertyper är samma - [SPARK-42204] [SC-176126][CORE] Lägg till alternativ för att inaktivera redundant loggning av interna TaskMetrics-ackumulatorer i händelseloggar
- [SPARK-49575] [SC-176256][SS] Lägg endast till loggning för låsversion om acquiredThreadInfo inte är null
- [SPARK-49539] [SC-176250][SS] Uppdatera startidentifieraren för interna kolfamiljer till en annan
- [SPARK-49205] [SC-173853][SQL] KeyGroupedPartitioning ska ärva HashPartitioningLike
- [SPARK-49396] [SC-176030][SQL] Ändra nullability-kontrollen för CaseWhen-uttrycket
- [SPARK-49476] [SC-175700][SQL] Åtgärda nullabiliteten för base64-funktionen
- [SPARK-47262] [SC-174829][SQL] Tilldela namn till felvillkor för parquet-konverteringar
- [SPARK-47247] [SC-158349][SQL] Använd mindre målstorlek vid sammankoppling av partitioner med exploderande kopplingar
- [SPARK-49501] [SC-176166][SQL] Åtgärda dubbel undflyende av tabellplats
- [SPARK-49083] [SC-173214][ANSLUT] Tillåt from_xml och from_json att arbeta internt med json-scheman
- [SPARK-49043] [SC-174673][SQL] Åtgärda tolkad codepath-grupp efter på karta som innehåller sorterade strängar
- [SPARK-48986] [SC-172265][ANSLUT][SQL] Lägg till ColumnNode Intermediate Representation
- [SPARK-49326] [SC-176016][SS] Classify Error class for Foreach sink user function error (Klassificera felklass för användarfunktionsfel för Foreach-mottagare)
- [SPARK-48348] [SC-175950][SPARK-48376][SQL] Introduktion
LEAVE
ochITERATE
instruktioner - [SPARK-49523] [SC-175949][ANSLUT] Öka den maximala väntetiden för att ansluta servern ska komma upp för testning
- [SPARK-49000] [BEHAVE-105][ES-1194747][SQL] Åtgärda "select count(distinct 1) from t" där t är tom tabell genom att expandera RewriteDistinctAggregates – DBR version 16.x
- [SPARK-49311] [SC-175038][SQL] Gör det möjligt för stora "intervall sekund"-värden att gjutas till decimal
- [SPARK-49200] [SC-173699][SQL] Åtgärda undantag för icke-codegen-sortering av null-typ
- [SPARK-49467] [SC-176051][SS] Lägga till stöd för tillståndsdatakällans läsare och listtillstånd
- [SPARK-47307] [SC-170891][SQL] Lägga till en konfiguration i valfri segmentbas64-strängar
- [SPARK-49391] [SC-176032][PS] Lådritning väljer extremvärden efter avstånd från staket
- [SPARK-49445] [SC-175845][Användargränssnitt] Stöd för att visa knappbeskrivning i förloppsindikatorn för användargränssnittet
- [SPARK-49451] [SC-175702] Tillåt duplicerade nycklar i parse_json.
- [SPARK-49275] [SC-175701][SQL] Åtgärda nullhet för returtyp för xpath-uttrycket
- [SPARK-49021] [SC-175578][SS] Lägg till stöd för att läsa transformWithState-värdetillståndsvariabler med tillståndsdatakällans läsare
- [SPARK-49474] [BEHAVE-143][SC-169253][SC-175933][SS] Classify Error class for FlatMapGroupsWithState user function error
- [SPARK-49408] [SC-175932][SQL] Använda IndexedSeq i ProjectingInternalRow
- [SPARK-49509] [SC-175853][CORE] Använd
Platform.allocateDirectBuffer
i stället förByteBuffer.allocateDirect
- [SPARK-49382] [SC-175013][PS] Gör ramlåderitningen korrekt rendera flygblad/avvikande värden
- [SPARK-49002] [SC-172846][SQL] Hantera konsekvent ogiltiga platser i WAREHOUSE/SCHEMA/TABLE/PARTITION/DIRECTORY
- [SPARK-49480] [SC-175699][CORE] Åtgärda NullPointerException från
SparkThrowableHelper.isInternalError
- [SPARK-49477] [SC-175828][PYTHON] Förbättra felmeddelandet om ogiltig returtyp för Pandas udf
- [SPARK-48693] [SC-169492][SQL] Förenkla och förena toString av Invoke och StaticInvoke
- [SPARK-49441] [SC-175716][ML]
StringIndexer
sorterar matriser i körbara filer - [SPARK-49347] [SC-175004][R] Inaktuell SparkR
- [SPARK-49357] [SC-175227][ANSLUT][PYTHON] Trunkera djupt kapslat protobuf-meddelande lodrätt
- [SPARK-41982] [SC-120604][SQL] Partitioner av typsträng ska inte behandlas som numeriska typer
- [SPARK-48776] [SC-170452][BEHAVE-72] Åtgärda tidsstämpelformatering för json, xml och csv
- [SPARK-49223] [SC-174800][ML] Förenkla StringIndexer.countByValue med inbyggda funktioner
- [SPARK-49016] Återställ "[SC-174663][SQL] Återställ beteendet somqueries från råa CSV-filer inte tillåts när endast innehåller skadade postkolumner och tilldelar namn till
_LEGACY_ERROR_TEMP_1285
" - [SPARK-49041] [SC-172392][PYTHON][ANSLUT] Skapa ett korrekt fel för
dropDuplicates
när felsubset
anges - [SPARK-49050] [SC-175235] Aktivera deleteIfExists-operatorn i TWS med virtuella kolumnfamiljer
- [SPARK-49216] [SC-173919][CORE]Korrigering för att inte logga meddelandekontext med explicit LogEntry konstruerad när konfigurationen för strukturerad loggning är inaktiverad
- [SPARK-49252] [SC-175596][CORE] Gör
TaskSetExcludeList
ochHeathTracker
oberoende - [SPARK-49352] [SC-174971][SQL] Undvik redundant matristransformering för identiska uttryck
- [SPARK-42307] [SC-173863][SQL] Tilldela namn på fel _LEGACY_ERROR_TEMP_2232
- [SPARK-49197] [SC-173732][CORE]
Spark Command
Redigera utdata ilauncher
modulen - [SPARK-48913] [SC-173934][SQL] Implementera IndentingXMLStreamWriter
- [SPARK-49306] [SC-175363][PYTHON][SQL] Skapa SQL-funktionsalias för "zeroifnull" och "nullifzero"
- [SPARK-48344] [SQL] SQL-skriptkörning (inklusive Spark Connect)
- [SPARK-49402] [SC-175122][PYTHON] Åtgärda Binder-integrering i PySpark-dokumentationen
- [SPARK-49017] [SC-174664][SQL] Insert-instruktionen misslyckas när flera parametrar används
- [SPARK-49318] [SC-174733][SQL] Föregripa lågprioritetsfel på LCA till slutet av kontrollanalysen för att förbättra felupplevelsen
- [SPARK-49016] [SC-174663][SQL] Återställa det beteende som frågor från råa CSV-filer inte tillåts när endast innehåller skadade postkolumner och tilldelar namn till
_LEGACY_ERROR_TEMP_1285
- [SPARK-49387] [SC-175124][PYTHON] Åtgärda typtips för
accuracy
ipercentile_approx
ochapprox_percentile
- [SPARK-49131] [SC-174666][SS] TransformWithState bör korrekt ange implicita grupperingsnycklar även med lata iteratorer
- [SPARK-49301] [SC-174795][SS] Segmentpildata som skickas till Python Worker
- [SPARK-49039] [SC-174651][Användargränssnitt] Kryssrutan Återställ när körmått läses in på fliken Steg
- [SPARK-48428] [SC-169806][SQL]: Åtgärda IllegalStateException i NestedColumnAliasing
- [SPARK-49353] [SC-174830][SQL] Uppdatera dokument som rör
UTF-32
kodning/avkodning - [SPARK-48613] [SC-170966][SQL] SPJ: Stöd för automatisk blandning på ena sidan + färre kopplingsnycklar än partitionsnycklar
- [SPARK-47473] [SC-160450][BEHAVE-127][SQL] Åtgärda problem med korrekthet vid konvertering av postgres INFINITY-tidsstämplar
- [SPARK-49142] [SC-173658][ANSLUT][PYTHON] Följ upp för att återställa proto till strängprestandakostnad
- [SPARK-49300] [SC-175008][CORE] Åtgärda läckage av Hadoop-delegeringstoken när tokenRenewalInterval inte har angetts.
- [SPARK-49367] [SC-175012][PS] Parallellisera KDE-beräkningen för flera kolumner (ritad serverdel)
- [SPARK-49365] [SC-175011][PS] Förenkla bucketaggregering i histritning
- [SPARK-49372] [SC-175003][SS] Se till att latestSnapshot är inställt på ingen på nära för att undvika efterföljande användning
- [SPARK-49341] [SC-174785] Ta bort
connector/docker
till förmån förApache Spark Operator
- [SPARK-49344] [SC-174894][PS] Stöd
json_normalize
för Pandas API på Spark - [SPARK-49306] [SC-174794][SQL] Skapa nya SQL-funktioner "zeroifnull" och "nullifzero"
- [SPARK-48796] [SC-174668][SS] Läs in kolumnfamilje-ID från RocksDBCheckpointMetadata för VCF vid omstart
- [SPARK-49342] [SC-174899][SQL] Gör argumentet "jsonFormatSchema" för TO_AVRO SQL-funktion valfritt
- [SPARK-48628] [SC-174695][CORE] Lägg till aktivitetstoppar på/utanför heapminnesmått
- [SPARK-47407] [SC-159379][BEHAVE-126][SQL] Stöd för java.sql.Types.NULL-mappning till NullType
- [SPARK-48628] [SC-173407][CORE] Lägg till aktivitetstoppar på/utanför heapminnesmått
- [SPARK-49166] [SC-173987][SQL] Stöd FÖR OFFSET i korrelerad underfråga
- [SPARK-49269] [SC-174676][SQL] Utvärdera gärna VALUES()-listan i AstBuilder
- [SPARK-49281] [SC-174782][SQL] Optimze parquet binär getBytes med getBytesUnsafe för att undvika kopieringskostnad
- [SPARK-49113] [SC-174734] Hävda inte översättningsbuggar – svälj undantaget tyst
- [SPARK-49098] [SC-173253][SQL] Lägg till skrivalternativ för INSERT
- [SPARK-48638] [SC-174694][FÖLJ][ANSLUT] Åtgärda dokumentationen för ExecutionInfo
- [SPARK-49250] [ES-1222826][SQL] Förbättra felmeddelandet för den kapslade olöstaWindowExpression i CheckAnalysis
- [SPARK-48755] [SC-174258][SS][PYTHON] transformWithState pyspark-basimplementering och ValueState-stöd
- [SPARK-48966] [SC-174329][SQL] Förbättra felmeddelandet med ogiltig ouppklarad kolumnreferens i UDTF-anrop
- [SPARK-46590] [SC-154115][SQL] Korrigering av sammanskring misslyckades med oväntade partitionsfel
- [SPARK-49235] [SC-174159][SQL] Refaktorn ResolveInlineTables-regeln så att den inte passerar hela trädet
- [SPARK-49060] [SC-173107][ANSLUT] Rensa Mima-regler för binär kompatibilitetskontroller i SQL-Connect
- [SPARK-48762] [SC-172525][SQL] Introducera clusterBy DataFrameWriter API för Python
- [SPARK-49207] [SC-173852][SQL] Åtgärda en-till-många-ärendemappning i SplitPart och StringSplitSQL
- [SPARK-49204] [SC-173850][SQL] Åtgärda hantering av surrogatpar i StringInstr och StringLocate
- [SPARK-36680] [SC-170640][SQL] Stöder dynamiska tabellalternativ för Spark SQL
- [SPARK-49204] [SC-173849][SQL] Åtgärda hantering av surrogatpar i SubstringIndex
- [SPARK-49204] [SC-173848][SQL] Åtgärda hantering av surrogatpar i StringTrim
- [SPARK-48967] [SC-173993]Åtgärda SparkConfigOwnershipSuite-test för OPTIMIZE_INSERT_INTO_VALUES_PARSER
- [SPARK-49204] [SC-173851][SQL] Åtgärda hantering av surrogatpar i StringReplace
- [SPARK-48967] [SC-173993][SQL][16.x] Förbättra prestanda och minnesfotavtryck för "INSERT INTO ... VALUES"-instruktioner
- [SPARK-49099] Återställ "[SC-173229][SQL] CatalogManager.setCurrent...
- [SPARK-48347] [SC-173812][SQL] Stöd för WHILE-instruktion
- [SPARK-49128] [SC-173344][CORE] Stöd för användargränssnittsrubrik för anpassad historikserver
- [SPARK-49146] [SC-173825][SS] Flytta kontrollfel relaterade till vattenstämpel som saknas i direktuppspelningsfrågor i tilläggsläge till felramverk
- [SPARK-45787] [SC-172197][SQL] Stöd för Catalog.listColumns för klustringskolumner
- [SPARK-49099] [SC-173229][SQL] CatalogManager.setCurrentNamespace bör respektera den anpassade sessionskatalogen
- [SPARK-49138] [SC-173483][SQL] Åtgärda CollationTypeCasts för flera uttryck
- [SPARK-49163] [SC-173666][SQL] Försök att skapa en tabell baserat på brutna parquet-partitionsdataresultat bör returnera användaranslutna fel
- [SPARK-49201] [SC-173793][PS][PYTHON][ANSLUT] Omimplementeringsritning
hist
med Spark SQL - [SPARK-49188] [SC-173682][SQL] Internt fel på concat_ws anropas på matriser med strängmatriser
- [SPARK-49137] [SC-173677][SQL] När det booleska villkoret
if statement
i är ogiltigt ska ett undantag genereras - [SPARK-49193] [SC-173672][SQL] Förbättra prestanda för RowSetUtils.toColumnBasedSet
- [SPARK-49078] [SC-173078][SQL] Stöd för att visa kolumners syntax i v2-tabellen
- [SPARK-49141] [SC-173388][SQL] Markera variant som inkompatibel hive-datatyp
- [SPARK-49059] [Cherry-Pick][15.x][SC-172528][ANSLUT] Flytta
SessionHolder.forTesting(...)
till testpaketet - [SPARK-49111] [SC-173661][SQL] Flytta withProjectAndFilter till det tillhörande objektet i DataSourceV2Strategy
- [SPARK-49185] [SC-173688][PS][PYTHON][ANSLUT] Omimplementeringsritning
kde
med Spark SQL - [SPARK-49178] [SC-173673][SQL] Optimera prestanda
Row#getSeq
för att matcha prestanda när du använder Spark 3.5 med Scala 2.12 - [SPARK-49093] [SC-172958][SQL] GRUPPERA EFTER med MapType kapslad i komplex typ
- [SPARK-49142] [SC-173469][ANSLUT][PYTHON] Lägre Spark Connect-klientloggnivå för felsökning
- [SPARK-48761] [SC-172048][SQL] Introducera clusterBy DataFrameWriter API för Scala
- [SPARK-48346] [SC-173083][SQL] Stöd för IF ELSE-instruktioner i SQL-skript
- [SPARK-48338] [SC-173112][SQL] Förbättra undantag som genereras från parser/tolk
- [SPARK-48658] [SC-169474][SQL] Koda/avkoda funktioner rapporterar kodningsfel i stället för mojibake för ommappbara tecken
- [SPARK-49071] [SC-172954][SQL] Ta bort ArraySortLike-egenskap
- [SPARK-49107] Återställ "Återställ "[SC-173103][SQL]
ROUTINE_ALREADY_EXISTS
stöder RoutineType"" - [SPARK-49070] [SC-172907][SS][SQL] TransformWithStateExec.initialState skrivs om felaktigt för att skapa en ogiltig frågeplan
- [SPARK-49114] [SC-173217] Underkategori kan inte läsa in tillståndsarkivfel
- [SPARK-49107] Återställ "[SC-173103][SQL]
ROUTINE_ALREADY_EXISTS
stöder RoutineType" - [SPARK-49048] [SC-173223][SS] Lägg till stöd för att läsa relevanta operatormetadata vid angivet batch-ID
- [SPARK-49094] [SC-173049][SQL] Åtgärda att ignoreCorruptFiles inte fungerar för hive orc impl med mergeSchema av
- [SPARK-49108] [SC-173102][EXEMPEL] Lägg till
submit_pi.sh
REST API-exempel - [SPARK-49107] [SC-173103][SQL]
ROUTINE_ALREADY_EXISTS
stöder RoutineType - [SPARK-48997] [SC-172484][SS] Implementera enskilda avlastningar för trådtrådsfel för underhåll
- [SPARK-49063] [SC-173094][SQL] Åtgärda mellan med ScalarSubqueries
- [SPARK-45891] [SC-172305][SQL][PYTHON][VARIANT] Lägga till stöd för intervalltyper i variantspecifikationen
- [SPARK-49074] [BEHAVE-110][SC-172815][SQL] Åtgärda variant med
df.cache()
- [SPARK-49003] [SC-172613][SQL] Åtgärda hashning för tolkad kodsökväg så att den är sorteringsmedveten
- [SPARK-48740] [SC-172430][SQL] Fel vid fel vid fel i fönstrets specifikation saknas tidigt
- [SPARK-48999] [SC-172245][SS] Dela upp PythonStreamingDataSourceSimpleSuite
- [SPARK-49031] [SC-172602] Implementera validering för TransformWithStateExec-operatorn med OperatorStateMetadataV2
- [SPARK-49053] [SC-172494][PYTHON][ML] Gör så att funktionerna för att spara/läsa in modellen accepterar Spark-session
- [SPARK-49032] [Backport][15.x][SS] Lägg till schemasökväg i metadatatabellposten, verifiera förväntad version och lägg till operatormetadatarelaterat test för operatormetadataformat v2
- [SPARK-49034] [SC-172306][CORE] Stöd för ersättning på serversidan
sparkProperties
i REST Submission API - [SPARK-48931] [SC-171895][SS] Minska api-kostnaden för Cloud Store-listan för underhåll av tillståndslager
- [SPARK-48849] [SC-172068][SS]Skapa OperatorStateMetadataV2 för TransformWithStateExec-operatorn
- [SPARK-49013] [SC-172322] Ändra nyckel i sorteringskarta för map- och matristyper i scala
- [SPARK-48414] [SC-171884][PYTHON] Åtgärda icke-bakåtkompatibla ändringar i Python
fromJson
- [SPARK-48910] [SC-171001][SQL] Använd HashSet/HashMap för att undvika linjära sökningar i PreprocessTableCreation
- [SPARK-49007] [SC-172204][CORE] Förbättra
MasterPage
för att stödja anpassad rubrik - [SPARK-49009] [SC-172263][SQL][PYTHON] Få kolumn-API:er och funktioner att acceptera uppräkningar
- [SPARK-49033] [SC-172303][CORE] Stöd för ersättning på serversidan
environmentVariables
i REST Submission API - [SPARK-48363] [SC-166470][SQL] Rensa några redundanta koder i
from_xml
- [SPARK-46743] [SC-170867][SQL][BEHAVE-84] Räkna bugg efter att ScalarSubqery har vikts om den har en tom relation
- [SPARK-49040] [SC-172351][SQL] Åtgärda dokument
sql-ref-syntax-aux-exec-imm.md
- [SPARK-48998] [SC-172212][ML] Metaalgoritmer sparar/läser in modell med SparkSession
- [SPARK-48959] [SC-171708][SQL]
NoSuchDatabaseException
UtökaNoSuchNamespaceException
för att återställa undantagshanteringen - [SPARK-48996] [SC-172130][SQL][PYTHON] Tillåt bare literals för och eller för Kolumn
- [SPARK-48990] [SC-171936] Uppföljning för #101759 – testkorrigering
- [SPARK-48338] [SC-171912][SQL] Kontrollera variabeldeklarationer
- [SPARK-48990] [SC-171936][SQL] Nyckelord för enhetlig variabelrelaterad SQL-syntax
- [SPARK-48988] [SC-171915][ML] Hantera
DefaultParamsReader/Writer
metadata med Spark-session - [SPARK-48974] [SC-171978][SQL][SS][ML][MLLIB] Använd
SparkSession.implicits
i stället förSQLContext.implicits
- [SPARK-48760] [SC-170870][SQL] Åtgärda CatalogV2Util.applyClusterByChanges
- [SPARK-48928] [SC-171956] Loggvarning för att anropa .unpersist() på lokalt kontrollpunktade RDD:er
- [SPARK-48760] [SC-170139][SQL] Introducera ALTER TABLE ... KLUSTER EFTER SQL-syntax för att ändra klustringskolumner
- [SPARK-48844] Återställ "[SC-170669][SQL] ANVÄND INVALID_EMPTY_LOCATION i stället för UNSUPPORTED_DATASOURCE_FOR_DIRECT_QUERY när sökvägen är tom"
- [SPARK-48833] [SC-171914][SQL][VARIANT] Stödvariant i
InMemoryTableScan
- [SPARK-48975] [SC-171894][PROTOBUF] Ta bort onödig
ScalaReflectionLock
definition frånprotobuf
- [SPARK-48970] [SC-171800][PYTHON][ML] Undvik att använda SparkSession.getActiveSession i spark ML-läsare/skrivare
- [SPARK-48844] [SC-170669][SQL] ANVÄND INVALID_EMPTY_LOCATION i stället för UNSUPPORTED_DATASOURCE_FOR_DIRECT_QUERY när sökvägen är tom
- [SPARK-48714] [SC-170136] Åtgärda misslyckade df.mergeInto-tester i PySpark och UC
- [SPARK-48957] [SC-171797][SS] Returnera underklassificerad felklass för tillståndslagringsbelastning för hdfs och rocksdb-provider
- [SPARK-48891] [Backport][15x][SC-171677][SS] Refactor StateSchemaCompatibilityChecker för att förena alla tillståndsschemaformat
- [SPARK-48972] [SC-171795][PYTHON] Förena stränghantering i literaler i funktioner
- [SPARK-48388] [SC-171337][SQL] Åtgärda SET-instruktionsbeteende för SQL-skript
- [SPARK-48743] [SC-170552][SQL][SS] SammanslagningSessionIterator bör hantera bättre när getStruct returnerar null
- [SPARK-48623] [15.x][SC-171322][CORE] Migrera FileAppender-loggar till strukturerad loggning
- [SPARK-36680] [DBRRM-1123] Återställ "[SC-170640][SQL] Stöder dynamiska tabellalternativ för Spark SQL"
- [SPARK-48841] [SC-170868][BEHAVE-83][SQL] Ta med
collationName
i avsql()
Collate
- [SPARK-48941] [SC-171703][PYTHON][ML] Ersätt API-anrop för läsning/skrivning av RDD med API för läsning/skrivning av dataram
- [SPARK-48938] [SC-171577][PYTHON] Förbättra felmeddelanden när du registrerar Python-UDF:er
- [SPARK-48350] [SC-171040][SQL] Introduktion av anpassade undantag för Sql-skript
- [SPARK-48907] [SC-171158][SQL] Åtgärda värdet
explicitTypes
iCOLLATION_MISMATCH.EXPLICIT
- [SPARK-48945] [SC-171658][PYTHON] Förenkla regex-funktioner med
lit
- [SPARK-48944] [SC-171576][ANSLUT] Förena JSON-formatschemahanteringen i Connect Server
- [SPARK-48836] [SC-171569] Integrera SQL-schema med tillståndsschema/metadata
- [SPARK-48946] [SC-171504][SQL] NPE i redact-metod när sessionen är null
- [SPARK-48921] [SC-171412][SQL] ScalaUDF-kodare i underfrågor bör matchas för MergeInto
- [SPARK-45155] [SC-171048][ANSLUT] Lägga till API Docs för Spark Connect JVM/Scala-klienten
- [SPARK-48900] [SC-171319] Lägg till
reason
fält förcancelJobGroup
ochcancelJobsWithTag
- [SPARK-48865] [SC-171154][SQL] Lägg till funktionen try_url_decode
- [SPARK-48851] [SC-170767][SQL] Ändra värdet
SCHEMA_NOT_FOUND
för frånnamespace
tillcatalog.namespace
- [SPARK-48510] [SC-170893][2/2] Stöd för UDAF
toColumn
API i Spark Connect - [SPARK-45190] [SC-171055][SPARK-48897][PYTHON][ANSLUT] Skapa
from_xml
stöd för StructType-schema - [SPARK-48930] [SC-171304][CORE] Redigera
awsAccessKeyId
genom att inkluderaaccesskey
mönster - [SPARK-48909] [SC-171080][ML][MLLIB] Använder SparkSession via SparkContext när metadata skrivs
- [SPARK-48883] [SC-171133][ML][R] Ersätt API-anrop för läsning/skrivning av RDD med API för läsning/skrivning av dataram
- [SPARK-48924] [SC-171313][PS] Lägga till en Pandas-liknande
make_interval
hjälpfunktion - [SPARK-48884] [SC-171051][PYTHON] Ta bort den oanvända hjälpfunktionen
PythonSQLUtils.makeInterval
- [SPARK-48817] [SC-170636][SQL] Kör ivrigt unionskommandon med flera kommandon tillsammans
- [SPARK-48896] [SC-171079][ML][MLLIB] Undvik ompartition när du skriver ut metadata
- [SPARK-48892] [SC-171127][ML] Undvik att läsa param per rad i
Tokenizer
- [SPARK-48927] [SC-171227][CORE] Visa antalet cachelagrade RDD:ar i
StoragePage
- [SPARK-48886] [15.x][Backport][SC-171039][SS] Lägg till versionsinformation för ändringslogg v2 för enklare utveckling
- [SPARK-48903] [SC-171136][SS] Ange den senaste versionen av rocksDB-ögonblicksbilden korrekt vid fjärrbelastning
- [SPARK-48742] [SC-170538][SS] Virtuell kolumnfamilj för RocksDB
- [SPARK-48726] [15.x][SC-170753][SS] Skapa filformatet StateSchemaV3 och skriv ut det för TransformWithStateExec-operatorn
- [SPARK-48794] [SC-170882][ANSLUT][15.x] df.mergeInto-stöd för Spark Connect (Scala och Python)
- [SPARK-48714] [SC-170136][PYTHON] Implementera
DataFrame.mergeInto
i PySpark - [SPARK-48772] [SC-170642][SS][SQL] Läge för ändringsflödesläsare för tillståndsdatakälla
- [SPARK-48666] [SC-170887][SQL] Tryck inte ned filtret om det innehåller PythonUDFs
- [SPARK-48845] [SC-170889][SQL] GenericUDF fångar undantag från underordnade
- [SPARK-48880] [SC-170974][CORE] Undvik att utlösa NullPointerException om drivrutins-plugin-programmet inte kan initieras
- [SPARK-48888] [Backport][15x][SC-170973][SS] Ta bort skapande av ögonblicksbilder baserat på storlek på changelog ops
- [SPARK-48871] [SC-170876] Åtgärda INVALID_NON_DETERMINISTIC_EXPRESSIONS validering i...
- [SPARK-48883] [SC-170894][ML][R] Ersätt API-anrop för läsning/skrivning av RDD med API för läsning/skrivning av dataram
- [SPARK-36680] [SC-170640][SQL] Stöder dynamiska tabellalternativ för Spark SQL
- [SPARK-48804] [SC-170558][SQL] Lägg till classIsLoadable & OutputCommitter.isAssignableFrom check for output committer class configrations
- [SPARK-46738] [SC-170791][PYTHON] Återaktivera en grupp med dokumenttest
- [SPARK-48858] [SC-170756][PYTHON] Ta bort inaktuellt
setDaemon
metodanrop förThread
ilog_communication.py
- [SPARK-48639] [SC-169801][ANSLUT][PYTHON] Lägg till ursprung i RelationCommon
- [SPARK-48863] [SC-170770][ES-1133940][SQL] Åtgärda ClassCastException vid parsning av JSON med "spark.sql.json.enablePartialResults" aktiverat
- [SPARK-48343] [SC-170450][SQL] Introduktion till SQL Scripting-tolk
- [SPARK-48529] [SC-170755][SQL] Introduktion av etiketter i SQL-skript
- [SPARK-45292] Återställ "[SC-151609][SQL][HIVE] Ta bort Guava från delade klasser från IsolatedClientLoader"
- [SPARK-48037] [SC-165330][CORE][3.5] Fix SortShuffleWriter saknar shuffle-skrivrelaterade mått som resulterar i potentiellt felaktiga data
- [SPARK-48720] [SC-170551][SQL] Justera kommandot
ALTER TABLE ... UNSET TBLPROPERTIES ...
i v1 och v2 - [SPARK-48485] [SC-167825][ANSLUT][SS] Stöd för interruptTag och interruptAlla i strömningsfrågor
- [SPARK-45292] [SC-151609][SQL][HIVE] Ta bort Guava från delade klasser från IsolatedClientLoader
- [SPARK-48668] [SC-169815][SQL] Stöd FÖR ALTER NAMESPACE ... TA BORT EGENSKAPER I v2
- [SPARK-47914] [SC-165313][SQL] Visa inte parametern splits i Intervall
- [SPARK-48807] [SC-170643][SQL] Binärt stöd för CSV-datakälla
- [SPARK-48220] [SC-167592][PYTHON][15.X] Tillåt att pyarrowtabellen skickas för att skapaDataFrame()
- [SPARK-48545] [SC-169543][SQL] Skapa to_avro- och from_avro SQL-funktioner för att matcha DataFrame-motsvarigheter
- [SPARK-47577] [SC-168875][SPARK-47579] Korrigera vilseledande användning av loggnyckel TASK_ID
Stöd för Databricks ODBC/JDBC-drivrutin
Databricks har stöd för ODBC/JDBC-drivrutiner som släppts under de senaste två åren. Ladda ned de nyligen släppta drivrutinerna och uppgradera (ladda ned ODBC, ladda ned JDBC).
Systemmiljö
- Operativsystem: Ubuntu 24.04.1 LTS
- Java: Zulu17.50+19-CA
- Scala: 2.12.18
- Python: 3.12.3
- R: 4.4.0
- Deltasjön: 3.2.1
Installerade Python-bibliotek
Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
---|---|---|---|---|---|
annotated-types | 0.7.0 | asttokens | 2.0.5 | astunparse | 1.6.3 |
autocommand | 2.2.2 | azure-core | 1.31.0 | azure-storage-blob | 12.23.0 |
azure-storage-file-datalake | 12.17.0 | backports.tarfile | 1.2.0 | svart | 24.4.2 |
blinker | 1.7.0 | boto3 | 1.34.69 | botocore | 1.34.69 |
cachetools | 5.3.3 | certifi | 2024.6.2 | cffi | 1.16.0 |
chardet | 4.0.0 | charset-normalizer | 2.0.4 | klicka | 8.1.7 |
cloudpickle | 2.2.1 | Comm | 0.2.1 | contourpy | 1.2.0 |
kryptografi | 42.0.5 | cyklist | 0.11.0 | Cython | 3.0.11 |
databricks-sdk | 0.30.0 | dbus-python | 1.3.2 | felsökning | 1.6.7 |
dekoratör | 5.1.1 | Inaktuell | 1.2.14 | distlib | 0.3.8 |
docstring-to-markdown | 0,11 | entrypoints | 0,4 | Verkställande | 0.8.3 |
facets-overview | 1.1.1 | filelock | 3.15.4 | fonttools | 4.51.0 |
gitdb | 4.0.11 | GitPython | 3.1.37 | google-api-core | 2.20.0 |
google-auth | 2.35.0 | google-cloud-core | 2.4.1 | google-cloud-storage | 2.18.2 |
google-crc32c | 1.6.0 | google-resumable-media | 2.7.2 | googleapis-common-protos | 1.65.0 |
grpcio | 1.60.0 | grpcio-status | 1.60.0 | httplib2 | 0.20.4 |
idna | 3.7 | importlib-metadata | 6.0.0 | importlib_resources | 6.4.0 |
böja | 7.3.1 | ipyflow-core | 0.0.198 | ipykernel | 6.28.0 |
ipython | 8.25.0 | ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 |
isodate | 0.6.1 | jaraco.context | 5.3.0 | jaraco.functools | 4.0.1 |
jaraco.text | 3.12.1 | jedi | 0.19.1 | jmespath | 1.0.1 |
joblib | 1.4.2 | jupyter_client | 8.6.0 | jupyter_core | 5.7.2 |
kiwisolver | 1.4.4 | launchpadlib | 1.11.0 | lazr.restfulclient | 0.14.6 |
lazr.uri | 1.0.6 | matplotlib | 3.8.4 | matplotlib-inline | 0.1.6 |
Mccabe | 0.7.0 | mlflow-skinny | 2.15.1 | more-itertools | 10.3.0 |
mypy | 1.10.0 | mypy-extensions | 1.0.0 | nest-asyncio | 1.6.0 |
nodeenv | 1.9.1 | numpy | 1.26.4 | oauthlib | 3.2.2 |
opentelemetry-api | 1.27.0 | opentelemetry-sdk | 1.27.0 | opentelemetry-semantic-conventions | 0.48b0 |
emballage | 24.1 | Pandas | 1.5.3 | parso | 0.8.3 |
pathspec | 0.10.3 | Patsy | 0.5.6 | pexpect | 4.8.0 |
kudde | 10.3.0 | pip | 24.2 | platformdirs | 3.10.0 |
plotly | 5.22.0 | pluggy | 1.0.0 | prompt-toolkit | 3.0.43 |
proto-plus | 1.24.0 | protobuf | 4.24.1 | psutil | 5.9.0 |
psycopg2 | 2.9.3 | ptyprocess | 0.7.0 | pure-eval | 0.2.2 |
pyarrow | 15.0.2 | pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 |
pyccolo | 0.0.52 | pycparser | 2.21 | pydantisk | 2.8.2 |
pydantic_core | 2.20.1 | pyflakes | 3.2.0 | Pygments | 2.15.1 |
PyGObject | 3.48.2 | PyJWT | 2.7.0 | pyodbc | 5.0.1 |
pyparsing | 3.0.9 | pyright | 1.1.294 | python-dateutil | 2.9.0.post0 |
python-lsp-jsonrpc | 1.1.2 | python-lsp-server | 1.10.0 | pytoolconfig | 1.2.6 |
pytz | 2024.1 | PyYAML | 6.0.1 | pyzmq | 25.1.2 |
begäranden | 2.32.2 | rep | 1.12.0 | RSA | 4,9 |
s3transfer | 0.10.2 | scikit-learn | 1.4.2 | scipy | 1.13.1 |
seaborn | 0.13.2 | setuptools | 74.0.0 | sex | 1.16.0 |
smmap | 5.0.0 | sqlparse | 0.5.1 | ssh-import-id | 5,11 |
stack-data | 0.2.0 | statsmodels | 0.14.2 | orubblighet | 8.2.2 |
threadpoolctl | 2.2.0 | tokenize-rt | 4.2.1 | tomli | 2.0.1 |
tromb | 6.4.1 | traitlets | 5.14.3 | typeguard | 4.3.0 |
types-protobuf | 3.20.3 | types-psutil | 5.9.0 | types-pytz | 2023.3.1.1 |
types-PyYAML | 6.0.0 | types-requests | 2.31.0.0 | types-setuptools | 68.0.0.0 |
types-six | 1.16.0 | types-urllib3 | 1.26.25.14 | typing_extensions | 4.11.0 |
ujson | 5.10.0 | obevakade uppgraderingar | 0,1 | urllib3 | 1.26.16 |
virtualenv | 20.26.2 | wadllib | 1.3.6 | wcwidth | 0.2.5 |
whatthepatch | 1.0.2 | hjul | 0.43.0 | wrapt | 1.14.1 |
yapf | 0.33.0 | zipp | 3.17.0 |
Installerade R-bibliotek
R-bibliotek installeras från Posit Package Manager CRAN-ögonblicksbilden.
Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
---|---|---|---|---|---|
arrow | 16.1.0 | askpass | 1.2.0 | assertthat | 0.2.1 |
backportar | 1.5.0 | bas | 4.4.0 | base64enc | 0.1-3 |
bigD | 0.2.0 | bit | 4.0.5 | bit64 | 4.0.5 |
bitops | 1.0-8 | blob | 1.2.4 | start | 1.3-30 |
brygga | 1.0-10 | Brio | 1.1.5 | kvast | 1.0.6 |
bslib | 0.8.0 | cachem | 1.1.0 | anropare | 3.7.6 |
textmarkör | 6.0-94 | cellranger | 1.1.0 | Chron | 2.3-61 |
klass | 7.3-22 | cli | 3.6.3 | clipr | 0.8.0 |
klocka | 0.7.1 | cluster | 2.1.6 | codetools | 0.2-20 |
färgområde | 2.1-1 | commonmark | 1.9.1 | kompilator | 4.4.0 |
config | 0.3.2 | Konflikt | 1.2.0 | cpp11 | 0.4.7 |
krita | 1.5.3 | autentiseringsuppgifter | 2.0.1 | hårlock | 5.2.1 |
data.table | 1.15.4 | datauppsättningar | 4.4.0 | DBI | 1.2.3 |
dbplyr | 2.5.0 | Desc | 1.4.3 | devtools | 2.4.5 |
diagram | 1.6.5 | diffobj | 0.3.5 | smälta | 0.6.36 |
downlit | 0.4.4 | dplyr | 1.1.4 | dtplyr | 1.3.1 |
e1071 | 1.7-14 | ellips | 0.3.2 | evaluate (utvärdera) | 0.24.0 |
fansi | 1.0.6 | farver | 2.1.2 | fastmap | 1.2.0 |
fontawesome | 0.5.2 | forcats | 1.0.0 | foreach | 1.5.2 |
främmande | 0.8-86 | smida | 0.2.0 | Fs | 1.6.4 |
framtid | 1.34.0 | future.apply | 1.11.2 | gurgla | 1.5.2 |
Generika | 0.1.3 | Gert | 2.1.0 | ggplot2 | 3.5.1 |
Gh | 1.4.1 | git2r | 0.33.0 | gitcreds | 0.1.2 |
glmnet | 4.1-8 | globals | 0.16.3 | lim | 1.7.0 |
googledrive | 2.1.1 | googlesheets4 | 1.1.1 | Gower | 1.0.1 |
grafik | 4.4.0 | grDevices | 4.4.0 | gitter | 4.4.0 |
gridExtra | 2.3 | gsubfn | 0,7 | gt | 0.11.0 |
gtable | 0.3.5 | hardhat | 1.4.0 | hamn | 2.5.4 |
highr | 0,11 | Hms | 1.1.3 | htmltools | 0.5.8.1 |
htmlwidgets | 1.6.4 | httpuv | 1.6.15 | httr | 1.4.7 |
httr2 | 1.0.2 | Id | 1.0.1 | ini | 0.3.1 |
ipred | 0.9-15 | isoband | 0.2.7 | Iteratorer | 1.0.14 |
jquerylib | 0.1.4 | jsonlite | 1.8.8 | juicyjuice | 0.1.0 |
KernSmooth | 2.23-22 | stickning | 1.48 | Märkning | 0.4.3 |
senare | 1.3.2 | Galler | 0.22-5 | lava | 1.8.0 |
livscykel | 1.0.4 | lyssna | 0.9.1 | lubridate | 1.9.3 |
magrittr | 2.0.3 | Markdown | 1.13 | MASSA | 7.3-60.0.1 |
Matris | 1.6-5 | pmise | 2.0.1 | metoder | 4.4.0 |
mgcv | 1.9-1 | MIME | 0,12 | miniUI | 0.1.1.1 |
mlflow | 2.14.1 | ModelMetrics | 1.2.2.2 | modelr | 0.1.11 |
munsell | 0.5.1 | nlme | 3.1-165 | nnet | 7.3-19 |
numDeriv | 2016.8-1.1 | openssl | 2.2.0 | parallel | 4.4.0 |
parallellt | 1.38.0 | pelare | 1.9.0 | pkgbuild | 1.4.4 |
pkgconfig | 2.0.3 | pkgdown | 2.1.0 | pkgload | 1.4.0 |
plogr | 0.2.0 | plyr | 1.8.9 | berömma | 1.0.0 |
prettyunits | 1.2.0 | Proc | 1.18.5 | processx | 3.8.4 |
prodlim | 2024.06.25 | profvis | 0.3.8 | Förlopp | 1.2.3 |
progressr | 0.14.0 | Löften | 1.3.0 | Proto | 1.0.0 |
proxyserver | 0.4-27 | PS | 1.7.7 | purrr | 1.0.2 |
R6 | 2.5.1 | ragg | 1.3.2 | randomForest | 4.7-1.1 |
rappdirs | 0.3.3 | rcmdcheck | 1.4.0 | RColorBrewer | 1.1-3 |
Rcpp | 1.0.13 | RcppEigen | 0.3.4.0.0 | reakterbar | 0.4.4 |
reactR | 0.6.0 | readr | 2.1.5 | readxl | 1.4.3 |
recept | 1.1.0 | Returmatch | 2.0.0 | rematch2 | 2.1.2 |
Fjärrkontroller | 2.5.0 | reprex | 2.1.1 | omforma2 | 1.4.4 |
rlang | 1.1.4 | rmarkdown | 2.27 | RODBC | 1.3-23 |
roxygen2 | 7.3.2 | rpart | 4.1.23 | rprojroot | 2.0.4 |
Rserve | 1.8-13 | RSQLite | 2.3.7 | rstudioapi | 0.16.0 |
rversioner | 2.1.2 | rvest | 1.0.4 | Sass | 0.4.9 |
våg | 1.3.0 | väljare | 0.4-2 | sessioninfo | 1.2.2 |
form | 1.4.6.1 | skinande | 1.9.1 | sourcetools | 0.1.7-1 |
sparklyr | 1.8.6 | rumslig | 7.3-17 | Splines | 4.4.0 |
sqldf | 0.4-11 | SQUAREM | 2021.1 | statistik | 4.4.0 |
stats4 | 4.4.0 | stringi | 1.8.4 | stringr | 1.5.1 |
överlevnad | 3.6-4 | swagger | 5.17.14.1 | sys | 3.4.2 |
systemfonts | 1.1.0 | tcltk | 4.4.0 | testthat | 3.2.1.1 |
textshaping | 0.4.0 | tibble | 3.2.1 | tidyr | 1.3.1 |
avmarkera | 1.2.1 | tidyverse | 2.0.0 | timechange | 0.3.0 |
timeDate | 4032.109 | tinytex | 0,52 | verktyg | 4.4.0 |
tzdb | 0.4.0 | urlchecker | 1.0.1 | usethis | 3.0.0 |
utf8 | 1.2.4 | verktyg | 4.4.0 | uuid | 1.2-1 |
V8 | 4.4.2 | vctrs | 0.6.5 | viridisLite | 0.4.2 |
Vroom | 1.6.5 | Waldo | 0.5.2 | morrhår | 0.4.1 |
withr | 3.0.1 | xfun | 0,46 | xml2 | 1.3.6 |
xopen | 1.0.1 | xtable | 1.8-4 | yaml | 2.3.10 |
zeallot | 0.1.0 | Zip | 2.3.1 |
Installerade Java- och Scala-bibliotek (Scala 2.12-klusterversion)
Grupp-ID | Artefakt-ID | Version |
---|---|---|
antlr | antlr | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudformation | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudfront | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.12.638 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.12.638 |
com.amazonaws | aws-java-sdk-codedeploy | 1.12.638 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.12.638 |
com.amazonaws | aws-java-sdk-cognitosync | 1.12.638 |
com.amazonaws | aws-java-sdk-config | 1.12.638 |
com.amazonaws | aws-java-sdk-core | 1.12.638 |
com.amazonaws | aws-java-sdk-datapipeline | 1.12.638 |
com.amazonaws | aws-java-sdk-directconnect | 1.12.638 |
com.amazonaws | aws-java-sdk-directory | 1.12.638 |
com.amazonaws | aws-java-sdk-dynamodb | 1.12.638 |
com.amazonaws | aws-java-sdk-ec2 | 1.12.638 |
com.amazonaws | aws-java-sdk-ecs | 1.12.638 |
com.amazonaws | aws-java-sdk-efs | 1.12.638 |
com.amazonaws | aws-java-sdk-elasticache | 1.12.638 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.12.638 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.12.638 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.12.638 |
com.amazonaws | aws-java-sdk-emr | 1.12.638 |
com.amazonaws | aws-java-sdk-glacier | 1.12.638 |
com.amazonaws | aws-java-sdk-glue | 1.12.638 |
com.amazonaws | aws-java-sdk-iam | 1.12.638 |
com.amazonaws | aws-java-sdk-importexport | 1.12.638 |
com.amazonaws | aws-java-sdk-kinesis | 1.12.638 |
com.amazonaws | aws-java-sdk-kms | 1.12.638 |
com.amazonaws | aws-java-sdk-lambda | 1.12.638 |
com.amazonaws | aws-java-sdk-logs | 1.12.638 |
com.amazonaws | aws-java-sdk-machinelearning | 1.12.638 |
com.amazonaws | aws-java-sdk-opsworks | 1.12.638 |
com.amazonaws | aws-java-sdk-rds | 1.12.638 |
com.amazonaws | aws-java-sdk-redshift | 1.12.638 |
com.amazonaws | aws-java-sdk-route53 | 1.12.638 |
com.amazonaws | aws-java-sdk-s3 | 1.12.638 |
com.amazonaws | aws-java-sdk-ses | 1.12.638 |
com.amazonaws | aws-java-sdk-simpledb | 1.12.638 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.12.638 |
com.amazonaws | aws-java-sdk-sns | 1.12.638 |
com.amazonaws | aws-java-sdk-sqs | 1.12.638 |
com.amazonaws | aws-java-sdk-ssm | 1.12.638 |
com.amazonaws | aws-java-sdk-storagegateway | 1.12.638 |
com.amazonaws | aws-java-sdk-sts | 1.12.638 |
com.amazonaws | aws-java-sdk-support | 1.12.638 |
com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
com.amazonaws | aws-java-sdk-workspaces | 1.12.638 |
com.amazonaws | jmespath-java | 1.12.638 |
com.clearspring.analytics | ström | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | databricks-sdk-java | 0.27.0 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo-skuggad | 4.0.2 |
com.esotericsoftware | minlog | 1.3.0 |
com.fasterxml | klasskamrat | 1.3.4 |
com.fasterxml.jackson.core | jackson-anteckningar | 2.15.2 |
com.fasterxml.jackson.core | jackson-core | 2.15.2 |
com.fasterxml.jackson.core | jackson-databind | 2.15.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.15.2 |
com.fasterxml.jackson.dataformat | jackson-dataformat-yaml | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.15.2 |
com.fasterxml.jackson.datatype | jackson-datatype-jsr310 | 2.16.0 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.15.2 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.15.2 |
com.github.ben-manes.koffein | koffein | 2.9.3 |
com.github.fommil | jniloader | 1,1 |
com.github.fommil.netlib | native_ref-java | 1,1 |
com.github.fommil.netlib | native_ref-java | 1.1-natives |
com.github.fommil.netlib | native_system-java | 1,1 |
com.github.fommil.netlib | native_system-java | 1.1-natives |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64 | 1.1-natives |
com.github.fommil.netlib | netlib-native_system-linux-x86_64 | 1.1-natives |
com.github.luben | zstd-jni | 1.5.5-4 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.10.1 |
com.google.crypto.tink | Tingeling | 1.9.0 |
com.google.errorprone | error_prone_annotations | 2.10.0 |
com.google.flatbuffers | flatbuffers-java | 23.5.26 |
com.google.guava | guava | 15.0 |
com.google.protobuf | protobuf-java | 3.25.1 |
com.helger | profilerare | 1.1.1 |
com.ibm.icu | icu4j | 75.1 |
com.jcraft | jsch | 0.1.55 |
com.jolbox | bonecp | 0.8.0.RELEASE |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssql-jdbc | 11.2.2.jre8 |
com.ning | compress-lzf | 1.1.2 |
com.sun.mail | javax.mail | 1.5.2 |
com.sun.xml.bind | jaxb-core | 2.2.11 |
com.sun.xml.bind | jaxb-impl | 2.2.11 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | chill-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.4.3 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.uber | h3 | 3.7.3 |
com.univocity | univocity-parsers | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.5.0 |
commons-codec | commons-codec | 1.16.0 |
commons-collections | commons-collections | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.5 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.13.0 |
commons-lang | commons-lang | 2,6 |
commons-logging | commons-logging | 1.1.3 |
commons-pool | commons-pool | 1.5.4 |
dev.ludovic.netlib | arpack | 3.0.3 |
dev.ludovic.netlib | Blas | 3.0.3 |
dev.ludovic.netlib | lapack | 3.0.3 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | aircompressor | 0.27 |
io.delta | delta-sharing-client_2.12 | 1.2.0 |
io.dropwizard.metrics | metrics-annotation | 4.2.19 |
io.dropwizard.metrics | metrics-core | 4.2.19 |
io.dropwizard.metrics | metrics-graphite | 4.2.19 |
io.dropwizard.metrics | metrics-healthchecks | 4.2.19 |
io.dropwizard.metrics | metrics-jetty9 | 4.2.19 |
io.dropwizard.metrics | metrics-jmx | 4.2.19 |
io.dropwizard.metrics | metrics-json | 4.2.19 |
io.dropwizard.metrics | metrics-jvm | 4.2.19 |
io.dropwizard.metrics | metrics-servlets | 4.2.19 |
io.netty | netty-all | 4.1.108.Final |
io.netty | netty-buffert | 4.1.108.Final |
io.netty | netty-codec | 4.1.108.Final |
io.netty | netty-codec-http | 4.1.108.Final |
io.netty | netty-codec-http2 | 4.1.108.Final |
io.netty | netty-codec-socks | 4.1.108.Final |
io.netty | netty-common | 4.1.108.Final |
io.netty | netty-handler | 4.1.108.Final |
io.netty | netty-handler-proxy | 4.1.108.Final |
io.netty | netty-resolver | 4.1.108.Final |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-linux-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-aarch_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-osx-x86_64 |
io.netty | netty-tcnative-boringssl-static | 2.0.61.Final-windows-x86_64 |
io.netty | netty-tcnative-classes | 2.0.61.Final |
io.netty | netty-transport | 4.1.108.Final |
io.netty | netty-transport-classes-epoll | 4.1.108.Final |
io.netty | netty-transport-classes-kqueue | 4.1.108.Final |
io.netty | netty-transport-native-epoll | 4.1.108.Final |
io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-aarch_64 |
io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-riscv64 |
io.netty | netty-transport-native-epoll | 4.1.108.Final-linux-x86_64 |
io.netty | netty-transport-native-kqueue | 4.1.108.Final-osx-aarch_64 |
io.netty | netty-transport-native-kqueue | 4.1.108.Final-osx-x86_64 |
io.netty | netty-transport-native-unix-common | 4.1.108.Final |
io.prometheus | simpleclient | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | samlare | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | aktivering | 1.1.1 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1,1 |
javax.transaction | transaction-api | 1,1 |
javax.xml.bind | jaxb-api | 2.2.11 |
javolution | javolution | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.12.1 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | ättikslag | 1.3 |
net.sf.jpam | jpam | 1,1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.sourceforge.f2j | arpack_combined_all | 0,1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | antlr-runtime | 3.5.2 |
org.antlr | antlr4-runtime | 4.9.3 |
org.antlr | stringtemplate | 3.2.1 |
org.apache.ant | Ant | 1.10.11 |
org.apache.ant | ant-jsch | 1.10.11 |
org.apache.ant | ant-launcher | 1.10.11 |
org.apache.arrow | pilformat | 15.0.0 |
org.apache.arrow | arrow-memory-core | 15.0.0 |
org.apache.arrow | arrow-memory-netty | 15.0.0 |
org.apache.arrow | pilvektor | 15.0.0 |
org.apache.avro | avro | 1.11.3 |
org.apache.avro | avro-ipc | 1.11.3 |
org.apache.avro | avro-mapred | 1.11.3 |
org.apache.commons | commons-collections4 | 4.4 |
org.apache.commons | commons-compress | 1.23.0 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.6.1 |
org.apache.commons | commons-text | 1.10.0 |
org.apache.curator | curator-client | 2.13.0 |
org.apache.curator | curator-framework | 2.13.0 |
org.apache.curator | curator-recept | 2.13.0 |
org.apache.datasketches | datasketches-java | 3.1.0 |
org.apache.datasketches | datasketches-memory | 2.0.0 |
org.apache.derby | Derby | 10.14.2.0 |
org.apache.hadoop | hadoop-client-runtime | 3.3.6 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | hive-llap-client | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.8.1 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.httpcomponents | httpclient | 4.5.14 |
org.apache.httpcomponents | httpcore | 4.4.16 |
org.apache.ivy | murgröna | 2.5.2 |
org.apache.logging.log4j | log4j-1.2-api | 2.22.1 |
org.apache.logging.log4j | log4j-api | 2.22.1 |
org.apache.logging.log4j | log4j-core | 2.22.1 |
org.apache.logging.log4j | log4j-layout-template-json | 2.22.1 |
org.apache.logging.log4j | log4j-slf4j2-impl | 2.22.1 |
org.apache.orc | orc-core | 1.9.2-shaded-protobuf |
org.apache.orc | orc-mapreduce | 1.9.2-shaded-protobuf |
org.apache.orc | orc-shims | 1.9.2 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.ws.xmlschema | xmlschema-core | 2.3.0 |
org.apache.xbean | xbean-asm9-shaded | 4.23 |
org.apache.yetus | åhörarkommentarer | 0.13.0 |
org.apache.zookeeper | zookeeper | 3.9.2 |
org.apache.zookeeper | zookeeper-jute | 3.9.2 |
org.checkerframework | checker-qual | 3.31.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
org.codehaus.janino | commons-compiler | 3.0.16 |
org.codehaus.janino | janino | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.collections | eclipse-samlingar | 11.1.0 |
org.eclipse.collections | eclipse-collections-api | 11.1.0 |
org.eclipse.jetty | jetty-client | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-fortsättning | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-http | 9.4.52.v20230823 |
org.eclipse.jetty | brygga-io | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-jndi | 9.4.52.v20230823 |
org.eclipse.jetty | brygga plus | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-proxy | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-security | 9.4.52.v20230823 |
org.eclipse.jetty | brygga-server | 9.4.52.v20230823 |
org.eclipse.jetty | brygga-servlet | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-servlets | 9.4.52.v20230823 |
org.eclipse.jetty | brygga-util | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-util-ajax | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-webapp | 9.4.52.v20230823 |
org.eclipse.jetty | jetty-xml | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-api | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-client | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-common | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-server | 9.4.52.v20230823 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.52.v20230823 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | hk2-locator | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jersey.containers | jersey-container-servlet | 2.40 |
org.glassfish.jersey.containers | jersey-container-servlet-core | 2.40 |
org.glassfish.jersey.core | jersey-client | 2.40 |
org.glassfish.jersey.core | jersey-common | 2.40 |
org.glassfish.jersey.core | jersey-server | 2.40 |
org.glassfish.jersey.inject | jersey-hk2 | 2.40 |
org.hibernate.validator | vilolägesverifierare | 6.1.7.Final |
org.ini4j | ini4j | 0.5.4 |
org.javassist | javassist | 3.29.2-GA |
org.jboss.logging | jboss-logging | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | Anteckningar | 17.0.0 |
org.joda | joda-convert | 1,7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.8.0 |
org.mlflow | mlflow-spark_2.12 | 2.9.1 |
org.objenesis | objenesis | 2.5.1 |
org.postgresql | postgresql | 42.6.1 |
org.roaringbitmap | RoaringBitmap | 0.9.45-databricks |
org.roaringbitmap | Shims | 0.9.45-databricks |
org.rocksdb | rocksdbjni | 9.2.1 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.15 |
org.scala-lang | scala-library_2.12 | 2.12.15 |
org.scala-lang | scala-reflect_2.12 | 2.12.15 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.11.0 |
org.scala-lang.modules | scala-java8-compat_2.12 | 0.9.1 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | test-interface | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.2.16 |
org.scalanlp | breeze-macros_2.12 | 2.1.0 |
org.scalanlp | breeze_2.12 | 2.1.0 |
org.scalatest | scalatest-kompatibel | 3.2.16 |
org.scalatest | scalatest-core_2.12 | 3.2.16 |
org.scalatest | scalatest-diagrams_2.12 | 3.2.16 |
org.scalatest | scalatest-featurespec_2.12 | 3.2.16 |
org.scalatest | scalatest-flatspec_2.12 | 3.2.16 |
org.scalatest | scalatest-freespec_2.12 | 3.2.16 |
org.scalatest | scalatest-funspec_2.12 | 3.2.16 |
org.scalatest | scalatest-funsuite_2.12 | 3.2.16 |
org.scalatest | scalatest-matchers-core_2.12 | 3.2.16 |
org.scalatest | scalatest-mustmatchers_2.12 | 3.2.16 |
org.scalatest | scalatest-propspec_2.12 | 3.2.16 |
org.scalatest | scalatest-refspec_2.12 | 3.2.16 |
org.scalatest | scalatest-shouldmatchers_2.12 | 3.2.16 |
org.scalatest | scalatest-wordspec_2.12 | 3.2.16 |
org.scalatest | scalatest_2.12 | 3.2.16 |
org.slf4j | jcl-over-slf4j | 2.0.7 |
org.slf4j | jul-to-slf4j | 2.0.7 |
org.slf4j | slf4j-api | 2.0.7 |
org.slf4j | slf4j-simple | 1.7.25 |
org.threeten | threeten-extra | 1.7.1 |
org.tukaani | xz | 1,9 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | spire-macros_2.12 | 0.17.0 |
org.typelevel | spire-platform_2.12 | 0.17.0 |
org.typelevel | spire-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.1.3.Final |
org.xerial | sqlite-jdbc | 3.42.0.0 |
org.xerial.snappy | snappy-java | 1.1.10.3 |
org.yaml | snakeyaml | 2.0 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.cryptools | AmazonCorrettoCryptoProvider | 1.6.2-linux-x86_64 |
stax | stax-api | 1.0.1 |