Dela via

Databricks Runtime 7.3 LTS (EoS)

  • Artikel

Kommentar

Stödet för den här Databricks Runtime-versionen har upphört. Information om slutdatumet för support finns i Historik över supportens slut. Alla Databricks Runtime-versioner som stöds finns i Databricks Runtime-versionsanteckningar och kompatibilitet.

Databricks släppte den här versionen i september 2020. Det förklarades som långsiktigt stöd (LTS) i oktober 2020.

Följande viktig information innehåller information om Databricks Runtime 7.3 LTS, som drivs av Apache Spark 3.0.

Hjälp med migrering från Databricks Runtime 6.x finns i Migreringsguiden för Databricks Runtime 7.x (EoS).

Nya funktioner

Funktioner och förbättringar i Delta Lake

Den här versionen innehåller följande Delta Lake-funktioner och förbättringar:

I detta avsnitt

Prestandaoptimeringar i Delta Lake minskar avsevärt omkostnaderna

Den här versionen möjliggör en samling optimeringar som minskar kostnaderna för Delta Lake-åtgärder från sekunder till tiotals millisekunder. För att aktivera dessa optimeringar måste du uppgradera alla kluster som skriver till och läser deltatabellen till Databricks Runtime 7.3 LTS eller senare.

Mer information och varningar finns i Förbättrade kontrollpunkter för frågor med låg svarstid.

Klonade mått är nu tillgängliga

Mått för klonåtgärder registreras nu och kan visas när du kör DESCRIBE HISTORY. Mer information finns i Granska detaljinformationen för Delta Lake-tabellen med beskriv detaljerat.

Förbättringar av Delta Lake MERGE INTO

  • Sammanslagning stöder nu valfritt antal MATCHED och NOT MATCHED satser.
  • Sammanfoga frågor som ovillkorligt tar bort matchade rader genererar inte längre fel på flera matchningar.

Ange den inledande positionen för Delta Lake Structured Streaming-källan

Delta Lake Structured Streaming-anslutningsappen stöder nu startingVersion och startingTimestamp alternativ för att ange startpunkten för strömningsfrågan utan att bearbeta hela tabellen. Mer information finns i Ange inledande position.

Adaptiv frågekörning

Adaptiv frågekörning (AQE) är ett ramverk för omoptimering av frågor som dynamiskt justerar frågeplaner under körning baserat på insamlad körningsstatistik. AQE är aktiverat som standard i Databricks Runtime 7.3 LTS. Nu kan du prova alla AQE-funktioner. Mer information finns i Körning av anpassningsbara frågor.

Förbättringar

Auto Loader

  • Har nu stöd för Azure Data Lake Storage Gen1 i kataloglistningsläge
  • Om filformatet är text eller binaryFile behöver du inte längre ange schemat. Eftersom de två filformaten har ett fast schema kan Auto Loader automatiskt använda ett fast schema.

Ny kolumnlängdskontroll för Azure Synapse Analytics-anslutningsappen

Nu kan du använda en ny parameter maxbinlength för att styra kolumnlängden för BinaryType kolumner. Den här parametern översätts som VARBINARY(maxbinlength).

Det tidigare (okonfigurerbara) standardvärdet var VARBINARY(MAX), vilket orsakade problem när du skapade tabeller med binära kolumner och standardindexeringsschemat. Mer specifikt skulle det inte gå att skapa tabellen eftersom standardindexet för kolumnlagring inte stöder MAX i strängen och binära kolumner.

Pandas till Spark DataFrame-konvertering förenklad

Om du vill aktivera följande förbättringar anger du Spark-konfigurationen spark.databricks.execution.pandasZeroConfConversion.enabled:

  • createDataFrame(pandas_df) har optimerats på Azure Databricks.
  • En varning visas om konverteringen inte kan utföras effektivt eller inte är möjlig.

Nytt maxResultSize i toPandas() samtal

Med en ny konfigurationsinställning (spark.databricks.driver.localMaxResultSize) kan du styra maxResultSize för ett df.toPandas() anrop. Gränsen ändras tillfälligt till max(spark.driver.maxResultSize, spark.databricks.driver.localMaxResultSize). Standardvärdet för konfigurationsinställningen är den fysiska minnesstorleken dividerad med 4.

En varning visas om resultatstorleken df.toPandas() är större än spark.driver.maxResultSize och mindre än spark.databricks.driver.localMaxResultSize.

Den här konfigurationsinställningen påverkar endast DataFrames som skapats av ett df.toPandas() anrop.

Kommentar

spark.databricks.driver.localMaxResultSize börjar gälla endast när spark.databricks.execution.pandasZeroConfConversion.enabled är sant.

Debuggability av Pandas och PySpark UDF:er

När en Pandas- eller PySpark-UDF misslyckas i en anteckningsbok i Azure Databricks, innehåller felmeddelandet nu vilken kodrad som misslyckades och information om den bakomliggande orsaken.

Biblioteksuppgraderingar

  • Uppgraderade Python-bibliotek:
    • koalas uppgraderade från 1.1.0 till 1.2.0.
    • pyarrow uppgraderad från 0.15.1 till 1.0.1.
  • Uppgraderade flera installerade R-bibliotek. Se Installerade R-bibliotek.
  • OpenJDK 8-versionen ändras från Ubuntu OpenJDK 8 till Zulu OpenJDK 8.

Apache Spark

Databricks Runtime 7.3 LTS innehåller Apache Spark 3.0.1. Den här versionen innehåller alla Spark-korrigeringar och förbättringar som ingår i Databricks Runtime 7.2 (EoS) samt följande ytterligare felkorrigeringar och förbättringar som gjorts i Spark:

  • [SPARK-32302][SPARK-28169] [SQL] Tryck delvis ned disjunktiva predikat genom Join/Partitions
  • [SPARK-32337] [SQL] Visa den första planen i trädsträngen för AQE-plan
  • [SPARK-30662] Lägg tillbaka API-ändringarna för HasBlockSize
  • [SPARK-32620] [SQL] Återställ måttet numPartitions när DPP är aktiverat
  • [SPARK-32646] [SQL] ORC-predikat-pushdown bör fungera med skiftlägesokänslig analys
  • [SPARK-32676] [ML] Åtgärda dubbel cachelagring i KMeans/BiKMeans
  • [SPARK-32092] [ML][PYSPARK] FoldCol-relaterad kod har tagits bort
  • [SPARK-32594] [SQL] Åsidosätt get() och använd Julian days in DaysWritable
  • [SPARK-32608] [SQL] Värdet FÖR DELIMIT-format för skripttransformeringsRAD bör formatera värdet
  • [SPARK-32092] [ML][PYSPARK] Korrigera parametrar som inte kopieras i CrossValidatorModel.copy(), read() och write()
  • [SPARK-32672] [SQL] Åtgärda skadade data i komprimering av boolesk bituppsättning
  • [SPARK-32663] [CORE] Undvik individuell stängning av poolade TransportClients (som måste stängas genom poolen)
  • [SPARK-32621] [SQL]-sökvägen kan orsaka problem vid slutsatsdragning av schema i CSV/JSON-datakällor
  • [SPARK-28863] [SQL] Återanvänd inte den fysiska planen
  • [SPARK-32608] [SQL] Värdet FÖR DELIMIT-format för skripttransformeringsRAD bör formatera värdet
  • [SPARK-28863] [SQL] Introducera AlreadyPlanned för att förhindra omanalys av V1FallbackWriters
  • [SPARK-32451] [R] Stöd för Apache Arrow 1.0.0
  • [SPARK-32652] [SQL] ObjectSerializerPruning misslyckas för RowEncoder
  • [SPARK-32518] [CORE] CoarseGrainedSchedulerBackend.maxNumConcurrentTasks bör överväga alla typer av resurser
  • [SPARK-32559] [SQL] Korrigera trimlogik i UTF8String.toInt/toLong hanterade inte icke-ASCII-tecken korrekt
  • [SPARK-32625] [SQL] Logga felmeddelande när du återgår till tolkläge
  • [SPARK-32543] [R] Ta bort Arrow::as_tibble-användning i SparkR
  • [SPARK-31703] [SQL] Parquet RLE float/double läse felaktigt på stora endianska plattformar
  • [SPARK-32586] [SQL] Åtgärda felmeddelandet NumberFormatException när ansi är aktiverat
  • [SPARK-32456] [SS] Kontrollera Distinct genom att anta att den är aggregerad för strukturerad direktuppspelning
  • [SPARK-32576] [SQL] Stöd för PostgreSQL-typ bpchar och matris av teckentyp
  • [SPARK-32559] [SQL] Korrigera trimlogik i UTF8String.toInt/toLong hanterade inte icke-ASCII-tecken korrekt
  • [SPARK-32560] [SQL] Förbättra undantagsmeddelandet i InsertIntoHiveTable.processInsert
  • [SPARK-32546] [SQL] Hämta tabellnamn direkt från Hive-tabeller
  • [SPARK-32529] [CORE] Korrigering av Historyserver-logggenomsökningen avbröts av ändring av programstatus
  • [SPARK-32003] [CORE] När extern shuffle-tjänst används avregistrerar du utdata för executor vid hämtningsfel efter att kören har förlorats
  • [SPARK-32160] [CORE][PYSPARK] Ändra konfigurationsnamnet för att växla allow/disallow SparkContext i executors
  • [SPARK-32160] [CORE][PYSPARK] Lägg till en konfiguration för att växla tillåt/tillåt inte att skapa SparkContext i köre
  • [SPARK-32083] [SQL] AQE bör inte slå samman partitioner för SinglePartition
  • [SPARK-32509] [SQL] Ignorera oanvänt DPP True-filter i canonicalization
  • [SPARK-32332] [SQL] Stöd för kolumnutbyten
  • [SPARK-32227] Åtgärda regressionsfel i load-spark-env.cmd med Spark 3.0.0
  • [SPARK-32478] [R][SQL] Felmeddelande för att visa schemats matchningsfel i gapply med pilvektorisering
  • [SPARK-32030] [SQL] Stöder obegränsade MATCHED- och NOT MATCHED-satser i MERGE INTO i SQL-parsern
  • [SPARK-32175] [CORE] Åtgärda ordningen mellan initiering för ExecutorPlugin och start av pulsslagstråd
  • [SPARK-32283] [CORE] Kryo bör ha stöd för flera användarregistratorer
  • [SPARK-32424] [SQL] Åtgärda tyst dataändring för tidsstämpelparsning om f spill inträffar
  • [SPARK-32430] [SQL] Utöka SparkSessionExtensions för att mata in regler i förberedelse av AQE-frågesteg
  • [SPARK-32310] [ML][PYSPARK] STANDARDvärdeparitet för ML-params
  • [SPARK-32237] [SQL] Lösa tips i CTE
  • [SPARK-32280][SPARK-32372] [SQL] ResolveReferences.dedupRight bör endast skriva om attribut för överordnade noder i konfliktplanen
  • [SPARK-32364] [SQL] Lägg till toMap för att returnera originalKarta och dokumentation
  • [SPARK-32364] [SQL] Använda CaseInsensitiveMap för DataFrameReader/Writer-alternativ
  • [SPARK-32377] [SQL] CaseInsensitiveMap bör vara deterministisk för addition
  • [SPARK-32365] [SQL] Lägg till ett gränsvillkor för negativt index i regexp_extract
  • [SPARK-32368] [SQL] pathGlobFilter, rekursiveFileLookup och basePath bör respektera skiftlägeskänslighet
  • [SPARK-32344] [SQL] Outvärderbar uttr är inställd på FIRST/LAST ignoreNullsExpr i distinkta aggregeringar
  • [SPARK-32234] [SQL] Spark sql-kommandon misslyckas med att välja orc-tabeller

Underhållsuppdateringar

Se Underhållsuppdateringar för Databricks Runtime 7.3 LTS.

Systemmiljö

  • Operativsystem: Ubuntu 18.04.5 LTS
  • Java: Zulu 8.48.0.53-CA-linux64 (version 1.8.0_265-b11)
  • Scala: 2.12.10
  • Python: 3.7.5
  • R: R version 3.6.3 (2020-02-29)
  • Delta Lake 0.7.0

Installerade Python-bibliotek

Bibliotek Version Bibliotek Version Bibliotek Version
asn1crypto 1.3.0 backcall 0.1.0 boto3 1.12.0
botocore 1.15.0 certifi 2020.6.20 cffi 1.14.0
chardet 3.0.4 kryptografi 2.8 cyklist 0.10.0
Cython 0.29.15 dekoratör 4.4.1 docutils 0.15.2
entrypoints 0,3 idna 2.8 ipykernel 5.1.4
ipython 7.12.0 ipython-genutils 0.2.0 jedi 0.14.1
jmespath 0.10.0 joblib 0.14.1 jupyter-client 5.3.4
jupyter-core 4.6.1 kiwisolver 1.1.0 Koalas 1.2.0
matplotlib 3.1.3 numpy 1.18.1 Pandas 1.0.1
parso 0.5.2 Patsy 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 pip 20.0.2 prompt-toolkit 3.0.3
psycopg2 2.8.4 ptyprocess 0.6.0 pyarrow 1.0.1
pycparser 2,19 Pygments 2.5.2 PyGObject 3.26.1
pyOpenSSL 19.1.0 pyparsing 2.4.6 PySocks 1.7.1
python-apt 1.6.5+ubuntu0.3 python-dateutil 2.8.1 pytz 2019.3
pyzmq 18.1.1 begäranden 2.22.0 s3transfer 0.3.3
scikit-learn 0.22.1 scipy 1.4.1 seaborn 0.10.0
setuptools 45.2.0 sex 1.14.0 ssh-import-id 5.7
statsmodels 0.11.0 tromb 6.0.3 traitlets 4.3.3
obevakade uppgraderingar 0,1 urllib3 1.25.8 virtualenv 16.7.10
wcwidth 0.1.8 hjul 0.34.2

Installerade R-bibliotek

R-bibliotek installeras från Microsoft CRAN-ögonblicksbilden 2020-07-14.

Bibliotek Version Bibliotek Version Bibliotek Version
askpass 1,1 assertthat 0.2.1 backportar 1.1.8
bas 3.6.3 base64enc 0.1-3 BH 1.72.0-3
bit 1.1-15.2 bit64 0.9-7 blob 1.2.1
start 1.3-25 brygga 1.0-6 kvast 0.7.0
anropare 3.4.3 textmarkör 6.0-86 cellranger 1.1.0
Chron 2.3-55 klass 7.3-17 cli 2.0.2
clipr 0.7.0 cluster 2.1.0 codetools 0.2-16
färgområde 1.4-1 commonmark 1,7 kompilator 3.6.3
config 0,3 covr 3.5.0 krita 1.3.4
Överhörning 1.1.0.1 hårlock 4.3 data.table 1.12.8
datauppsättningar 3.6.3 DBI 1.1.0 dbplyr 1.4.4
Desc 1.2.0 devtools 2.3.0 smälta 0.6.25
dplyr 0.8.5 DT 0,14 ellips 0.3.1
evaluate (utvärdera) 0,14 fansi 0.4.1 farver 2.0.3
fastmap 1.0.1 forcats 0.5.0 foreach 1.5.0
främmande 0.8-76 smida 0.2.0 Fs 1.4.2
Generika 0.0.2 ggplot2 3.3.2 Gh 1.1.0
git2r 0.27.1 glmnet 3.0-2 globals 0.12.5
lim 1.4.1 Gower 0.2.2 grafik 3.6.3
grDevices 3.6.3 gitter 3.6.3 gridExtra 2.3
gsubfn 0,7 gtable 0.3.0 hamn 2.3.1
highr 0,8 Hms 0.5.3 htmltools 0.5.0
htmlwidgets 1.5.1 httpuv 1.5.4 httr 1.4.1
hwriter 1.3.2 hwriterPlus 1.0-3 ini 0.3.1
ipred 0.9-9 isoband 0.2.2 Iteratorer 1.0.12
jsonlite 1.7.0 KernSmooth 2.23-17 stickning 1,29
Märkning 0,3 senare 1.1.0.1 Galler 0.20-41
lava 1.6.7 lazyeval 0.2.2 livscykel 0.2.0
lubridate 1.7.9 magrittr 1.5 Markdown 1,1
MASSA 7.3-52 Matris 1.2-18 pmise 1.1.0
metoder 3.6.3 mgcv 1.8-32 MIME 0,9
ModelMetrics 1.2.2.2 modelr 0.1.8 munsell 0.5.0
nlme 3.1-149 nnet 7.3-14 numDeriv 2016.8-1.1
openssl 1.4.2 parallel 3.6.3 pelare 1.4.6
pkgbuild 1.1.0 pkgconfig 2.0.3 pkgload 1.1.0
plogr 0.2.0 plyr 1.8.6 berömma 1.0.0
prettyunits 1.1.1 Proc 1.16.2 processx 3.4.3
prodlim 2019.11.13 Förlopp 1.2.2 Löften 1.1.1
Proto 1.0.0 PS 1.3.3 purrr 0.3.4
r2d3 0.2.3 R6 2.4.1 randomForest 4.6-14
rappdirs 0.3.1 rcmdcheck 1.3.3 RColorBrewer 1.1-2
Rcpp 1.0.5 readr 1.3.1 readxl 1.3.1
recept 0.1.13 Returmatch 1.0.1 rematch2 2.1.2
Fjärrkontroller 2.1.1 reprex 0.3.0 omforma2 1.4.4
Rex 1.2.0 rjson 0.2.20 rlang 0.4.7
rmarkdown 2.3 RODBC 1.3-16 roxygen2 7.1.1
rpart 4.1-15 rprojroot 1.3-2 Rserve 1.8-7
RSQLite 2.2.0 rstudioapi 0,11 rversioner 2.0.2
rvest 0.3.5 våg 1.1.1 väljare 0.4-2
sessioninfo 1.1.1 form 1.4.4 skinande 1.5.0
sourcetools 0.1.7 sparklyr 1.3.1 SparkR 3.0.0
rumslig 7.3-11 Splines 3.6.3 sqldf 0.4-11
SQUAREM 2020.3 statistik 3.6.3 stats4 3.6.3
stringi 1.4.6 stringr 1.4.0 överlevnad 3.1-12
sys 3.3 tcltk 3.6.3 TeachingDemos 2.10
testthat 2.3.2 tibble 3.0.3 tidyr 1.1.0
avmarkera 1.1.0 tidyverse 1.3.0 timeDate 3043.102
tinytex 0,24 verktyg 3.6.3 usethis 1.6.1
utf8 1.1.4 verktyg 3.6.3 uuid 0.1-4
vctrs 0.3.1 viridisLite 0.3.0 morrhår 0,4
withr 2.2.0 xfun 0,15 xml2 1.3.2
xopen 1.0.0 xtable 1.8-4 yaml 2.2.1

Installerade Java- och Scala-bibliotek (Scala 2.12-klusterversion)

Grupp-ID Artefakt-ID Version
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics ström 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-skuggad 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml klasskamrat 1.3.4
com.fasterxml.jackson.core jackson-anteckningar 2.10.0
com.fasterxml.jackson.core jackson-core 2.10.0
com.fasterxml.jackson.core jackson-databind 2.10.0
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.10.0
com.fasterxml.jackson.datatype jackson-datatype-joda 2.10.0
com.fasterxml.jackson.module jackson-module-paranamer 2.10.0
com.fasterxml.jackson.module jackson-module-scala_2.12 2.10.0
com.github.ben-manes.koffein koffein 2.3.4
com.github.fommil jniloader 1,1
com.github.fommil.netlib kärna 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib native_ref-java-natives 1,1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib native_system-java-natives 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.joshelser dropwizard-metrics-hadoop-metrics2-reporter 0.1.2
com.github.luben zstd-jni 1.4.4-3
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.2.4
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger profilerare 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.sqlserver mssql-jdbc 8.2.1.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.9.5
com.twitter chill_2.12 0.9.5
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity univocity-parsers 2.8.3
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.9.4
commons-cli commons-cli 1.2
commons-codec commons-codec 1.10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.4
commons-lang commons-lang 2,6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.10
io.dropwizard.metrics metrics-core 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metrics-servlets 4.1.1
io.netty netty-all 4.1.47.Final
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivering 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.5
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
net.razorvine pyrolit 4.30
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.12.8
net.snowflake spark-snowflake_2.12 2.8.1-spark_3.0
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.7.1
org.antlr stringtemplate 3.2.1
org.apache.ant Ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow pilformat 0.15.1
org.apache.arrow pilminne 0.15.1
org.apache.arrow pilvektor 0.15.1
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.commons commons-compress 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.9
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator curator-client 2.7.1
org.apache.curator curator-framework 2.7.1
org.apache.curator curator-recept 2.7.1
org.apache.derby Derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-anteckningar 2.7.4
org.apache.hadoop hadoop-auth 2.7.4
org.apache.hadoop hadoop-client 2.7.4
org.apache.hadoop hadoop-common 2.7.4
org.apache.hadoop hadoop-hdfs 2.7.4
org.apache.hadoop hadoop-mapreduce-client-app 2.7.4
org.apache.hadoop hadoop-mapreduce-client-common 2.7.4
org.apache.hadoop hadoop-mapreduce-client-core 2.7.4
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.4
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.4
org.apache.hadoop hadoop-yarn-api 2.7.4
org.apache.hadoop hadoop-yarn-client 2.7.4
org.apache.hadoop hadoop-yarn-common 2.7.4
org.apache.hadoop hadoop-yarn-server-common 2.7.4
org.apache.hive hive-beeline 2.3.7
org.apache.hive hive-cli 2.3.7
org.apache.hive hive-common 2.3.7
org.apache.hive hive-exec-core 2.3.7
org.apache.hive hive-jdbc 2.3.7
org.apache.hive hive-llap-client 2.3.7
org.apache.hive hive-llap-common 2.3.7
org.apache.hive hive-metaarkiv 2.3.7
org.apache.hive hive-serde 2.3.7
org.apache.hive hive-shims 2.3.7
org.apache.hive hive-storage-api 2.7.1
org.apache.hive hive-vector-code-gen 2.3.7
org.apache.hive.shims hive-shims-0.23 2.3.7
org.apache.hive.shims hive-shims-common 2.3.7
org.apache.hive.shims hive-shims-scheduler 2.3.7
org.apache.htrace htrace-core 3.1.0-inkubering
org.apache.httpcomponents httpclient 4.5.6
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy murgröna 2.4.0
org.apache.orc orc-core 1.5.10
org.apache.orc orc-mapreduce 1.5.10
org.apache.orc orc-shims 1.5.10
org.apache.parquet parquet-kolumn 1.10.1-databricks6
org.apache.parquet parquet-common 1.10.1-databricks6
org.apache.parquet parquet-kodning 1.10.1-databricks6
org.apache.parquet parquet-format 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-databricks6
org.apache.parquet parquet-jackson 1.10.1-databricks6
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.velocity hastighet 1.5
org.apache.xbean xbean-asm7-shaded 4.15
org.apache.yetus åhörarkommentarer 0.5.0
org.apache.zookeeper zookeeper 3.4.14
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.18.v20190429
org.eclipse.jetty jetty-fortsättning 9.4.18.v20190429
org.eclipse.jetty jetty-http 9.4.18.v20190429
org.eclipse.jetty brygga-io 9.4.18.v20190429
org.eclipse.jetty jetty-jndi 9.4.18.v20190429
org.eclipse.jetty brygga plus 9.4.18.v20190429
org.eclipse.jetty jetty-proxy 9.4.18.v20190429
org.eclipse.jetty jetty-security 9.4.18.v20190429
org.eclipse.jetty brygga-server 9.4.18.v20190429
org.eclipse.jetty brygga-servlet 9.4.18.v20190429
org.eclipse.jetty jetty-servlets 9.4.18.v20190429
org.eclipse.jetty brygga-util 9.4.18.v20190429
org.eclipse.jetty jetty-webapp 9.4.18.v20190429
org.eclipse.jetty jetty-xml 9.4.18.v20190429
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.30
org.glassfish.jersey.containers jersey-container-servlet-core 2.30
org.glassfish.jersey.core jersey-client 2.30
org.glassfish.jersey.core jersey-common 2.30
org.glassfish.jersey.core jersey-server 2.30
org.glassfish.jersey.inject jersey-hk2 2.30
org.glassfish.jersey.media jersey-media-jaxb 2.30
org.hibernate.validator vilolägesverifierare 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.6.6
org.json4s json4s-core_2.12 3.6.6
org.json4s json4s-jackson_2.12 3.6.6
org.json4s json4s-scalap_2.12 3.6.6
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.1.2
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.7.45
org.roaringbitmap Shims 0.7.45
org.rocksdb rocksdbjni 6.2.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.10
org.scala-lang scala-library_2.12 2.12.10
org.scala-lang scala-reflect_2.12 2.12.10
org.scala-lang.modules scala-collection-compat_2.12 2.1.1
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.0
org.scalanlp breeze_2.12 1.0
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark oanvänd 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.5
org.typelevel algebra_2.12 2.0.0-M2
org.typelevel cats-kernel_2.12 2.0.0-M4
org.typelevel machinist_2.12 0.6.8
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0-M1
org.typelevel spire-platform_2.12 0.17.0-M1
org.typelevel spire-util_2.12 0.17.0-M1
org.typelevel spire_2.12 0.17.0-M1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.5
org.yaml snakeyaml 1,24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0,52