Sdílet prostřednictvím


Databricks Runtime 5.0 (EoS)

Poznámka:

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Historie ukončení podpory. Všechny podporované verze databricks Runtime najdete v poznámkách k verzi Databricks Runtime a kompatibilitu.

Databricks vydala tuto verzi v listopadu 2018.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 5.0, který využívá Apache Spark.

Nové funkce

  • Delta Lake

  • Strukturované streamování

    • Zdroj streamování založený na souborech azure Blob Storage. To může výrazně snížit náklady na výpis při spouštění dotazu strukturovaného streamování na soubory v Úložišti objektů blob v Azure. Místo použití výpisu k vyhledání nových souborů ke zpracování může tento zdroj streamování přímo číst oznámení událostí souboru a najít nové soubory. Viz zdroj souborů Azure Blob Storage se službou Azure Queue Storage (starší verze).
  • Přidání podpory pro TensorBoard pro monitorování úloh hlubokého učení Viz TensorBoard.

Vylepšení

  • Delta Lake
    • OPTIMIZE výkon a stabilita.
      • Příkaz OPTIMIZE potvrdí dávky co nejdříve místo na konci.
      • Snížil se výchozí počet vláken OPTIMIZE paralelně. Jedná se o striktní zvýšení výkonu u velkých tabulek.
      • Urychlit OPTIMIZE zápisy tím, že se při zápisu do dělené tabulky zbytečně seřadí data.
      • Sped up upoutná OPTIMIZE ZORDER BY tím, že to přírůstkové. To znamená, že příkaz teď vyhne přepisování datových souborů, které už byly seřazené podle Z ve stejných sloupcích. Viz Vynechání dat pro Delta Lake.
    • Izolace snímků při dotazování tabulek Delta Jakýkoli dotaz s více odkazy na tabulku Delta (například připojení sebe sama) čte ze stejného snímku tabulky, i když jsou v tabulce souběžné aktualizace.
    • Vylepšená latence dotazů při čtení malých (< 2000 souborů) tabulek Delta ukládáním metadat do mezipaměti na ovladači.
  • Vylepšili jsme výkon logistické regrese knihovny MLlib.
  • Vylepšili jsme výkon algoritmu stromu MLlib.
  • Upgradovali jsme několik knihoven Java a Scala. Viz Nainstalované knihovny Java a Scala (verze clusteru Scala 2.11).
  • Upgradovali jste některé nainstalované knihovny Pythonu:
    • pip: 10.0.1 až 18.0
    • instalační nástroje: 39.2.0 až 40.4.1
    • tornado: 5.0.2 až 5.1.1
  • Upgradovali jsme několik nainstalovaných knihoven R. Viz nainstalované knihovny jazyka R.

Opravy chyb

  • Delta Lake
    • Konfigurace nastavené v souboru SQL Conf se teď správně vztahují na operace Delta Lake, které byly poprvé načteny v jiném poznámkovém bloku.
    • Opravili jsme chybu v DELETE příkazu, která nesprávně odstranila řádky, ve kterých se podmínka vyhodnotí jako null.
    • Streamy, které zpracování počáteční dávky (tj. dat v tabulce při spuštění datového proudu trvá déle než dva dny), se už při pokusu o obnovení z kontrolního bodu nezdaří FileNotFoundException .
    • Vyhne se konfliktu časování, ke kterému může dojít NoClassDefError při načítání nové tabulky.
    • Oprava, VACUUM kdy operace může selhat s kontrolním chybou, která hlásí: "Neměl by zde být žádné absolutní cesty k odstranění."
    • Opravili jsme SHOW CREATE TABLE příkaz, který neobsahuje vlastnosti úložiště generované Hivem.
  • Exekutory, které u interních tříd Sparku vyvolávají mnoho NoClassDefFoundError chyb, se teď automaticky restartují, aby se problém vyřešil.

Známé problémy

  • Názvy sloupců zadané v replaceWhere možnosti pro overwrite režim v Delta Lake rozlišují malá a velká písmena, i když je povolená rozlišování velkých a malých písmen (což je výchozí nastavení).
  • Konektor Snowflake pro Databricks Runtime 5.0 je ve verzi Preview.
  • Pokud zrušíte spuštěnou streamovací buňku v poznámkovém bloku připojeném ke clusteru Databricks Runtime 5.0, nebude možné v poznámkovém bloku spustit žádné následné příkazy, pokud nezaškrtnete stav poznámkového bloku nebo restartovat cluster. Alternativní řešení najdete ve znalostní bázi.

Apache Spark

Databricks Runtime 5.0 zahrnuje Apache Spark 2.4.0.

Core a Spark SQL

Poznámka:

Tento článek obsahuje odkazy na termín slave, termín, který Azure Databricks nepoužívá. Až bude tento termín ze softwaru odstraněn, odstraníme ho i z tohoto článku.

Hlavní funkce

  • Režim spouštění bariér: [SPARK-24374] Podporuje režim spouštění bariér v plánovači, aby se lépe integrovali s architekturami hloubkového učení.
  • Podpora Scala 2.12: [SPARK-14220] Přidejte experimentální podporu Scala 2.12. Teď můžete sestavovat Spark pomocí Scala 2.12 a psát aplikace Spark v jazyce Scala 2.12.
  • Funkce vyššího pořadí: [SPARK-23899] Přidejte mnoho nových předdefinovaných funkcí, včetně funkcí s vysokým pořadím, abyste usnadnili práci se složitými datovými typy. Viz předdefinované funkce Apache Sparku.
  • Integrovaný zdroj dat Avro: [SPARK-24768] Vložený balíček Spark-Avro s podporou logického typu, lepším výkonem a použitelností.

Rozhraní API

Výkon a stabilita

  • [SPARK-16406] Řešení odkazů pro velký počet sloupců by mělo být rychlejší.
  • [SPARK-23486] Uložení názvu funkce do mezipaměti z externího katalogu pro lookupFunctions
  • [SPARK-23803] Vyřazení kontejneru podpory
  • [SPARK-24802] Vyloučení pravidla optimalizace
  • [SPARK-4502] Vnořené schéma vyřazování tabulek Parquet
  • [SPARK-24296] Podpora replikace bloků větších než 2 GB
  • [SPARK-24307] Podpora odesílání zpráv přes 2 GB z paměti
  • [SPARK-23243] Náhodné předělování na RDD může vést k nesprávným odpovědím.
  • [SPARK-25181] Omezená velikost fondů hlavních a podřízených vláken blockmanageru, což snižuje režii paměti, když je síť pomalá.

Konektory

  • [SPARK-23972] Aktualizace Parquet z verze 1.8.2 na 1.10.0
  • [SPARK-25419] Vylepšení posunu predikátu Parquet
  • [SPARK-23456] Nativní čtečka ORC je ve výchozím nastavení zapnutá.
  • [SPARK-22279] Použití nativní čtečky ORC ke čtení tabulek Hive serde ve výchozím nastavení
  • [SPARK-21783] Zapnutí funkce push-down filtru ORC ve výchozím nastavení
  • [SPARK-24959] Zrychlení počtu () pro JSON a CSV
  • [SPARK-24244] Analýza jenom požadovaných sloupců do analyzátoru CSV
  • [SPARK-23786] Ověření schématu CSV – názvy sloupců nejsou zaškrtnuté.
  • [SPARK-24423] Dotaz možnosti pro zadání dotazu pro čtení z JDBC
  • [SPARK-22814] Datum a časové razítko podpory ve sloupci oddílu JDBC
  • [SPARK-24771] Aktualizace Avro z verze 1.7.7 na verzi 1.8

PySpark

  • [SPARK-24215] Implementace dychtivých vyhodnocení pro rozhraní DATAFrame API
  • [SPARK-22274] - [SPARK-22239] Uživatelem definované agregační funkce s udf knihovny pandas
  • [SPARK-24396] Přidání strukturovaného streamování foreachWriter pro Python
  • [SPARK-23874] Upgrade Apache Arrow na 0.10.0
  • [SPARK-25004] Přidání limitu paměti spark.executor.pyspark.memory
  • [SPARK-23030] Použití formátu datového proudu šipky k vytváření a shromažďování datových rámců pandas
  • [SPARK-24624] Podpora kombinace uživatelem definovaného uživatelem Pythonu a uživatelem skalární knihovny pandas

Další velmi vhodné změny

Strukturované streamování

Hlavní funkce

  • [SPARK-24565] Zveřejnění výstupních řádků jednotlivých mikrobatch jako datového rámce pomocí foreachBatch (Python, Scala a Java)
  • [SPARK-24396] Přidání rozhraní Python API foreach a ForeachWriter
  • [SPARK-25005] Podpora "kafka.isolation.level" pro čtení pouze potvrzených záznamů z témat Kafka, která jsou napsaná pomocí transakčního producenta.

Další velmi vhodné změny

  • [SPARK-24662] Podpora operátoru LIMIT pro datové proudy v režimu připojení nebo dokončení
  • [SPARK-24763] Odebrání redundantních dat klíče z hodnoty v agregaci streamování
  • [SPARK-24156] Rychlejší generování výsledků výstupu a/nebo vyčištění stavu pomocí stavových operací (mapGroupsWithState, připojení stream-stream, agregace streamování, odstranění duplicitních dat) v případě, že ve vstupním streamu nejsou žádná data.
  • [SPARK-24730] Podpora výběru minimálního nebo maximálního vodoznaku v případě, že v dotazu existuje více vstupních datových proudů
  • [SPARK-25399] Opravili jsme chybu, kdy opakované spouštění vláken z průběžného zpracování pro streamování microbatch vedlo k problému se správností.
  • [SPARK-18057] Upgradovaná verze klienta Kafka z verze 0.10.0.1 na 2.0.0

MLlib

Hlavní funkce

Další velmi vhodné změny

SparkR

GraphX

  • [SPARK-25268] Spuštění parallel Personald PageRank vyvolá výjimku serializace

Zastaralé

  • [SPARK-23451] Vyřazení výpočetního objektu KMeans computeCost
  • [SPARK-25345] Vyřazení rozhraní READImages API z ImageSchema

Změny chování

  • [SPARK-23549] Přetypování na časové razítko při porovnávání časového razítka s datem
  • [SPARK-24324] UDF seskupené mapy pandas by měly přiřazovat sloupce výsledků podle názvu.
  • [SPARK-25088] Výchozí aktualizace serveru Rest Server a aktualizace dokumentace
  • [SPARK-23425] Načtení dat pro cestu k souboru HDFS s využitím zástupných znaků nefunguje správně
  • [SPARK-23173] from_json může vytvořit hodnoty null pro pole, která jsou označená jako nenulová.
  • [SPARK-24966] Implementace pravidel priority pro nastavené operace
  • [SPARK-25708] FUNKCE HAVING bez FUNKCE GROUP BY by měla být globální agregace
  • [SPARK-24341] Správně zpracovat poddotaz IN s více hodnotami
  • [SPARK-19724] Vytvoření spravované tabulky s existujícím výchozím umístěním by mělo vyvolat výjimku.

Známé problémy

  • [SPARK-25793] Chyba načítání modelu v BisectingKMeans
  • [SPARK-25271] CTAS s tabulkami Parquet Hive by měly využívat nativní zdroj parquet
  • [SPARK-24935] Problém s prováděním hive UDAF ze Sparku 2.2 dál

Aktualizace údržby

Viz aktualizace údržby Databricks Runtime 5.0.

Prostředí systému

  • Operační systém: Ubuntu 16.04.5 LTS
  • Java: 1.8.0_162
  • Scala: 2.11.8
  • Python: 2.7.12 pro clustery Python 2 a 3.5.2 pro clustery Python 3.
  • R: R verze 3.4.4 (2018-03-15)
  • Clustery GPU: Nainstalují se následující knihovny NVIDIA GPU:
    • Ovladač Tesla 375.66
    • CUDA 9.0
    • cuDNN 7.0

Poznámka:

I když se Scala 2.12 podporuje v Apache Sparku 2.4, nepodporuje se v Databricks Runtime 5.0.

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
ansi2html 1.1.1 argparse 1.2.1 backports-abc 0.5
boto 2.42.0 boto3 1.4.1 botocore 1.4.70
pivovar2mpl 1.4.1 certifi 2016.2.28 cffi 1.7.0
chardet 2.3.0 colorama 0.3.7 configobj 5.0.6
kryptografie 1.5 cyklista 0.10.0 Cython 0.24.1
dekoratér 4.0.10 docutils 0,14 enum34 1.1.6
et-xmlfile 1.0.1 freetype-py 1.0.2 funcsigs 1.0.2
fusepy 2.0.4 budoucnosti 3.2.0 ggplot 0.6.8
html5lib 0,999 idna 2.1 ipaddress 1.0.16
ipython 2.2.0 ipython-genutils 0.1.0 jdcal 1.2
Jinja2 2.8 jmespath 0.9.0 llvmlite 0.13.0
lxml 3.6.4 MarkupSafe 0.23 matplotlib 1.5.3
mpld3 0,2 msgpack-python 0.4.7 ndg-httpsclient 0.3.3
numba 0.28.1 numpy 1.11.1 openpyxl 2.3.2
pandas 0.19.2 pathlib2 2.1.0 bábovka 0.4.1
pexpect 4.0.1 pickleshare 0.7.4 Polštář 3.3.1
jádro 18.0 dýha 3.9 prompt-toolkit 1.0.7
psycopg2 2.6.2 ptyprocess 0.5.1 py4j 0.10.3
pyarrow 0.8.0 pyasn1 0.1.9 pycparser 2.14
Pygments 2.1.3 PyGObject 3.20.0 pyOpenSSL 16.0.0
pyparsing 2.2.0 pypng 0.0.18 Python 2.7.12
python-dateutil 2.5.3 python-geohash 0.8.5 pytz 2016.6.1
žádosti 2.11.1 s3transfer 0.1.9 scikit-learn 0.18.1
scipy 0.18.1 drhnout 0.32 seaborn 0.7.1
setuptools 40.4.1 simplejson 3.8.2 simples3 1.0
singledispatch 3.4.0.3 Šest 1.10.0 statsmodels 0.6.1
tornádo 5.1.1 vlastnosti 4.3.0 urllib3 1.19.1
virtualenv 15.0.1 wcwidth 0.1.7 kolo 0.31.1
wsgiref 0.1.2

Nainstalované knihovny jazyka R

Knihovna Verze Knihovna Verze Knihovna Verze
abind 1.4-5 assertthat 0.2.0 backporty 1.1.2
base 3.4.4 base64enc 0.1-3 BH 1.66.0-1
bindr 0.1.1 bindrcpp 0.2.2 bitové 1.1-14
bit64 0.9-7 bitops 1.0-6 blob 1.1.1
startování 1.3-20 vařit 1.0-6 koště 0.5.0
volající 3.0.0 car 3.0-2 carData 3.0-1
caret 6.0-80 cellranger 1.1.0 chron 2.3-52
class 7.3-14 Rozhraní příkazového řádku 1.0.0 cluster 2.0.7-1
codetools 0.2-15 barevný prostor 1.3-2 commonmark 1.5
– kompilátor 3.4.4 pastelka 1.3.4 kudrna 3.2
CVST 0.2-2 data.table 1.11.4 Power BI 3.4.4
DBI 1.0.0 ddalpha 1.3.4 DEoptimR 1.0-8
Desc 1.2.0 devtools 1.13.6 trávit 0.6.16
dimRed 0.1.0 doMC 1.3.5 dplyr 0.7.6
DRR 0.0.3 fanynky 0.3.0 forcats 0.3.0
foreach 1.4.4 zahraniční 0.8-70 Gbm 2.1.3
geometrie 0.3-6 ggplot2 3.0.0 git2r 0.23.0
glmnet 2.0-16 lepidlo 1.3.0 Gower 0.1.2
Grafika 3.4.4 grDevices 3.4.4 mřížka 3.4.4
gsubfn 0,7 gtable 0.2.0 h2o 3.20.0.2
útočiště 1.1.2 Hms 0.4.2 httr 1.3.1
hwriter 1.3.2 hwriterPlus 1.0-3 ipred 0.9-7
Iterátory 1.0.10 jsonlite 1.5 kernlab 0.9-27
KernSmooth 2.23-15 značení 0.3 mříž 0.20-35
láva 1.6.3 lazyeval 0.2.1 menší 0.3.4
lme4 1.1-18-1 lubridate 1.7.4 magie 1.5-8
magrittr 1.5 mapproj 1.2.6 mapy 3.3.0
maptools 0.9-3 MŠE 7.3-50 Matice 1.2-14
Maticové modely 0.4-1 memoise 1.1.0 metody 3.4.4
mgcv 1.8-24 mim 0.5 minqa 1.2.4
ModelMetrics 1.2.0 munsell 0.5.0 mvtnorm 1.0-8
nlme 3.1-137 nloptr 1.0.4 nnet 7.3-12
numDeriv 2016.8-1 openssl 1.0.2 openxlsx 4.1.0
parallel 3.4.4 pbkrtest 0.4-7 pilíř 1.3.0
pkgbuild 1.0.0 pkgconfig 2.0.2 pkgKitten 0.1.4
pkgload 1.0.0 plogr 0.2.0 Pls 2.7-0
plyr 1.8.4 chválit 1.0.0 prettyunits 1.0.2
pROC 1.12.1 processx 3.2.0 prodlim 2018.04.18
proto 1.0.0 PS 1.1.0 purrr 0.2.5
quantreg 5,36 R.methodsS3 1.7.1 R.oo 1.22.0
R.utils 2.7.0 R6 2.2.2 randomForest 4.6-14
RColorBrewer 1.1-2 Rcpp 0.12.18 RcppEigen 0.3.3.4.0
RcppRoll 0.3.0 RCurl 1.95-4.11 readr 1.1.1
readxl 1.1.0 recepty 0.1.3 odvetný zápas 1.0.1
reshape2 1.4.3 Rio 0.5.10 rlang 0.2.2
robustbase 0.93-2 RODBC 1.3-15 roxygen2 6.1.0
rpart 4.1-13 rprojroot 1.3-2 Rserve 1.7-3
RSQLite 2.1.1 rstudioapi 0,7 váhy 1.0.0
sfsmisc 1.1-2 Sp 1.3-1 SparkR 2.4.0
Řídký čas 1.77 prostorový 7.3-11 spline křivky 3.4.4
sqldf 0.4-11 ČTVEREC 2017.10-1 statmod 1.4.30
statistické údaje 3.4.4 Statistiky 4 3.4.4 stringi 1.2.4
stringr 1.3.1 přežití 2.42-6 tcltk 3.4.4
TeachingDemos 2.10 testthat 2.0.0 tibble 1.4.2
tidyr 0.8.1 tidyselect 0.2.4 timeDate 3043.102
tools 3.4.4 utf8 1.1.4 utils 3.4.4
viridisLite 0.3.0 vous 0.3-2 withr 2.1.2
xml2 1.2.0 zip 1.0.0

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.11)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.8.10
com.amazonaws automatické škálování aws-java-sdk 1.11.313
com.amazonaws aws-java-sdk-cloudformation 1.11.313
com.amazonaws aws-java-sdk-cloudfront 1.11.313
com.amazonaws aws-java-sdk-cloudhsm 1.11.313
com.amazonaws aws-java-sdk-cloudsearch 1.11.313
com.amazonaws aws-java-sdk-cloudtrail 1.11.313
com.amazonaws aws-java-sdk-cloudwatch 1.11.313
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.313
com.amazonaws aws-java-sdk-codedeploy 1.11.313
com.amazonaws aws-java-sdk-cognitoidentity 1.11.313
com.amazonaws aws-java-sdk-cognitosync 1.11.313
com.amazonaws aws-java-sdk-config 1.11.313
com.amazonaws aws-java-sdk-core 1.11.313
com.amazonaws aws-java-sdk-datapipeline 1.11.313
com.amazonaws aws-java-sdk-directconnect 1.11.313
com.amazonaws aws-java-sdk-directory 1.11.313
com.amazonaws aws-java-sdk-dynamodb 1.11.313
com.amazonaws aws-java-sdk-ec2 1.11.313
com.amazonaws aws-java-sdk-ecs 1.11.313
com.amazonaws aws-java-sdk-efs 1.11.313
com.amazonaws aws-java-sdk-elasticache 1.11.313
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.313
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.313
com.amazonaws aws-java-sdk-elastictranscoder 1.11.313
com.amazonaws aws-java-sdk-emr 1.11.313
com.amazonaws aws-java-sdk-glacier 1.11.313
com.amazonaws aws-java-sdk-iam 1.11.313
com.amazonaws aws-java-sdk-importexport 1.11.313
com.amazonaws aws-java-sdk-kinesis 1.11.313
com.amazonaws aws-java-sdk-kms 1.11.313
com.amazonaws aws-java-sdk-lambda 1.11.313
com.amazonaws aws-java-sdk-logs 1.11.313
com.amazonaws aws-java-sdk-machinelearning 1.11.313
com.amazonaws aws-java-sdk-opsworks 1.11.313
com.amazonaws aws-java-sdk-rds 1.11.313
com.amazonaws aws-java-sdk-redshift 1.11.313
com.amazonaws aws-java-sdk-route53 1.11.313
com.amazonaws aws-java-sdk-s3 1.11.313
com.amazonaws aws-java-sdk-ses 1.11.313
com.amazonaws aws-java-sdk-simpledb 1.11.313
com.amazonaws aws-java-sdk-simpleworkflow 1.11.313
com.amazonaws aws-java-sdk-sns 1.11.313
com.amazonaws aws-java-sdk-sqs 1.11.313
com.amazonaws aws-java-sdk-ssm 1.11.313
com.amazonaws aws-java-sdk-storagegateway 1.11.313
com.amazonaws aws-java-sdk-sts 1.11.313
com.amazonaws podpora aws-java-sdk-support 1.11.313
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.313
com.amazonaws jmespath-java 1.11.313
com.carrotsearch hppc 0.7.2
com.chuusai shapeless_2.11 2.3.2
com.clearspring.analytics datový proud 2.7.0
com.databricks Rserve 1.8-3
com.databricks dbml-local_2.11 0.5.0-db7-spark2.4
com.databricks dbml-local_2.11-tests 0.5.0-db7-spark2.4
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.11 0.4.15-9
com.databricks.scalapb scalapb-runtime_2.11 0.4.15-9
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml spolužák 1.0.0
com.fasterxml.jackson.core jackson-annotations 2.6.7
com.fasterxml.jackson.core jackson-core 2.6.7
com.fasterxml.jackson.core jackson-databind 2.6.7.1
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.6.7
com.fasterxml.jackson.datatype jackson-datatype-joda 2.6.7
com.fasterxml.jackson.module jackson-module-paranamer 2.6.7
com.fasterxml.jackson.module jackson-module-scala_2.11 2.6.7.1
com.github.fommil jniloader 1,1
com.github.fommil.netlib core 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib nativní native_ref javy 1,1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib nativní native_system javy 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.luben zstd-jni 1.3.2-2
com.github.rwl jtransforms 2.4.0
com.google.code.findbugs jsr305 2.0.1
com.google.code.gson gson 2.2.4
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.googlecode.javaewah JavaEWAH 0.3.2
com.h2database h2 1.3.174
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.mchange c3p0 0.9.5.1
com.mchange mchange-commons-java 0.2.10
com.microsoft.azure azure-data-lake-store-sdk 2.2.8
com.microsoft.sqlserver mssql-jdbc 6.2.2.jre8
com.ning compress-lzf 1.0.3
com.sun.mail javax.mail 1.5.2
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.11 0.3
com.twitter chill-java 0.9.3
com.twitter chill_2.11 0.9.3
com.twitter parquet-hadoop-bundle 1.6.0
com.twitter util-app_2.11 6.23.0
com.twitter util-core_2.11 6.23.0
com.twitter util-jvm_2.11 6.23.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging-api_2.11 2.1.2
com.typesafe.scala-logging scala-logging-slf4j_2.11 2.1.2
com.univocity univocity-parsers 2.7.3
com.vlkan flatbuffers 1.2.0-3f79e055
com.zaxxer HikariCP 3.1.0
commons-beanutils commons-beanutils 1.7.0
commons-beanutils commons-beanutils-core 1.8.0
commons-cli commons-cli 1.2
commons-codec commons-codec 1,10
commons-collections commons-collections 3.2.2
commons-configuration commons-configuration 1.6
commons-dbcp commons-dbcp 1.4
commons-digester commons-digester 1.8
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2,4
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
info.ganglia.gmetric4j gmetric4j 1.0.7
io.airlift aircompressor 0.10
io.dropwizard.metrics metriky – jádro 3.1.5
io.dropwizard.metrics metrics-ganglia 3.1.5
io.dropwizard.metrics metrics-graphite 3.1.5
io.dropwizard.metrics metriky – kontroly stavu 3.1.5
io.dropwizard.metrics metrics-jetty9 3.1.5
io.dropwizard.metrics metrics-json 3.1.5
io.dropwizard.metrics metrics-jvm 3.1.5
io.dropwizard.metrics metrics-log4j 3.1.5
io.dropwizard.metrics metriky – servlety 3.1.5
io.netty netty 3.9.9.Final
io.netty netty-all 4.1.17.Final
io.prometheus simpleclient 0.0.16
io.prometheus simpleclient_common 0.0.16
io.prometheus simpleclient_dropwizard 0.0.16
io.prometheus simpleclient_servlet 0.0.16
io.prometheus.jmx sběratel 0,7
javax.activation aktivace 1.1.1
javax.annotation javax.annotation-api 1.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.servlet javax.servlet-api 3.1.0
javax.servlet.jsp jsp-api 2.1
javax.transaction jta 1,1
javax.validation validation-api 1.1.0.Final
javax.ws.rs javax.ws.rs-api 2.0.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.11
joda-time joda-time 2.9.3
log4j apache-log4j-extra 1.2.17
log4j log4j 1.2.17
net.hydromatic eigenbase-properties 1.1.5
net.razorvine pyrolit 4.13
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-jdbc 3.6.3
net.snowflake spark-snowflake_2.11 2.4.1
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt oncrpc 1.0.7
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.4
org.antlr antlr4-runtime 4.7
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow arrow-format 0.10.0
org.apache.arrow šipka – paměť 0.10.0
org.apache.arrow arrow-vector 0.10.0
org.apache.avro avro 1.8.2
org.apache.avro avro-ipc 1.8.2
org.apache.avro avro-mapred-hadoop2 1.8.2
org.apache.calcite calcite-avatica 1.2.0-inkubační
org.apache.calcite kalcite-core 1.2.0-inkubační
org.apache.calcite calcite-linq4j 1.2.0-inkubační
org.apache.commons commons-compress 1.8.1
org.apache.commons commons-crypto 1.0.0
org.apache.commons commons-lang3 3.5
org.apache.commons commons-math3 3.4.1
org.apache.kurátor kurátor-client 2.7.1
org.apache.kurátor kurátor-framework 2.7.1
org.apache.kurátor kurátor-recepty 2.7.1
org.apache.derby derby 10.12.1.1
org.apache.directory.api api-asn1-api 1.0.0-M20
org.apache.directory.api api-util 1.0.0-M20
org.apache.directory.server apacheds-i18n 2.0.0-M15
org.apache.directory.server apacheds-kerberos-codec 2.0.0-M15
org.apache.hadoop hadoop-annotations 2.7.3
org.apache.hadoop hadoop-auth 2.7.3
org.apache.hadoop hadoop-client 2.7.3
org.apache.hadoop hadoop-common 2.7.3
org.apache.hadoop hadoop-hdfs 2.7.3
org.apache.hadoop hadoop-mapreduce-client-app 2.7.3
org.apache.hadoop hadoop-mapreduce-client-common 2.7.3
org.apache.hadoop hadoop-mapreduce-client-core 2.7.3
org.apache.hadoop hadoop-mapreduce-client-jobclient 2.7.3
org.apache.hadoop hadoop-mapreduce-client-shuffle 2.7.3
org.apache.hadoop hadoop-yarn-api 2.7.3
org.apache.hadoop hadoop-yarn-client 2.7.3
org.apache.hadoop hadoop-yarn-common 2.7.3
org.apache.hadoop hadoop-yarn-server-common 2.7.3
org.apache.htrace htrace-core 3.1.0-inkubační
org.apache.httpcomponents httpclient 4.5.4
org.apache.httpcomponents httpcore 4.4.8
org.apache.ivy břečťan 2.4.0
org.apache.orc orc-core-nohive 1.5.2
org.apache.orc orc-mapreduce-nohive 1.5.2
org.apache.orc orc-shims 1.5.2
org.apache.parquet parquet-column 1.10.1-Databricks2
org.apache.parquet parquet-common 1.10.1-Databricks2
org.apache.parquet kódování parquet 1.10.1-Databricks2
org.apache.parquet parquet-format 2.4.0
org.apache.parquet parquet-hadoop 1.10.1-Databricks2
org.apache.parquet parquet-jackson 1.10.1-Databricks2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.9.3
org.apache.xbean xbean-asm6-shaded 4.8
org.apache.zookeeper zookeeper 3.4.6
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-jaxrs 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.jackson jackson-xc 1.9.13
org.codehaus.janino commons-compiler 3.0.9
org.codehaus.janino Janino 3.0.9
org.datanucleus datanucleus-api-jdo 3.2.6
org.datanucleus datanucleus-core 3.2.10
org.datanucleus datanucleus-rdbms 3.2.9
org.eclipse.jetty jetty-client 9.3.20.v20170531
org.eclipse.jetty pokračování jetty 9.3.20.v20170531
org.eclipse.jetty jetty-http 9.3.20.v20170531
org.eclipse.jetty jetty-io 9.3.20.v20170531
org.eclipse.jetty jetty-jndi 9.3.20.v20170531
org.eclipse.jetty jetty-plus 9.3.20.v20170531
org.eclipse.jetty jetty-proxy 9.3.20.v20170531
org.eclipse.jetty jetty-security 9.3.20.v20170531
org.eclipse.jetty jetty-server 9.3.20.v20170531
org.eclipse.jetty jetty-servlet 9.3.20.v20170531
org.eclipse.jetty jetty-servlets 9.3.20.v20170531
org.eclipse.jetty jetty-util 9.3.20.v20170531
org.eclipse.jetty jetty-webapp 9.3.20.v20170531
org.eclipse.jetty jetty-xml 9.3.20.v20170531
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.4.0-b34
org.glassfish.hk2 hk2-locator 2.4.0-b34
org.glassfish.hk2 hk2-utils 2.4.0-b34
org.glassfish.hk2 osgi-resource-locator 1.0.1
org.glassfish.hk2.external aopalliance-repackaged 2.4.0-b34
org.glassfish.hk2.external javax.inject 2.4.0-b34
org.glassfish.jersey.bundles.repackaged jersey-guava 2.22.2
org.glassfish.jersey.containers jersey-container-servlet 2.22.2
org.glassfish.jersey.containers jersey-container-servlet-core 2.22.2
org.glassfish.jersey.core jersey-client 2.22.2
org.glassfish.jersey.core žerzejové společné 2.22.2
org.glassfish.jersey.core jersey-server 2.22.2
org.glassfish.jersey.media jersey-media-jaxb 2.22.2
org.hibernate Hibernate-validator 5.1.1.Final
org.iq80.snappy kousavý 0,2
org.javassist Javassist 3.18.1-GA
org.jboss.logging jboss-logging 3.1.3.GA
org.jdbi jdbi 2.63.1
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.11 3.5.3
org.json4s json4s-core_2.11 3.5.3
org.json4s json4s-jackson_2.11 3.5.3
org.json4s json4s-scalap_2.11 3.5.3
org.lz4 lz4-java 1.4.0
org.mariadb.jdbc mariadb-java-client 2.1.2
org.mockito mockito-all 1.9.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.1.4
org.roaringbitmap RoaringBitmap 0.5.11
org.rocksdb rocksdbjni 5.2.1
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.11 2.11.8
org.scala-lang scala-library_2.11 2.11.8
org.scala-lang scala-reflect_2.11 2.11.8
org.scala-lang.modules scala-parser-combinators_2.11 1.0.2
org.scala-lang.modules scala-xml_2.11 1.0.5
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.11 1.12.5
org.scalactic scalactic_2.11 3.0.3
org.scalanlp breeze-macros_2.11 0.13.2
org.scalanlp breeze_2.11 0.13.2
org.scalatest scalatest_2.11 3.0.3
org.slf4j jcl-over-slf4j 1.7.16
org.slf4j jul-to-slf4j 1.7.16
org.slf4j slf4j-api 1.7.16
org.slf4j slf4j-log4j12 1.7.16
org.spark-project.hive hive-beeline 1.2.1.spark2
org.spark-project.hive hive-cli 1.2.1.spark2
org.spark-project.hive hive-exec 1.2.1.spark2
org.spark-project.hive hive-jdbc 1.2.1.spark2
org.spark-project.hive hive-metastore 1.2.1.spark2
org.spark-project.spark nepoužitý 1.0.0
org.spire-math spire-macros_2.11 0.13.0
org.spire-math spire_2.11 0.13.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.tukaani xz 1.5
org.typelevel machinist_2.11 0.6.1
org.typelevel makro-compat_2.11 1.1.1
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.7.1
org.yaml snakeyaml 1.16
oro oro 2.0.8
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1
xmlenc xmlenc 0,52