Databricks Runtime 5.3 (EoS)
Nota
Il supporto per questa versione di Databricks Runtime è terminato. Per la data di fine del supporto, vedere Cronologia di fine del supporto. Per tutte le versioni supportate di Databricks Runtime, vedere Versioni e compatibilità delle note sulla versione di Databricks Runtime.
Databricks ha rilasciato questa versione nell'aprile 2019.
Le note sulla versione seguenti forniscono informazioni su Databricks Runtime 5.3, basate su Apache Spark.
Nuove funzionalità
Databricks Delta
Disponibilità generale dei viaggi in tempo reale
Il viaggio in tempo differenziale si è laureato a disponibilità generale. Aggiunge la possibilità di eseguire query su uno snapshot di una tabella usando una stringa di timestamp o una versione, usando la sintassi SQL e DataFrameReader le opzioni per le espressioni timestamp.
SELECT count(*) FROM events TIMESTAMP AS OF timestamp_expression
SELECT count(*) FROM events VERSION AS OF version
Il viaggio nel tempo ha molti casi d'uso, tra cui:
- Ricreazione di analisi, report o output ,ad esempio l'output di un modello di Machine Learning, utile per il debug o il controllo, in particolare nei settori regolamentati.
- Scrivere query temporali complesse.
- Correggere gli errori nei dati.
- Fornire l'isolamento dello snapshot per un set di query per tabelle che cambiano rapidamente.
Vedere Usare la cronologia delle tabelle Delta Lake.
Replica di tabelle MySQL nell'anteprima pubblica delta
Trasmettere i dati da una tabella MySQL direttamente a Delta per l'utilizzo downstream nei flussi di lavoro di analisi Spark o di data science. Sfruttando la stessa strategia usata da MySQL per la replica in altre istanze, binlog viene usato per identificare gli aggiornamenti che vengono quindi elaborati e trasmessi a Databricks come indicato di seguito:
- Legge gli eventi di modifica dal log del database.
- Trasmette gli eventi a Databricks.
- Scrive nello stesso ordine in una tabella Delta.
- Mantiene lo stato in caso di disconnessione dall'origine.
Funzionalità di anteprima privata
Questa versione contiene le funzionalità di anteprima privata seguenti per Delta Lake:
- Aggiunta di un comando sperimentale che consente a Presto di eseguire direttamente query sulle tabelle Delta.
- Ottimizzazione automatica ottimizza il layout del file durante le singole operazioni di scrittura in una tabella Delta e impedisce l'accumulo di file di piccole dimensioni nelle tabelle Delta per mantenere prestazioni di query a velocità fulmine. Inoltre, le scritture e gli upsert in tabelle Delta partizionate possono godere di grandi velocità grazie a un shuffle adattivo introdotto nelle scritture.
Se si vuole partecipare a una delle due versioni di anteprima, contattare il team dell'account Databricks.
Cartella DBFS FUSE ottimizzata per carichi di lavoro di Deep Learning
Azure Databricks offre ora un montaggio FUSE ottimizzato. È possibile avere accesso ai dati ad alte prestazioni durante il training e l'inferenza senza applicare script init. I dati archiviati in dbfs:/ml locale e accessibili file:/dbfs/ml in sono ora supportati da questo montaggio FUSE ottimizzato. Vedere Caricare i dati per l’apprendimento automatico e il Deep Learning.
Miglioramenti
Librerie con ambito notebook:
- Supporto per gli extra in
dbutils.library.installPyPI. - Supporto per l'installazione della libreria con ambito notebook per le librerie nel file system di Azure, tra cui
wasbs,adlseabfss. - Messaggi di errore migliorati per le librerie con ambito notebook in destinazioni non supportate. Ad esempio: "Le utilità della libreria non sono disponibili in Databricks Runtime per Machine Learning".
- Supporto per gli extra in
Connettersi ad Azure Data Lake Storage Gen2 (ADLS Gen2) senza dover concedere un ruolo di controllo degli accessi in base al ruolo "Collaboratore ai dati dei BLOB di archiviazione" a livello di account all'entità servizio.
Databricks Advisor include hint aggiuntivi per migliorare le prestazioni delle query:
- Quando sono presenti molti file di piccole dimensioni per partizione:> convertire la tabella in Delta ed eseguire
OPTIMIZE. - Quando è presente un filtro altamente selettivo:> convertire in Delta e usare
ZORDER BY. - Quando i metadati recuperano da Hive diventano un collo di bottiglia:> convertire la tabella in Delta.
- Quando sono presenti molti file di piccole dimensioni per partizione:> convertire la tabella in Delta ed eseguire
Aggiornamento di Ubuntu dalla versione 16.04.5 LTS alla versione 16.04.6 LTS.
Aggiornamento di Scala 2.11 dalla versione 2.11.8 alla versione 2.11.12.
Aggiornamento di alcune librerie Python installate:
- pip: da 18.1 a 19.0.3.
- setuptools: da 40.6.3 a 40.8.0
- ruota: da 0.32.3 a 0.33.1
Aggiornamento di R dalla versione 3.4.4 alla versione 3.5.2.
Aggiornamento di diverse librerie R installate. Vedere Librerie R installate.
Deprecazione
- Il connettore Apache Kafka 0.8 per Structured Streaming non è più supportato. È incluso in Databricks Runtime 5.3, ma verrà rimosso da una versione futura di Databricks Runtime.
- L'esportazione del modello di Machine Learning di Databricks è deprecata e verrà rimossa in Databricks Runtime 6.0. Usare MLeap per importare ed esportare modelli.
- Rimosso
spark.databricks.pyspark.enableExecutorFsPermscome opzione di configurazione.
Correzioni di bug
- Correzione dell'installazione della libreria Python Egg a livello di cluster per i cluster abilitati per gli ACL di tabella.
- Miglioramento dell'annullamento dei comandi Python correggendo la situazione in cui viene chiamato l'annullamento prima dell'esecuzione del comando.
- Correzione di un bug negli ACL di tabella: ora quando si elencano oggetti in un database o in un catalogo, vengono visualizzati solo gli oggetti autorizzati a visualizzare.
Apache Spark
Databricks Runtime 5.3 include Apache Spark 2.4.0. Questa versione include tutte le correzioni e i miglioramenti di Spark inclusi in Databricks Runtime 5.2 (EoS), nonché le correzioni di bug e i miglioramenti aggiuntivi seguenti apportati a Spark:
- [SPARK-27134][SQL] array_distinct funzione non funziona correttamente con colonne contenenti matrice di matrici
- [SPARK-24669][SQL] Invalidare le tabelle nel caso di DROP DATABASE CASCADE
- [SPARK-26572][SQL] Correzione della valutazione dei risultati del codegen aggregato
- [SPARK-27046][DSTREAMS] Rimuovere i riferimenti correlati a SPARK-19185 dalla documentazione
- [SPARK-26449][PYTHON] Aggiungere un metodo di trasformazione all'API DataFrame
- [SPARK-26740][SQL] Leggere le statistiche della colonna timestamp/data scritte da Spark 3.0
- [SPARK-26909][SQL] usare unsafeRow.hashCode() come valore hash in HashAggregate
- [SPARK-26990][SQL] FileIndex: usare i nomi dei campi specificati dall'utente, se possibile
- [SPARK-26851][SQL] Correzione del blocco controllato doppio in CachedRDDBuilder
- [SPARK-26864][SQL] La query può restituire risultati non corretti quando la funzione definita dall'utente Python viene usata come condizione di join semi-sinistra
- [SPARK-26887][SQL][PYTHON] Creare
datetime.datedirettamente anziché creare datetime64 come dati intermedi. - [SPARK-26859][SQL] Correzione del bug dell'indice del writer di campi nel deserializzatore ORC non vettorializzatore
- [SPARK-26864][SQL] La query può restituire risultati non corretti quando la funzione definita dall'utente Python viene usata come condizione di join e la funzione definita dall'utente usa gli attributi di entrambe le gambe del semi join a sinistra
- [SPARK-24360][SPARK-26091][BACKPORT][SQL] Supporto del metastore Hive 3.1
- [SPARK-26873][SQL] Usare un timestamp coerente per compilare ID processo Hadoop.
- [SPARK-26734][STREAMING] Correzione di StackOverflowError con coda di blocchi di grandi dimensioni
- [SPARK-26758][CORE] Gli executor inattive non vengono uccisi dopo il valore spark.dynamiAllocation.executorIdleTimeout
- [SPARK-26751][SQL] Correzione della perdita di memoria quando l'istruzione viene eseguita in background e genera un'eccezione che non è HiveSQLException
- [SPARK-26806][SS] EventTimeStats.merge deve gestire correttamente gli zeri
- [SPARK-26745][SPARK-24959][SQL] Ripristinare l'ottimizzazione del conteggio nell'origine dati JSON per
- [SPARK-26757][GRAPHX] Restituisce 0 per il conteggio su rdd perimetrali/vertici vuoti
- [SPARK-26726] Sincronizzare la quantità di memoria usata dalla variabile broadcast nella visualizzazione dell'interfaccia utente
- [SPARK-26718][SS] Correzione dell'overflow integer nel calcolo di SS kafka rateLimit
- [SPARK-26708][SQL] Risultato errato causato dall'incoerenza tra rdd memorizzato nella cache di una cache SQL e il relativo piano fisico
- [SPARK-26735][SQL] Verificare l'integrità del piano per espressioni speciali
- [SPARK-26619][SQL] Eliminare i serializzatori inutilizzati da SerializeFromObject
- [SPARK-26379][SS] Usare dummy TimeZoneId per evitare UnresolvedException in CurrentBatchTimestamp
- [SPARK-26495][SQL] Semplificare l'estrattore SelectedField
- [SPARK-26379][SS] Correzione del problema relativo all'aggiunta di current_timestamp/current_date alla query di streaming
- [SPARK-26709][SQL] OptimizeMetadataOnlyQuery non gestisce correttamente i record vuoti
- [SPARK-26680][SQL] Creare inputVars eagerly mentre le condizioni sono appropriate
- [SPARK-26682][SQL] Usare taskAttemptID invece di attemptNumber per Hadoop.
- [SPARK-26706][SQL] Correzione di illegalNumericPrecedence per ByteType
- [SPARK-26228][MLLIB] Si è verificato un problema di OOM durante il calcolo della matrice gramiana
- [SPARK-26665][CORE] Correzione di un bug che BlockTransferService.fetchBlockSync potrebbe bloccarsi per sempre
- [SPARK-26549][PYSPARK] Correzione per il riutilizzo del ruolo di lavoro Python non ha alcun effetto per parallelizzare l'intervallo iterabile lazy
- [SPARK-26351][MLLIB] Aggiornare la documentazione e la correzione secondaria nelle metriche di valutazione mllib
- [SPARK-26450]Evitare di ricompilare la mappa dello schema per ogni colonna in una proiezione
- [SPARK-26638][PYSPARK][ML] Le classi vettoriali Pyspark restituiscono sempre un errore per la negazione unaria
- [SPARK-26633][REPL] Aggiungere ExecutorClassLoader.getResourceAsStream
- [SPARK-26629][SS] Correzione dell'errore con più flussi di file in una query e riavvio in un batch senza dati per un flusso di file
- [SPARK-25992][PYTHON] Impossibile condividere Document SparkContext per il multiprocessore
- [SPARK-26615][CORE] Correzione delle perdite di risorse client/server di trasporto negli unittest principali
- [SPARK-26350][SS] Consenti di eseguire l'override dell'ID gruppo del consumer Kafka
- [SPARK-26538][SQL] Impostare la precisione e la scala predefinite per gli elementi della matrice numerica postgres
- [SPARK-26586][SS] Correzione della race condition che causa l'esecuzione dei flussi con confs imprevisti
- [SPARK-26551][SQL] Correzione dell'errore di eliminazione dello schema durante la selezione di un campo complesso e la presenza di un predicato non null in un altro
- [SPARK-26576][SQL] Hint di trasmissione non applicato alla tabella partizionata
- [SPARK-26571][SQL] Aggiornare il mapping di Hive Serde con il nome canonico di Parquet e Orc FileFormat
- [SPARK-26267][SS] Riprovare quando si rilevano offset non corretti da Kafka (2.4)
- [SPARK-26559][ML][PYSPARK] L'immagine ml non può funzionare con le versioni numpy precedenti alla 1.9
- [SPARK-26078][SQL] Attributi self-join di deduplicazione nelle sottoquery IN
Aggiornamenti di manutenzione
Vedere Aggiornamenti della manutenzione di Databricks Runtime 5.3.
Ambiente di sistema
- Sistema operativo: Ubuntu 16.04.6 LTS
- Java: 1.8.0_191
- Scala: 2.11.12
- Python: 2.7.12 per cluster Python 2 e 3.5.2 per cluster Python 3.
- R: R versione 3.5.2 (2018-12-20)
- Cluster GPU: sono installate le librerie GPU NVIDIA seguenti:
- Driver Tesla 375.66
- CUDA 9.0
- cuDNN 7.0
Nota
Sebbene Scala 2.12 sia supportato in Apache Spark 2.4, non è supportato in Databricks Runtime 5.3.
Librerie Python installate
| Library | Versione | Library | Versione | Library | Versione |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0,5 |
| boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| cryptography | 1,5 | cycler | 0.10.0 | Cython | 0.24.1 |
| decorator | 4.0.10 | docutils | 0.14 | enum34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsig | 1.0.2 |
| fusepy | 2.0.4 | futures | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0,999 | idna | 2.1 | ipaddress | 1.0.16 |
| ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| lxml | 3.6.4 | MarkupSafe | 0,23 | matplotlib | 1.5.3 |
| mpld3 | 0.2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | numpy | 1.11.1 | openpyxl | 2.3.2 |
| pandas | 0.19.2 | pathlib2 | 2.1.0 | patsy | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | Pillow | 3.3.1 |
| pip | 19.0.3 | filo | 3.9 | prompt-toolkit | 1.0.7 |
| Psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | (0.10.3) |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2.14 |
| Pygments | 2.1.3 | pygobject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| requests | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | strofinare | 0,32 | seaborn | 0.7.1 |
| setuptools | 40.8.0 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | six | 1.10.0 | statsmodels | 0.6.1 |
| tornado | 5.1.1 | traitlets | 4.3.0 | urllib3 | 1.19.1 |
| virtualenv | 16.1.0 | wcwidth | 0.1.7 | wheel | 0.33.1 |
| wsgiref | 0.1.2 |
Librerie R installate
| Library | Versione | Library | Versione | Library | Versione |
|---|---|---|---|---|---|
| abind | 1.4-5 | askpass | 1.1 | assertthat | 0.2.0 |
| backports | 1.1.3 | base | 3.5.2 | base64enc | 0.1-3 |
| BH | 1.69.0-1 | bit | 1.1-14 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | boot | 1.3-20 |
| brew | 1.0-6 | callr | 3.1.1 | car | 3.0-2 |
| carData | 3.0-2 | caret | 6.0-81 | cellranger | 1.1.0 |
| chron | 2.3-53 | class | 7.3-15 | cli | 1.0.1 |
| clipr | 0.5.0 | clisymbols | 1.2.0 | cluster | 2.0.7-1 |
| codetools | 0.2-16 | colorspace | 1.4-0 | commonmark | 1.7 |
| compilatore | 3.5.2 | config | 0.3 | crayon | 1.3.4 |
| curl | 3.3 | data.table | 1.12.0 | datasets | 3.5.2 |
| DBI | 1.0.0 | dbplyr | 1.3.0 | desc | 1.2.0 |
| devtools | 2.0.1 | digest | 0.6.18 | doMC | 1.3.5 |
| dplyr | 0.8.0.1 | puntini di sospensione | 0.1.0 | fansi | 0.4.0 |
| forcats | 0.4.0 | foreach | 1.4.4 | foreign | 0.8-71 |
| forge | 0.2.0 | fs | 1.2.6 | gbm | 2.1.5 |
| generics | 0.0.2 | ggplot2 | 3.1.0 | gh | 1.0.1 |
| git2r | 0.24.0 | glmnet | 2.0-16 | glue | 1.3.0 |
| Gower | 0.1.2 | grafica | 3.5.2 | grDevices | 3.5.2 |
| grid | 3.5.2 | gridExtra | 2.3 | gsubfn | 0,7 |
| gtable | 0.2.0 | h2o | 3.22.1.1 | haven | 2.1.0 |
| hms | 0.4.2 | htmltools | 0.3.6 | htmlwidgets | 1.3 |
| httr | 1.4.0 | hwriter | 1.3.2 | hwriterPlus | 1.0-3 |
| ini | 0.3.1 | ipred | 0.9-8 | Iteratori | 1.0.10 |
| jsonlite | 1.6 | KernSmooth | 2.23-15 | Etichettatura | 0,3 |
| Lattice | 0.20-38 | Java | 1.6.5 | lazyeval | 0.2.1 |
| Littler | 0.3.6 | lme4 | 1.1-20 | lubridate | 1.7.4 |
| magrittr | 1,5 | mapproj | 1.2.6 | mappe | 3.3.0 |
| maptools | 0.9-5 | MASS | 7.3-51.1 | Matrice | 1.2-15 |
| MatrixModels | 0.4-1 | memoise | 1.1.0 | methods | 3.5.2 |
| mgcv | 1.8-27 | mime | 0,6 | minqa | 1.2.4 |
| ModelMetrics | 1.2.2 | munsell | 0.5.0 | mvtnorm | 1.0-9 |
| nlme | 3.1-137 | nloptr | 1.2.1 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.2.2 | openxlsx | 4.1.0 |
| parallel | 3.5.2 | pbkrtest | 0.4-7 | Concetto fondamentale | 1.3.1 |
| pkgbuild | 1.0.2 | pkgconfig | 2.0.2 | pkgKitten | 0.1.4 |
| pkgload | 1.0.2 | plogr | 0.2.0 | plyr | 1.8.4 |
| praise | 1.0.0 | prettyunits | 1.0.2 | Proc | 1.13.0 |
| processx | 3.2.1 | prodlim | 2018.04.18 | Avanzamento | 1.2.0 |
| proto | 1.0.0 | ps | 1.3.0 | purrr | 0.3.0 |
| quantreg | 5.38 | R.methodsS3 | 1.7.1 | R.oo | 1.22.0 |
| R.utils | 2.8.0 | r2d3 | 0.2.3 | R6 | 2.4.0 |
| randomForest | 4.6-14 | rappdirs | 0.3.1 | rcmdcheck | 1.3.2 |
| RColorBrewer | 1.1-2 | Rcpp | 1.0.0 | RcppEigen | 0.3.3.5.0 |
| RcppRoll | 0.3.0 | RCurl | 1.95-4.11 | readr | 1.3.1 |
| readxl | 1.3.0 | ricette | 0.1.4 | rematch | 1.0.1 |
| remotes | 2.0.2 | reshape2 | 1.4.3 | Rio de Janeiro | 0.5.16 |
| rlang | 0.3.1 | RODBC | 1.3-15 | roxygen2 | 6.1.1 |
| rpart | 4.1-13 | rprojroot | 1.3-2 | Rserve | 1.8-6 |
| RSQLite | 2.1.1 | rstudioapi | 0.9.0 | Scalabilità | 1.0.0 |
| sessioninfo | 1.1.1 | sp | 1.3-1 | sparklyr | 1.0.0 |
| SparkR | 2.4.2 | SparseM | 1.77 | spaziale | 7.3-11 |
| Spline | 3.5.2 | sqldf | 0.4-11 | SQUAREM | 2017.10-1 |
| statmod | 1.4.30 | stats | 3.5.2 | stats4 | 3.5.2 |
| stringi | 1.3.1 | stringr | 1.4.0 | Sopravvivenza | 2.43-3 |
| sys | 3.0 | tcltk | 3.5.2 | TeachingDemos | 2.10 |
| testthat | 2.0.1 | tibble | 2.0.1 | tidyr | 0.8.3 |
| tidyselect | 0.2.5 | timeDate | 3043.102 | tools | 3.5.2 |
| usethis | 1.4.0 | utf8 | 1.1.4 | utils | 3.5.2 |
| viridisLite | 0.3.0 | whisker | 0.3-2 | withr | 2.1.2 |
| xml2 | 1.2.0 | xopen | 1.0.0 | yaml | 2.2.0 |
| zip | 2.0.0 |
Librerie Java e Scala installate (versione del cluster Scala 2.11)
| ID gruppo | ID artefatto | Versione |
|---|---|---|
| antlr | antlr | 2.7.7 |
| com.amazonaws | amazon-distribuisci-client | 1.8.10 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-consultas | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-swf-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | stream | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.5.0-db8-spark2.4 |
| com.databricks | dbml-local_2.11-tests | 0.5.0-db8-spark2.4 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.mdfsoftware | kryo-shaded | 4.0.2 |
| com.mdfsoftware | minlog | 1.3.0 |
| com.fasterxml | compagno di classe | 1.0.0 |
| com.fasterxml.jackson.core | annotazioni jackson | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | core | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system-java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | guaiava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.RELEASE |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.azure | azure-storage | 5.2.0 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.9.3 |
| com.twitter | chill_2.11 | 0.9.3 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocità | univocità-parser | 2.7.3 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 3.1 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0,10 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlets | 3.1.5 |
| io.netty | Netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | agente di raccolta | 0,7 |
| javax.activation | activation | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.14.6 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.idromatico | eigenbase-properties | 1.1.5 |
| net.razorvine | pirolite | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-ingest-sdk | 0.9.5 |
| net.snowflake | snowflake-jdbc | 3.6.15 |
| net.snowflake | spark-snowflake_2.11 | 2.4.10-spark_2.4 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | formato freccia | 0.10.0 |
| org.apache.arrow | freccia-memoria | 0.10.0 |
| org.apache.arrow | freccia-vettore | 0.10.0 |
| org.apache.avro | avro | 1.8.2 |
| org.apache.avro | avro-ipc | 1.8.2 |
| org.apache.avro | avro-mapred-hadoop2 | 1.8.2 |
| org.apache.calcite | calcite-avatica | Incubazione 1.2.0 |
| org.apache.calcite | calcite-core | Incubazione 1.2.0 |
| org.apache.calcite | calcite-linq4j | Incubazione 1.2.0 |
| org.apache.commons | commons-compress | 1.8.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curatore-cliente | 2.7.1 |
| org.apache.curator | curatore-framework | 2.7.1 |
| org.apache.curator | ricette curatori | 2.7.1 |
| org.apache.derby | derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | Incubazione 3.1.0 |
| org.apache.httpcomponents | httpclient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.5.2 |
| org.apache.orc | orc-mapreduce-nohive | 1.5.2 |
| org.apache.orc | orc-shim | 1.5.2 |
| org.apache.parquet | parquet-column | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-common | 1.10.1.1-databricks3 |
| org.apache.parquet | codifica parquet | 1.10.1.1-databricks3 |
| org.apache.parquet | formato parquet | 2.4.0 |
| org.apache.parquet | parquet-hadoop | 1.10.1.1-databricks3 |
| org.apache.parquet | parquet-jackson | 1.10.1.1-databricks3 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm6-shaded | 4.8 |
| org.apache.zookeeper | zookeeper | 3.4.6 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.10 |
| org.codehaus.janino | janino | 3.0.10 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-continuation | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-server | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | maglia-guava | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | maglia-comune | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | snappy | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.5.3 |
| org.json4s | json4s-core_2.11 | 3.5.3 |
| org.json4s | json4s-jackson_2.11 | 3.5.3 |
| org.json4s | json4s-scalap_2.11 | 3.5.3 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.5.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.5.11 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.12 |
| org.scala-lang | scala-library_2.11 | 2.11.12 |
| org.scala-lang | scala-reflect_2.11 | 2.11.12 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.1.0 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalactic | scalactic_2.11 | 3.0.3 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 3.0.3 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-exec | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore | 1.2.1.spark2 |
| org.spark-project.spark | inutilizzato | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.cortanaani | xz | 1,5 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.7.1 |
| org.yaml | snakeyaml | 1,16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0,52 |