Databricks Runtime 4.3 (EoS)
注意
針對此 Databricks Runtime 版本的支援已結束。 如需了解終止支援日期，請參閱終止支援歷程記錄。 如需所有支援的 Databricks Runtime 版本，請參閱 Databricks Runtime 發行說明版本與相容性。
Databricks 於 2018 年 8 月發行此版本。
重要
此版本已於 2019 年 4 月 9 日淘汰。 如需 Databricks Runtime 淘汰原則和排程的詳細資訊，請參閱 Databricks 支援生命週期。
下列版本資訊提供由 Apache Spark 提供之 Databricks Runtime 4.3 的相關信息。
新功能
- Delta Lake
TRUNCATE TABLE命令：刪除資料表中的所有數據列。 與Spark資料表的對應資料表不同，Delta 資料表不支援刪除特定分割區。ALTER TABLE REPLACE COLUMNS命令：取代 Delta 資料表中的數據行。 它支援變更數據行的批注，並重新排序多個數據行。FSCK REPAIR TABLE命令：從在基礎文件系統中找不到之 Delta 資料表的事務歷史記錄中移除檔案專案。 當手動刪除這些檔案時，就會發生這種情況。- 支援過時差異數據表的查詢，以改善互動式查詢體驗：當不需要最新結果時，差異數據表上的查詢現在可以在過時版本的數據表上執行。 這項功能可減少查詢的延遲，特別是當基礎 Delta 資料表透過數據流持續更新時。
- 結構化串流
- Azure Synapse Analytics Connector 的可調整串流寫入支援。
foreachBatch()在 Python 中支援 （已在 Scala 中提供）。 如需詳細資訊，請參閱 foreach 和 foreachBatch 檔 。- 支援在查詢中有多個輸入數據流時，選擇最小或最大水位線。 先前一律會使用最小時間戳。 如需詳細資訊， 請參閱多個浮水印原則 。
- 支援和
Complete輸出模式中Append數據流的LIMIT運算元。 若要將驅動程式上的 OOM 錯誤降到最低，當您在display()未系結的數據流上使用時，LIMIT會自動套用。
改善
Delta Lake
- 具有 10000 個數據列插入限制之命令的新可調整實作
MERGE INTO的私人預覽。 如果您想要試用，請連絡支持人員。 - 更好的命令效能和延展性
OPTIMIZE，特別是在較大的叢集上。 - OPTIMIZE 命令現在會以累加方式認可至數據表，這表示如果命令失敗，重試就不需要處理整個數據集。
- 減少使用 Delta Lake 作為串流來源時探索新數據所需的文件系統 RPC 數目。
- 已新增 Python 中的 支援
df.writeStream.table(table-name)，以從數據流建立 Delta 數據表。
- 具有 10000 個數據列插入限制之命令的新可調整實作
改善具有多個聯結、匯總或視窗之查詢的效能。
已改善使用廣播哈希聯結之查詢的數據分割層級剪除效率。
改善整個階段程式代碼產生，以偵測重複的運算式、減少產生的程式代碼數量，以及改善特定表達式類型的效能。
高併行叢集現在支援在筆記本中執行
%fs。將 PySpark 使用的 Py4J 升級為 0.10.7。
已改善 Azure Ls 系列實例上磁碟快取的效能。 這些實例上現在預設會啟用快取，以加速重複讀取 Parquet 檔案的工作負載。
已淘汰的功能
- Databricks Delta 外部略過的數據已被取代。 在 Delta Lake 中，會繼續提供增強版的數據略過。 建議您切換至使用 Delta Lake，以繼續利用這項功能。 如需詳細資訊，請參閱 Databricks Delta 數據跳過。
錯誤修正
修正了當 ON 條件只參考目標數據表的述詞時，Delta 的述詞下
MERGE INTO推語句不正確。已修正 中的
mapGroupsWithState錯誤，並flatMapGroupsWithState防止在移除狀態時設定逾時 （SPARK-22187）。已修正防止浮水印正常運作
Trigger.Once的錯誤 （SPARK-24699）。Update 命令現在會驗證 SET 子句中的數據行，以確保所有數據行實際存在，而且沒有一次以上的數據行設定。
已修正可能導致目錄認可死結的潛在競爭狀況。
已修正在重新整理掛接時，導致 DBFS 用戶端已被取代版本的 Bug。
已知問題
- 數據表的 Delta Lake 組態選項只會在載入數據表的第一個筆記本中生效。
Apache Spark
Databricks Runtime 4.3 包含 Apache Spark 2.3.1。 此版本包含 Databricks Runtime 4.2 （EoS） 中包含的所有修正和改善，以及下列對 Spark 進行的其他錯誤修正和改進：
- [SPARK-24934][SQL]明確允許記憶體內部分割區剪除的上限/下限支持類型
- 當針對快取資料的查詢篩選中使用複雜資料類型時，Spark 一律會傳回空的結果集。 由於複雜類型的上下限設定為 null，因此記憶體內部統計資料型剪除會產生不正確的結果。 修正方式是不要針對複雜類型使用記憶體內部統計資料型剪除。
- [SPARK-24957][SQL]具有十進位的平均值，後面接著匯總會傳回錯誤的結果
- 可能會傳回 AVERAGE 的不正確結果。 如果 Divide 的結果與轉型為相同的類型，則會略過 Average 運算子中加入的 CAST。
- [SPARK-24867][SQL]將 AnalysisBarrier 新增至 DataFrameWriter
- 使用 DataFrameWriter 寫入具有 UDF 的資料框架時，不會使用 SQL 快取。 這是我們在 AnalysisBarrier 中所做變更所造成的迴歸，因為並非所有分析器規則都是等冪的。
- [SPARK-24790][SQL]允許 Pivot 中的複雜匯總表達式
- 放寬檢查以允許複雜的匯總表達式，例如 ceil（sum（col1）或 sum（col1） + 1，這大致表示除了 pandas UDF 之外，任何可能出現在匯總方案中的匯總表達式。
- [SPARK-24870][SQL]如果 SQL 中有大小寫字母，快取將無法正常運作
- 修正計劃規範問題。
- [SPARK-24852]讓 spark.ml 定型使用更新 的檢測 API。
- [SPARK-24891][SQL]修正 HandleNullInputsForUDF 規則
- 讓 HandleNullInputsForUDF 規則等冪，以避免在分析計劃多次時，在快取管理員中避免計劃不符。
- [SPARK-24878][SQL] 修正包含 Null 之基本類型之陣列類型的反向函式。
- [SPARK-24871][SQL]重構 Concat 和 MapConcat 以避免為每個數據列建立串連物件。
- [SPARK-24802][SQL]新增優化規則排除的新設定
- 提供設定給使用者以排除某些優化器規則。
- [SPARK-24879][SQL]修正Hive分割區剪除篩選下推中的NPE
- 當數據分割述詞類似 col IN （1， null）， 就會擲回 NPE。 此修補程式會修正此問題。
- [SPARK-23731][SQL]使 FileSourceScanExec 在串行化後可正式設定
- [SPARK-24755][CORE]執行程式遺失可能會導致工作無法重新提交
- 修正 Spark 可能無法透過執行程式遺失而重新提交工作失敗的錯誤。 此 Bug 是在 Spark 2.3 中引進的。
- [SPARK-24677][CORE]避免 NoSuchElementException from MedianHeap
- 修正收集工作工期計量時與推測性工作相關的 Bug。
- [SPARK-24868][PYTHON] 在 Python 中新增時序函式
- [SPARK-21811][SPARK-24012][SPARK-24737][SPARK-24165][SPARK-24734][SPARK-24840][SQL]修正類型強制型別和 Nullabilities。
- [SPARK-24699][SS]將更新的浮浮浮水印儲存為認可記錄，讓浮浮浮水印與 Trigger 搭配運作。一次
- [SPARK-24537][R] 新增array_remove/array_zip/map_from_arrays/array_distinct
- [SPARK-22187][SS]更新 flatMapGroupsWithState 中儲存狀態的 unsaferow 格式，以允許具有已刪除狀態的逾時 （4.x）
- [SPARK-24681][SQL]確認Hive中繼存放區中的巢狀數據行名稱
- 請確定巢狀數據行名稱不包含Hive中繼存放區中的 '、'：' 和 ';'
- [SPARK-23486]從外部目錄快取 lookupFunctions 的函式名稱
- 加快函式查閱的速度。
- [SPARK-24781][SQL]在篩選/排序中使用數據集的參考可能無法運作
- [SPARK-24208][SQL]修正 FlatMapGroupsInPandas 的屬性重複數據刪除
- 修正數據集上的自我聯結失敗，其中包含 FlatMapGroupsInPandas，因為屬性重複
- [SPARK-24530][PYTHON]新增控件以透過環境變數 SPHINXPYTHON 強制 Sphinx 中的 Python 版本
- [SPARK-24250]支援存取工作內的 SQLConf
- 當觸發 SQL 執行時，將所有 SQL 組態儲存至作業屬性。 在執行程式端，我們會從作業屬性重建 SQLConf。
- [SPARK-23936][SQL]實作map_concat
- [SPARK-23914][SQL]新增array_union函式
- [SPARK-24732][SQL]MapTypes 之間的類型強制型別。
- 新增 MapTypes 之間的類型強制型別支援，其中索引鍵類型和實值型別都相容。 例如，MapType（IntegerType、FloatType） 和 MapType（LongType， DoubleType） 類型可以強制類型 MapType（LongType，DoubleType）
- [SPARK-24662][SQL][SS]結構化串流中的支援限制
- [SPARK-24730][SS]當串流查詢有多個水位線時，新增原則以選擇 max 作為全域水位線（branch-4.x）
- [SPARK-24596][SQL]非串聯快取無效
- 當取消快取或卸除暫存檢視時，不需要串聯取消套用相依於檢視的所有計劃，因為基礎數據不會變更。
- [SPARK-23927][SQL]新增 「sequence」 表達式
- [SPARK-24636][SQL]array_join 函式的數位類型強制
- [SPARK-22384][SQL]在 Cast 中包裝屬性時精簡數據分割剪除
- 改善數據分割剪除，能夠向下推入具有安全類型轉換的分割區述詞（int 到long，不長到 int）。
- [SPARK-24385][SQL]解決 EqualNullSafe 的自我聯結條件模棱兩可
- 實作 EqualNullSafe 以進行自我聯結條件模棱兩可解析。
- [SPARK-24696][SQL]ColumnPruning 規則無法移除額外的專案
- 修正 ColumnPruning 規則中導致優化器發生無限循環錯誤的 Bug。
- [SPARK-24603][SQL]修正批注中的 findTightestCommonType 參考
- [SPARK-24613][SQL]無法與後續相依快取比對具有UDF的快取
- 在 CacheManager 中使用 AnalysisBarrier 包裝邏輯計畫，以便編譯執行計畫，避免計畫再次被分析。 這也是 Spark 2.3 的迴歸。
- [SPARK-24017][SQL]將 ExternalCatalog 重構為介面
- [SPARK-24324][PYTHON] pandas 群組對應 UDF 應該依名稱指派結果數據行
- 如果使用者以字串加上標籤，則依架構名稱指派結果數據行，否則使用位置。
- [SPARK-23778][CORE]當等位取得空白 RDD 時，避免不必要的隨機顯示
- 忽略等位方法中的傳入空白 RDD，以避免所有其他 RDD 具有相同資料分割時不必要的額外隨機顯示。
- [SPARK-24552][CORE][SQL]使用唯一標識碼，而不是嘗試寫入的數位。
- 傳遞唯一的工作嘗試標識碼，而不是嘗試號碼給 v2 數據源，因為重試階段時會重複使用嘗試號碼。 這會影響數據源 V1 和 V2 API，但檔格式 API 不會受到影響，因為 DBR 使用不同的認可通訊協定。
- [SPARK-24588][SS] 串流聯結應該需要來自子系的 HashClusteredPartitioning。
- [SPARK-24589][CORE]正確識別輸出認可協調器中的工作。
- 將詳細資訊新增至協調器所追蹤的階段狀態，以便只允許一個工作認可輸出。 此修正程式也會移除 SPARK-18113 引進的無用程式代碼變更。
- [SPARK-23933][SQL]新增map_from_arrays函式
- [SPARK-24583][SQL]InsertIntoDataSourceCommand 中的架構類型錯誤
- 使用 NOT NULL 條件約束建立 Delta 數據表時，我們可以卸除可為 Null，並插入 NULL 值，而不檢查違規。
- [SPARK-24542][SQL]UDF 系列 UDFXPathXXXX 可讓用戶傳遞精心製作的 XML 以存取任意檔案
- 這是從社群回報的安全性修補程式。 UDF 系列 UDFXPathXXXX 可讓用戶傳遞精心製作的 XML 來存取任意檔案。 當使用者使用外部存取裝置庫時，使用者可能會略過它們並存取檔案內容。
- [SPARK-23934][SQL]新增map_from_entries函式
- [SPARK-23912][SQL]新增array_distinct
- [SPARK-24574][SQL] array_contains、array_position、array_remove和element_at函式會處理數據行類型
維護更新
請參閱 Databricks Runtime 4.3 維護更新。
系統環境
- 操作系統：Ubuntu 16.04.4 LTS
- Java：1.8.0_162
- Scala：2.11.8
- Python：適用於 Python 2 叢集的 2.7.12 和 Python 3 叢集的 3.5.2。
- R：R 3.4.4 版 （2018-03-15）
- GPU 叢集：已安裝下列 NVIDIA GPU 連結庫：
- 特斯拉司機 375.66
- CUDA 9.0
- cuDNN 7.0
已安裝的 Python 程式庫
| 程式庫 | 版本 | 程式庫 | 版本 | 程式庫 | 版本 |
|---|---|---|---|---|---|
| ansi2html | 1.1.1 | argparse | 1.2.1 | backports-abc | 0.5 |
| boto | 2.42.0 | boto3 | 1.4.1 | botocore | 1.4.70 |
| brewer2mpl | 1.4.1 | certifi | 2016.2.28 | cffi | 1.7.0 |
| chardet | 2.3.0 | colorama | 0.3.7 | configobj | 5.0.6 |
| 密碼編譯 | 1.5 | cycler | 0.10.0 | Cython | 0.24.1 |
| decorator | 4.0.10 | docutils | 0.14 | enum34 | 1.1.6 |
| et-xmlfile | 1.0.1 | freetype-py | 1.0.2 | funcsigs | 1.0.2 |
| fusepy | 2.0.4 | futures | 3.2.0 | ggplot | 0.6.8 |
| html5lib | 0.999 | idna | 2.1 | ipaddress | 1.0.16 |
| ipython | 2.2.0 | ipython-genutils | 0.1.0 | jdcal | 1.2 |
| Jinja2 | 2.8 | jmespath | 0.9.0 | llvmlite | 0.13.0 |
| lxml | 3.6.4 | MarkupSafe | 0.23 | matplotlib | 1.5.3 |
| mpld3 | 0.2 | msgpack-python | 0.4.7 | ndg-httpsclient | 0.3.3 |
| numba | 0.28.1 | numpy | 1.11.1 | openpyxl | 2.3.2 |
| pandas | 0.19.2 | pathlib2 | 2.1.0 | patsy | 0.4.1 |
| pexpect | 4.0.1 | pickleshare | 0.7.4 | Pillow | 3.3.1 |
| pip | 10.0.1 | ply | 3.9 | prompt-toolkit | 1.0.7 |
| psycopg2 | 2.6.2 | ptyprocess | 0.5.1 | py4j | 0.10.3 |
| pyarrow | 0.8.0 | pyasn1 | 0.1.9 | pycparser | 2.14 |
| Pygments | 2.1.3 | PyGObject | 3.20.0 | pyOpenSSL | 16.0.0 |
| pyparsing | 2.2.0 | pypng | 0.0.18 | Python | 2.7.12 |
| python-dateutil | 2.5.3 | python-geohash | 0.8.5 | pytz | 2016.6.1 |
| requests | 2.11.1 | s3transfer | 0.1.9 | scikit-learn | 0.18.1 |
| scipy | 0.18.1 | 沖刷 | 0.32 | seaborn | 0.7.1 |
| setuptools | 39.2.0 | simplejson | 3.8.2 | simples3 | 1.0 |
| singledispatch | 3.4.0.3 | six | 1.10.0 | statsmodels | 0.6.1 |
| tornado | 5.0.2 | traitlets | 4.3.0 | urllib3 | 1.19.1 |
| virtualenv | 15.0.1 | wcwidth | 0.1.7 | wheel | 0.31.1 |
| wsgiref | 0.1.2 |
已安裝的 R 連結庫
| 程式庫 | 版本 | 程式庫 | 版本 | 程式庫 | 版本 |
|---|---|---|---|---|---|
| abind | 1.4-5 | assertthat | 0.2.0 | backports | 1.1.2 |
| base | 3.4.4 | BH | 1.66.0-1 | bindr | 0.1.1 |
| bindrcpp | 0.2.2 | bit | 1.1-12 | bit64 | 0.9-7 |
| bitops | 1.0-6 | blob | 1.1.1 | boot | 1.3-20 |
| brew | 1.0-6 | broom | 0.4.4 | 汽車 | 3.0-0 |
| carData | 3.0-1 | caret | 6.0-79 | cellranger | 1.1.0 |
| chron | 2.3-52 | class | 7.3-14 | cli | 1.0.0 |
| 叢集 | 2.0.7-1 | codetools | 0.2-15 | colorspace | 1.3-2 |
| commonmark | 1.4 | compiler | 3.4.4 | crayon | 1.3.4 |
| curl | 3.2 | CVST | 0.2-1 | data.table | 1.10.4-3 |
| datasets | 3.4.4 | DBI | 0.8 | ddalpha | 1.3.1.1 |
| DEoptimR | 1.0-8 | 遞減 | 1.1.1 | devtools | 1.13.5 |
| dichromat | 2.0-0 | digest | 0.6.15 | dimRed | 0.1.0 |
| doMC | 1.3.5 | dplyr | 0.7.4 | DRR | 0.0.3 |
| forcats | 0.3.0 | foreach | 1.4.4 | foreign | 0.8-70 |
| gbm | 2.1.3 | ggplot2 | 2.2.1 | git2r | 0.21.0 |
| glmnet | 2.0-16 | glue | 1.2.0 | gower | 0.1.2 |
| graphics | 3.4.4 | grDevices | 3.4.4 | grid | 3.4.4 |
| gsubfn | 0.7 | gtable | 0.2.0 | h2o | 3.16.0.2 |
| haven | 1.1.1 | hms | 0.4.2 | httr | 1.3.1 |
| hwriter | 1.3.2 | hwriterPlus | 1.0-3 | ipred | 0.9-6 |
| iterators | 1.0.9 | jsonlite | 1.5 | kernlab | 0.9-25 |
| KernSmooth | 2.23-15 | labeling | 0.3 | lattice | 0.20-35 |
| Lava | 1.6.1 | lazyeval | 0.2.1 | littler | 0.3.3 |
| lme4 | 1.1-17 | lubridate | 1.7.3 | magrittr | 1.5 |
| mapproj | 1.2.6 | maps | 3.3.0 | maptools | 0.9-2 |
| MASS | 7.3-50 | 矩陣 | 1.2-14 | MatrixModels | 0.4-1 |
| memoise | 1.1.0 | 方法 | 3.4.4 | mgcv | 1.8-24 |
| mime | 0.5 | minqa | 1.2.4 | mnormt | 1.5-5 |
| ModelMetrics | 1.1.0 | munsell | 0.4.3 | mvtnorm | 1.0-7 |
| nlme | 3.1-137 | nloptr | 1.0.4 | nnet | 7.3-12 |
| numDeriv | 2016.8-1 | openssl | 1.0.1 | openxlsx | 4.0.17 |
| parallel | 3.4.4 | pbkrtest | 0.4-7 | pillar | 1.2.1 |
| pkgconfig | 2.0.1 | pkgKitten | 0.1.4 | plogr | 0.2.0 |
| plyr | 1.8.4 | praise | 1.0.0 | prettyunits | 1.0.2 |
| pROC | 1.11.0 | prodlim | 1.6.1 | proto | 1.0.0 |
| psych | 1.8.3.3 | purrr | 0.2.4 | quantreg | 5.35 |
| R.methodsS3 | 1.7.1 | R.oo | 1.21.0 | R.utils | 2.6.0 |
| R6 | 2.2.2 | randomForest | 4.6-14 | RColorBrewer | 1.1-2 |
| Rcpp | 0.12.16 | RcppEigen | 0.3.3.4.0 | RcppRoll | 0.2.2 |
| RCurl | 1.95-4.10 | readr | 1.1.1 | readxl | 1.0.0 |
| recipes | 0.1.2 | rematch | 1.0.1 | reshape2 | 1.4.3 |
| 力拓 | 0.5.10 | rlang | 0.2.0 | robustbase | 0.92-8 |
| RODBC | 1.3-15 | roxygen2 | 6.0.1 | rpart | 4.1-13 |
| rprojroot | 1.3-2 | Rserve | 1.7-3 | RSQLite | 2.1.0 |
| rstudioapi | 0.7 | scales | 0.5.0 | sfsmisc | 1.1-2 |
| sp | 1.2-7 | SparkR | 2.3.1 | SparseM | 1.77 |
| spatial | 7.3-11 | splines | 3.4.4 | sqldf | 0.4-11 |
| SQUAREM | 2017.10-1 | statmod | 1.4.30 | stats | 3.4.4 |
| stats4 | 3.4.4 | stringi | 1.1.7 | stringr | 1.3.0 |
| survival | 2.42-3 | tcltk | 3.4.4 | TeachingDemos | 2.10 |
| testthat | 2.0.0 | tibble | 1.4.2 | tidyr | 0.8.0 |
| tidyselect | 0.2.4 | timeDate | 3043.102 | tools | 3.4.4 |
| utf8 | 1.1.3 | utils | 3.4.4 | viridisLite | 0.3.0 |
| whisker | 0.3-2 | withr | 2.1.2 | xml2 | 1.2.0 |
已安裝的 Java 和 Scala 連結庫 （Scala 2.11 叢集版本）
| 群組識別碼 | 成品識別碼 | 版本 |
|---|---|---|
| ANTLR | ANTLR | 2.7.7 |
| com.amazonaws | amazon-kinesis-client | 1.7.3 |
| com.amazonaws | aws-java-sdk-autoscaling | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudformation | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudfront | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudhsm | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudsearch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudtrail | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatch | 1.11.313 |
| com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.313 |
| com.amazonaws | aws-java-sdk-codedeploy | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.313 |
| com.amazonaws | aws-java-sdk-cognitosync | 1.11.313 |
| com.amazonaws | aws-java-sdk-config | 1.11.313 |
| com.amazonaws | aws-java-sdk-core | 1.11.313 |
| com.amazonaws | aws-java-sdk-datapipeline | 1.11.313 |
| com.amazonaws | aws-java-sdk-directconnect | 1.11.313 |
| com.amazonaws | aws-java-sdk-directory | 1.11.313 |
| com.amazonaws | aws-java-sdk-dynamodb | 1.11.313 |
| com.amazonaws | aws-java-sdk-ec2 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ecs | 1.11.313 |
| com.amazonaws | aws-java-sdk-efs | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticache | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.313 |
| com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.313 |
| com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.313 |
| com.amazonaws | aws-java-sdk-emr | 1.11.313 |
| com.amazonaws | aws-java-sdk-glacier | 1.11.313 |
| com.amazonaws | aws-java-sdk-iam | 1.11.313 |
| com.amazonaws | aws-java-sdk-importexport | 1.11.313 |
| com.amazonaws | aws-java-sdk-kinesis | 1.11.313 |
| com.amazonaws | aws-java-sdk-kms | 1.11.313 |
| com.amazonaws | aws-java-sdk-lambda | 1.11.313 |
| com.amazonaws | aws-java-sdk-logs | 1.11.313 |
| com.amazonaws | aws-java-sdk-machinelearning | 1.11.313 |
| com.amazonaws | aws-java-sdk-opsworks | 1.11.313 |
| com.amazonaws | aws-java-sdk-rds | 1.11.313 |
| com.amazonaws | aws-java-sdk-redshift | 1.11.313 |
| com.amazonaws | aws-java-sdk-route53 | 1.11.313 |
| com.amazonaws | aws-java-sdk-s3 | 1.11.313 |
| com.amazonaws | aws-java-sdk-ses | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpledb | 1.11.313 |
| com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.313 |
| com.amazonaws | aws-java-sdk-sns | 1.11.313 |
| com.amazonaws | aws-java-sdk-sqs | 1.11.313 |
| com.amazonaws | aws-java-sdk-ssm | 1.11.313 |
| com.amazonaws | aws-java-sdk-storagegateway | 1.11.313 |
| com.amazonaws | aws-java-sdk-sts | 1.11.313 |
| com.amazonaws | aws-java-sdk-support | 1.11.313 |
| com.amazonaws | aws-java-sdk-js-libraries | 1.11.22 |
| com.amazonaws | aws-java-sdk-workspaces | 1.11.313 |
| com.amazonaws | jmespath-java | 1.11.313 |
| com.carrotsearch | hppc | 0.7.2 |
| com.chuusai | shapeless_2.11 | 2.3.2 |
| com.clearspring.analytics | stream | 2.7.0 |
| com.databricks | Rserve | 1.8-3 |
| com.databricks | dbml-local_2.11 | 0.4.1-db1-spark2.3 |
| com.databricks | dbml-local_2.11-tests | 0.4.1-db1-spark2.3 |
| com.databricks | jets3t | 0.7.1-0 |
| com.databricks.scalapb | compilerplugin_2.11 | 0.4.15-9 |
| com.databricks.scalapb | scalapb-runtime_2.11 | 0.4.15-9 |
| com.esotericsoftware | kryo-shaded | 3.0.3 |
| com.esotericsoftware | minlog | 1.3.0 |
| com.fasterxml | classmate | 1.0.0 |
| com.fasterxml.jackson.core | jackson-annotations | 2.6.7 |
| com.fasterxml.jackson.core | jackson-core | 2.6.7 |
| com.fasterxml.jackson.core | jackson-databind | 2.6.7.1 |
| com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.6.7 |
| com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-paranamer | 2.6.7 |
| com.fasterxml.jackson.module | jackson-module-scala_2.11 | 2.6.7.1 |
| com.github.fommil | jniloader | 1.1 |
| com.github.fommil.netlib | 核心 | 1.1.2 |
| com.github.fommil.netlib | native_ref-java | 1.1 |
| com.github.fommil.netlib | native_ref-java-natives | 1.1 |
| com.github.fommil.netlib | native_system java | 1.1 |
| com.github.fommil.netlib | native_system-java-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
| com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
| com.github.luben | zstd-jni | 1.3.2-2 |
| com.github.rwl | jtransforms | 2.4.0 |
| com.google.code.findbugs | jsr305 | 2.0.1 |
| com.google.code.gson | gson | 2.2.4 |
| com.google.guava | guava | 15.0 |
| com.google.protobuf | protobuf-java | 2.6.1 |
| com.googlecode.javaewah | JavaEWAH | 0.3.2 |
| com.h2database | h2 | 1.3.174 |
| com.jamesmurty.utils | java-xmlbuilder | 1.1 |
| com.jcraft | jsch | 0.1.50 |
| com.jolbox | bonecp | 0.8.0.版 |
| com.mchange | c3p0 | 0.9.5.1 |
| com.mchange | mchange-commons-java | 0.2.10 |
| com.microsoft.azure | azure-data-lake-store-sdk | 2.2.8 |
| com.microsoft.sqlserver | mssql-jdbc | 6.2.2.jre8 |
| com.ning | compress-lzf | 1.0.3 |
| com.sun.mail | javax.mail | 1.5.2 |
| com.thoughtworks.paranamer | paranamer | 2.8 |
| com.trueaccord.lenses | lenses_2.11 | 0.3 |
| com.twitter | chill-java | 0.8.4 |
| com.twitter | chill_2.11 | 0.8.4 |
| com.twitter | parquet-hadoop-bundle | 1.6.0 |
| com.twitter | util-app_2.11 | 6.23.0 |
| com.twitter | util-core_2.11 | 6.23.0 |
| com.twitter | util-jvm_2.11 | 6.23.0 |
| com.typesafe | config | 1.2.1 |
| com.typesafe.scala-logging | scala-logging-api_2.11 | 2.1.2 |
| com.typesafe.scala-logging | scala-logging-slf4j_2.11 | 2.1.2 |
| com.univocity | univocity-parsers | 2.5.9 |
| com.vlkan | flatbuffers | 1.2.0-3f79e055 |
| com.zaxxer | HikariCP | 3.1.0 |
| commons-beanutils | commons-beanutils | 1.7.0 |
| commons-beanutils | commons-beanutils-core | 1.8.0 |
| commons-cli | commons-cli | 1.2 |
| commons-codec | commons-codec | 1.10 |
| commons-collections | commons-collections | 3.2.2 |
| commons-configuration | commons-configuration | 1.6 |
| commons-dbcp | commons-dbcp | 1.4 |
| commons-digester | commons-digester | 1.8 |
| commons-httpclient | commons-httpclient | 3.1 |
| commons-io | commons-io | 2.4 |
| commons-lang | commons-lang | 2.6 |
| commons-logging | commons-logging | 1.1.3 |
| commons-net | commons-net | 2.2 |
| commons-pool | commons-pool | 1.5.4 |
| info.ganglia.gmetric4j | gmetric4j | 1.0.7 |
| io.airlift | aircompressor | 0.8 |
| io.dropwizard.metrics | metrics-core | 3.1.5 |
| io.dropwizard.metrics | metrics-ganglia | 3.1.5 |
| io.dropwizard.metrics | metrics-graphite | 3.1.5 |
| io.dropwizard.metrics | metrics-healthchecks | 3.1.5 |
| io.dropwizard.metrics | metrics-jetty9 | 3.1.5 |
| io.dropwizard.metrics | metrics-json | 3.1.5 |
| io.dropwizard.metrics | metrics-jvm | 3.1.5 |
| io.dropwizard.metrics | metrics-log4j | 3.1.5 |
| io.dropwizard.metrics | metrics-servlet | 3.1.5 |
| io.netty | netty | 3.9.9.Final |
| io.netty | netty-all | 4.1.17.Final |
| io.prometheus | simpleclient | 0.0.16 |
| io.prometheus | simpleclient_common | 0.0.16 |
| io.prometheus | simpleclient_dropwizard | 0.0.16 |
| io.prometheus | simpleclient_servlet | 0.0.16 |
| io.prometheus.jmx | 收集器 | 0.7 |
| javax.activation | 啟用 | 1.1.1 |
| javax.annotation | javax.annotation-api | 1.2 |
| javax.el | javax.el-api | 2.2.4 |
| javax.jdo | jdo-api | 3.0.1 |
| javax.servlet | javax.servlet-api | 3.1.0 |
| javax.servlet.jsp | jsp-api | 2.1 |
| javax.transaction | jta | 1.1 |
| javax.validation | validation-api | 1.1.0.Final |
| javax.ws.rs | javax.ws.rs-api | 2.0.1 |
| javax.xml.bind | jaxb-api | 2.2.2 |
| javax.xml.stream | stax-api | 1.0-2 |
| javolution | javolution | 5.5.1 |
| jline | jline | 2.11 |
| joda-time | joda-time | 2.9.3 |
| log4j | apache-log4j-extras | 1.2.17 |
| log4j | log4j | 1.2.17 |
| net.hydromatic | eigenbase-properties | 1.1.5 |
| net.iharder | base64 | 2.3.8 |
| net.java.dev.jets3t | jets3t | 0.9.4 |
| net.razorvine | pyolite | 4.13 |
| net.sf.jpam | jpam | 1.1 |
| net.sf.opencsv | opencsv | 2.3 |
| net.sf.supercsv | super-csv | 2.2.0 |
| net.snowflake | snowflake-jdbc | 3.6.3 |
| net.snowflake | spark-snowflake_2.11 | 2.4.1 |
| net.sourceforge.f2j | arpack_combined_all | 0.1 |
| org.acplt | oncrpc | 1.0.7 |
| org.antlr | ST4 | 4.0.4 |
| org.antlr | antlr-runtime | 3.4 |
| org.antlr | antlr4-runtime | 4.7 |
| org.antlr | stringtemplate | 3.2.1 |
| org.apache.ant | ant | 1.9.2 |
| org.apache.ant | ant-jsch | 1.9.2 |
| org.apache.ant | ant-launcher | 1.9.2 |
| org.apache.arrow | arrow-format | 0.8.0 |
| org.apache.arrow | arrow-memory | 0.8.0 |
| org.apache.arrow | arrow-vector | 0.8.0 |
| org.apache.avro | Avro | 1.7.7 |
| org.apache.avro | avro-ipc | 1.7.7 |
| org.apache.avro | avro-ipc-tests | 1.7.7 |
| org.apache.avro | avro-mapred-hadoop2 | 1.7.7 |
| org.apache.calcite | calcite-avatica | 1.2.0-incubating |
| org.apache.calcite | calcite-core | 1.2.0-incubating |
| org.apache.calcite | calcite-linq4j | 1.2.0-incubating |
| org.apache.commons | commons-compress | 1.4.1 |
| org.apache.commons | commons-crypto | 1.0.0 |
| org.apache.commons | commons-lang3 | 3.5 |
| org.apache.commons | commons-math3 | 3.4.1 |
| org.apache.curator | curator-client | 2.7.1 |
| org.apache.curator | curator-framework | 2.7.1 |
| org.apache.curator | curator-recipes | 2.7.1 |
| org.apache.derby | Derby | 10.12.1.1 |
| org.apache.directory.api | api-asn1-api | 1.0.0-M20 |
| org.apache.directory.api | api-util | 1.0.0-M20 |
| org.apache.directory.server | apacheds-i18n | 2.0.0-M15 |
| org.apache.directory.server | apacheds-kerberos-codec | 2.0.0-M15 |
| org.apache.hadoop | hadoop-annotations | 2.7.3 |
| org.apache.hadoop | hadoop-auth | 2.7.3 |
| org.apache.hadoop | hadoop-client | 2.7.3 |
| org.apache.hadoop | hadoop-common | 2.7.3 |
| org.apache.hadoop | hadoop-hdfs | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-app | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-common | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-core | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-jobclient | 2.7.3 |
| org.apache.hadoop | hadoop-mapreduce-client-shuffle | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-api | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-client | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-common | 2.7.3 |
| org.apache.hadoop | hadoop-yarn-server-common | 2.7.3 |
| org.apache.htrace | htrace-core | 3.1.0-incubating |
| org.apache.httpcomponents | HttpClient | 4.5.4 |
| org.apache.httpcomponents | httpcore | 4.4.8 |
| org.apache.ivy | ivy | 2.4.0 |
| org.apache.orc | orc-core-nohive | 1.4.3 |
| org.apache.orc | orc-mapreduce-nohive | 1.4.3 |
| org.apache.parquet | parquet-column | 1.8.3-databricks2 |
| org.apache.parquet | parquet-common | 1.8.3-databricks2 |
| org.apache.parquet | parquet-encoding | 1.8.3-databricks2 |
| org.apache.parquet | parquet-format | 2.3.1 |
| org.apache.parquet | parquet-hadoop | 1.8.3-databricks2 |
| org.apache.parquet | parquet-jackson | 1.8.3-databricks2 |
| org.apache.thrift | libfb303 | 0.9.3 |
| org.apache.thrift | libthrift | 0.9.3 |
| org.apache.xbean | xbean-asm5-shaded | 4.4 |
| org.apache.zookeeper | ZooKeeper | 3.4.6 |
| org.bouncycastle | bcprov-jdk15on | 1.58 |
| org.codehaus.jackson | jackson-core-asl | 1.9.13 |
| org.codehaus.jackson | jackson-jaxrs | 1.9.13 |
| org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
| org.codehaus.jackson | jackson-xc | 1.9.13 |
| org.codehaus.janino | commons-compiler | 3.0.8 |
| org.codehaus.janino | janino | 3.0.8 |
| org.datanucleus | datanucleus-api-jdo | 3.2.6 |
| org.datanucleus | datanucleus-core | 3.2.10 |
| org.datanucleus | datanucleus-rdbms | 3.2.9 |
| org.eclipse.jetty | jetty-client | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-continuation | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-http | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-io | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-jndi | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-plus | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-proxy | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-security | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-server | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlet | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-servlets | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-util | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-webapp | 9.3.20.v20170531 |
| org.eclipse.jetty | jetty-xml | 9.3.20.v20170531 |
| org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
| org.glassfish.hk2 | hk2-api | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-locator | 2.4.0-b34 |
| org.glassfish.hk2 | hk2-utils | 2.4.0-b34 |
| org.glassfish.hk2 | osgi-resource-locator | 1.0.1 |
| org.glassfish.hk2.external | aopalliance-repackaged | 2.4.0-b34 |
| org.glassfish.hk2.external | javax.inject | 2.4.0-b34 |
| org.glassfish.jersey.bundles.repackaged | 澤西-瓜瓦 | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet | 2.22.2 |
| org.glassfish.jersey.containers | jersey-container-servlet-core | 2.22.2 |
| org.glassfish.jersey.core | jersey-client | 2.22.2 |
| org.glassfish.jersey.core | jersey-common | 2.22.2 |
| org.glassfish.jersey.core | jersey-server | 2.22.2 |
| org.glassfish.jersey.media | jersey-media-jaxb | 2.22.2 |
| org.hibernate | hibernate-validator | 5.1.1.Final |
| org.iq80.snappy | snappy | 0.2 |
| org.javassist | javassist | 3.18.1-GA |
| org.jboss.logging | jboss-logging | 3.1.3.GA |
| org.jdbi | jdbi | 2.63.1 |
| org.joda | joda-convert | 1.7 |
| org.jodd | jodd-core | 3.5.2 |
| org.json4s | json4s-ast_2.11 | 3.2.11 |
| org.json4s | json4s-core_2.11 | 3.2.11 |
| org.json4s | json4s-jackson_2.11 | 3.2.11 |
| org.lz4 | lz4-java | 1.4.0 |
| org.mariadb.jdbc | mariadb-java-client | 2.1.2 |
| org.mockito | mockito-all | 1.9.5 |
| org.objenesis | objenesis | 2.1 |
| org.postgresql | postgresql | 42.1.4 |
| org.roaringbitmap | RoaringBitmap | 0.5.11 |
| org.rocksdb | rocksdbjni | 5.2.1 |
| org.rosuda.REngine | REngine | 2.1.0 |
| org.scala-lang | scala-compiler_2.11 | 2.11.8 |
| org.scala-lang | scala-library_2.11 | 2.11.8 |
| org.scala-lang | scala-reflect_2.11 | 2.11.8 |
| org.scala-lang | scalap_2.11 | 2.11.8 |
| org.scala-lang.modules | scala-parser-combinators_2.11 | 1.0.2 |
| org.scala-lang.modules | scala-xml_2.11 | 1.0.5 |
| org.scala-sbt | test-interface | 1.0 |
| org.scalacheck | scalacheck_2.11 | 1.12.5 |
| org.scalanlp | breeze-macros_2.11 | 0.13.2 |
| org.scalanlp | breeze_2.11 | 0.13.2 |
| org.scalatest | scalatest_2.11 | 2.2.6 |
| org.slf4j | jcl-over-slf4j | 1.7.16 |
| org.slf4j | jul-to-slf4j | 1.7.16 |
| org.slf4j | slf4j-api | 1.7.16 |
| org.slf4j | slf4j-log4j12 | 1.7.16 |
| org.spark-project.hive | hive-beeline | 1.2.1.spark2 |
| org.spark-project.hive | hive-cli | 1.2.1.spark2 |
| org.spark-project.hive | hive-exec | 1.2.1.spark2 |
| org.spark-project.hive | hive-jdbc | 1.2.1.spark2 |
| org.spark-project.hive | hive-metastore | 1.2.1.spark2 |
| org.spark-project.spark | 未使用的 | 1.0.0 |
| org.spire-math | spire-macros_2.11 | 0.13.0 |
| org.spire-math | spire_2.11 | 0.13.0 |
| org.springframework | spring-core | 4.1.4.RELEASE |
| org.springframework | spring-test | 4.1.4.RELEASE |
| org.tukaani | xz | 1.0 |
| org.typelevel | machinist_2.11 | 0.6.1 |
| org.typelevel | macro-compat_2.11 | 1.1.1 |
| org.xerial | sqlite-jdbc | 3.8.11.2 |
| org.xerial.snappy | snappy-java | 1.1.2.6 |
| org.yaml | snakeyaml | 1.16 |
| oro | oro | 2.0.8 |
| software.amazon.ion | ion-java | 1.0.2 |
| stax | stax-api | 1.0.1 |
| xmlenc | xmlenc | 0.52 |