Databricks Runtime 10.2 (EoS)
注意
針對此 Databricks Runtime 版本的支援已結束。 如需了解終止支援日期,請參閱終止支援歷程記錄。 如需所有支援的 Databricks Runtime 版本,請參閱 Databricks Runtime 發行說明版本與相容性。
下列版本資訊提供由 Apache Spark 3.2.0 提供的 Databricks Runtime 10.2 和 Databricks Runtime 10.2 Photon 的相關信息。 Databricks 於 2021 年 12 月發行此版本。 Photon 處於 公開預覽狀態。
新功能和改進
- 搭配 Spark 串流使用 Repos 中的檔案
- Databricks 公用程式會新增更新掛接命令
- Delta Lake 支援重新命名資料列 (公開預覽)
- Delta Lake 數據表歷程記錄會新增 Databricks 執行時間版本資訊
- Databricks 公用程式會在列出目錄時新增最新的修改時間資訊
- Spark SQL 新增函
approx_top_k
式以傳回最上層專案及其計數 - Trigger.AvailableNow 現在可在 Python 和 Scala 中使用
- 自動載入器現在支援 Avro 的架構演進 (公開預覽)
搭配 Spark 串流使用 Repos 中的檔案
Databricks 公用程式會新增更新掛接命令
新的命令類似於 dbutils.fs.mount
,但這個新dbutils.fs.updateMount
命令會更新現有的裝入點,而不是建立新的裝入點。 請參閱 updateMount 命令 (dbutils.fs.updateMount) 。
Delta Lake 支援重新命名資料列 (公開預覽)
Delta Lake 現在支援數據行重新命名。 若要重新命名 Delta 資料表的數據行,您必須升級 Delta 數據表的版本,然後將數據行對應模式設定為名稱對應。 請參閱重新命名和卸除與 Delta Lake 資料行對應的資料行。
Delta Lake 數據表歷程記錄會新增 Databricks 執行時間版本資訊
現在對 Delta 數據表進行寫入時,也會記錄建立寫入之 Databricks Runtime 版本的相關信息。 若要取得版本資訊,請在資料表上執行 DESCRIBE HISTORY
命令,然後查看 engineInfo
輸出中的數據行。 請參閱 DESCRIBE HISTORY and Work with Delta Lake table history。
Databricks 公用程式會在列出目錄時新增最新的修改時間資訊
列出 dbutils.fs.ls
目錄內容的命令現在會輸出 modificationTime
欄位。 此欄位包含每個欄位的檔案或目錄的最新修改時間。 請參閱 ls 指令 (dbutils.fs.ls) 。
Spark SQL 新增函 approx_top_k
式以傳回最上層專案及其計數
新 approx_top_k
函式會針對指定的表達式傳回最常發生的專案值及其近似計數。 這些範例包含:
df = spark.sql('SELECT approx_top_k(col, 10, 100) FROM VALUES (0), (1), (1), (2), (2), (2) AS tab(col)')
display(df)
import pyspark.sql.functions as F
df = spark.createDataFrame([
(0,), (1,), (1,), (2,), (2,), (2,)
]).select(F.expr('approx_top_k(_1, 10)'))
display(df)
執行任一範例的結果為:
[{"item": 2, "count": 3}, {"item": 1, "count": 2}, {"item": 0, "count": 1}]
請參閱 approx_top_k聚合函數。
Trigger.AvailableNow 現在可在 Python 和 Scala 中使用
這項變更支援 Python 和 Scala 中的 Delta 來源串流查詢 Trigger.AvailableNow
。 Databricks Runtime 10.1 引進了在 Scala 中此觸發程序的支援。 Databricks Runtime 10.2 現在也支援 Python 中的此觸發程式。 請參閱什麼是自動載入器?中的涵蓋範圍Trigger.AvailableNow
。
自動載入器現在支援 Avro 的架構演進 (公開預覽)
請參閱 在自動載入器中設定架構推斷和演進。
連結庫升級
- 升級的 Python 連結庫:
- filelock from 3.3.1 to 3.4.0
- 從 5.3.0 到 5.3.1 的繪圖
- 升級的 R 連結庫:
- base 從 4.1.1 到 4.1.2
- 編譯程式從 4.1.1 到 4.1.2
- 從 4.1.1 到 4.1.2 的數據集
- 從 4.1.1 到 4.1.2 的圖形
- grDevices 從 4.1.1 到 4.1.2
- 從 4.1.1 到 4.1.2 的方格
- 從 4.1.1 到 4.1.2 的方法
- 平行從 4.1.1 到 4.1.2
- 從 1.8-8 到 1.8-10 的 Rserve
- 從 4.1.1 到 4.1.2 的曲線
- 從 4.1.1 到 4.1.2 的統計數據
- stats4 從 4.1.1 到 4.1.2
- tcltk 從 4.1.1 到 4.1.2
- 從 4.1.1 到 4.1.2 的工具
- utils from 4.1.1 to 4.1.2
- 從 1.2.1 到 1.4.0 的反向移植
- 從 0.7.9 到 0.7.10 的掃把
- cli 從 3.0.1 到 3.1.0
- cpp11 從 0.4.0 到 0.4.1
- 從 1.4.1 到 1.4.2 的 crayon
- 從 1.3.1 到 1.3.2 的認證
- 未來從 1.22.1 到 1.23.0
- 從 1.4.1 到 1.4.3 的 gert
- 從 4.1-2 到 4.1-3 的 glmnet
- 從 1.4.2 到 1.5.0 的黏附
- 備忘從 2.0.0 到 2.0.1
- 平行從 1.28.1 到 1.29.0
- 自 2.0.2 到 2.1.0 的 readr
- sessioninfo 從 1.1.1 到 1.2.1
- stringi 從 1.7.5 到 1.7.6
- 從 3.1.5 到 3.1.6 的 tibble
- tinytex from 0.34 to 0.35
- tzdb 從 0.1.2 到 0.2.0
- usethis from 2.1.2 to 2.1.3
- 從 0.1-4 到 1.0-3 的 uuid
- 從 1.5.5 到 1.5.6 的 vroom
- 從 0.27 到 0.28 的 xfun
- 升級的 Java 程式庫:
- com.fasterxml.jackson 從 2.12.2 到 2.12.3
- io.airlift.aircompressor from 0.19 to 0.21
- io.netty.netty-all 從 4.1.63.Final 到 4.1.68.Final
- joda-time.joda-time 從 2.10.5 到 2.10.10
- org.apache.commons.commons-compress 從 1.20 到 1.21
- org.apache.orc 從 1.6.10 到 1.6.12
- org.eclipse.jetty 從 9.4.40.v20210413 到 9.4.43.v20210629
- org.scalanlp.breeze-macros_2.12 從 1.0 到 1.2
- 從 1.0 到 1.2 org.scalanlp.breeze_2.12
- 從 2.0.0 到 2.0.1 的 org.org.typelevel.algebra_2.12
- org.typelevel.cats-kernel_2.12,從 2.0.0 到 2.0.1
Apache Spark
Databricks Runtime 10.2 包含 Apache Spark 3.2.0。 此版本包含 Databricks Runtime 10.1 (EoS) 中包含的所有 Spark 修正和改善,以及下列對 Spark 進行的其他錯誤修正和改進:
- [SPARK-37447] [SQL]Cache LogicalPlan.isStreaming() 會導致延遲 val
- [SPARK-37468] [SQL]支援 UnionEstimation 的 ANSI 間隔和 TimestampNTZ
- [SPARK-37464] [SQL]SCHEMA 和 DATABASE 應該是 NAMESPACE 的別名
- [SPARK-37452] [SQL]Char 和 Varchar 會中斷 v3.1 與 v2 之間的回溯相容性
- [SPARK-36861] [SQL]使用
yyyy-MM-dd
作為數據分割探索中的日期模式 - [SPARK-37456] [SQL]CREATE NAMESPACE 應符合 v2 命令的位置
- [SPARK-37357] [SQL]新增用於重新平衡數據分割的小型分割區因數
- [SPARK-37446] [SQL]使用 getWithoutRegisterFns 的反映來允許不同的 Hive 版本進行建置
- [SPARK-37444] [SQL]ALTER NAMESPACE ... SET LOCATION 應該一致地處理 v1 和 v2 命令的空白位置
- [SPARK-36357] [SQL]支持沒有 orc 時區的下推時間戳
- [SPARK-36346] [SQL]支援 Orc 檔案來源中的 TimestampNTZ 類型
- [SPARK-36646] [SQL]依數據分割數據行向下推入群組以進行匯總
- [SPARK-34960] [SQL]ORC 的匯總下推
- [SPARK-37386] [SQL]簡化 OptimizeSkewedJoin 以不執行成本評估工具
- [SPARK-36073] [SQL]EquivalentExpressions 修正和改善
- [SPARK-35352] [SQL]新增完整外部排序合併聯結的程式代碼 Gen
- [SPARK-37292] [SQL]如果外部聯結只有具有別名的數據流端有 DISTINCT,則移除外部聯結
- [SPARK-37371] [SQL]如果所有子系支援單欄式,UnionExec 應該支援單欄式
- [SPARK-36645] [SQL]Parquet 的匯總 (最小值/最大值/計數) 下推
- [SPARK-37379] [SQL]將樹狀結構模式剪除新增至 CTESubstitution 規則
- [SPARK-37332] [SQL]允許中的 ANSI 間隔
ALTER TABLE .. ADD COLUMNS
- [SPARK-37224] [SS]優化 RocksDB 狀態存放區提供者上的寫入路徑
- [SPARK-37304] [SQL]允許 v2 中的 ANSI 間隔
ALTER TABLE .. REPLACE COLUMNS
- [SPARK-36924] [SQL]ANSI 間隔與 IntegralType 之間的 CAST
- [SPARK-37289] [SQL]Remove
partitionSchemaOption
函式 - [SPARK-37270] [SQL]如果 elseValue 是空的,請修正可折疊至 CaseWhen 分支
- [SPARK-35345] [SQL]將 Parquet 測試新增至 BloomFilterBenchmark
- [SPARK-37341] [SQL]避免不必要的緩衝區,並在完整外部排序合併聯結中複製
- [SPARK-37266] [SQL]檢視文字只能是 SELECT 查詢
- [SPARK-37288] [PYTHON][3.2] 批注更新之後的Backport
- [SPARK-37262] [SQL]請勿在 JDBCScan 中記錄空的匯總和群組
- [SPARK-37283] [SQL]請勿嘗試儲存包含Hive相容格式 ANSI 間隔的 V1 資料表
- [SPARK-37221] [SQL]SparkPlan 中的類似收集 API 應該支援單欄輸出
- [SPARK-37202] [SQL]使用 AnalysisContext 追蹤參考的暫存函式
- [SPARK-37023] [CORE]當 shuffleMergeEnabled 在重試期間隨機顯示為 false 時,請避免擷取合併狀態
- [SPARK-37307] [CORE]請勿取得空白分割區的 JDBC 連線
- [SPARK-37267] [SQL]OptimizeSkewInRebalancePartitions 支持優化非根節點
- [SPARK-36799] [SQL]在 CLI 中傳遞 queryExecution 名稱
- [SPARK-37261] [SQL]允許在 DSv2 中使用 ANSI 間隔新增分割區
- [SPARK-37203] [SQL]使用 TypedImperativeAggregate 觀察時修正 NotSerializableException
- [SPARK-37199] [SQL]將決定性欄位新增至 QueryPlan
- [SPARK-37253] [PYTHON]
try_simplify_traceback
當 為 None 時tb_frame.f_lineno
不應該失敗 - [SPARK-37214] [SQL]先前的查詢分析失敗,標識碼無效
- [SPARK-37240] [SQL]處理 ANSI 間隔依據
ColumnVectorUtils.populate()
- [SPARK-35437] [SQL]使用表達式來篩選用戶端的Hive分割區
- [SPARK-32940] [SQL]收集,第一個和最後一個應該是決定性聚合函數
- [SPARK-37231] [SQL]ANSI 間隔分割區的動態寫入/讀取
- [SPARK-37038] [SQL]DSV2 範例下推
- [SPARK-36665] [SQL]新增更多 Not 運算子簡化
- [SPARK-37150] [SQL]移轉 DESCRIBE NAMESPACE 以預設使用 V2 命令
- [SPARK-37196] [SQL]HiveDecimal enforcePrecisionScale 傳回 Null 失敗
- [SPARK-37212] [SQL]改善匯總下推的實作。
- [SPARK-37190] [SQL]改善 ANSI 模式下轉換的錯誤訊息
- [SPARK-37161] [SQL]RowToColumnConverter 支援 AnsiIntervalType
- [SPARK-37160] [SQL]新增組態以選擇性地停用char類型的填補
- [SPARK-36554] [SQL][PYTHON]在 functions.scala 中公開make_date表達式
- [SPARK-37200] [SQL]支持數據源 V2 的卸除索引
- [SPARK-37179] [SQL]ANSI 模式:新增設定以允許在 Datetime 與 Numeric 之間轉換
- [SPARK-37168] [SQL]改善 ANSI 模式下 SQL 函式和運算子的錯誤訊息
- [SPARK-36935] [SQL]擴充 ParquetSchemaConverter 以計算 Parquet 重複和定義層級
- [SPARK-37066] [SQL]改善錯誤訊息,以在無法讀取下一個檔案時顯示檔案路徑
- [SPARK-32567] [SQL]為完整外部隨機哈希聯結新增程序代碼 Gen
- [SPARK-37176] [SQL]使用 JacksonParser#parse 方法同步處理 JsonInferSchema#infer 方法的例外狀況句柄邏輯
- [SPARK-37149] [SQL]改善 ANSI 模式下算術溢位例外狀況的錯誤訊息
- [SPARK-37136] [SQL]拿掉hive buildin函式的相關程序代碼,但不在spark中實作
- [SPARK-16280][SPARK-37082] [SQL] 實作支援部分匯總的histogram_numeric聚合函數。
- [SPARK-36975] [SQL]更正 HiveClientImpl 中 Hive 用戶端呼叫的計量
維護更新
請參閱 Databricks Runtime 10.2 維護更新。
系統環境
- 作業系統:Ubuntu 20.04.3 LTS
- Java:Zulu 8.58.0.13-CA-linux64
- Scala:2.12.14
- Python:3.8.10
- R:4.1.2
- Delta Lake:1.1.0
已安裝的 Python 程式庫
程式庫 | 版本 | 程式庫 | 版本 | 程式庫 | 版本 |
---|---|---|---|---|---|
Antergos Linux | 2015.10 (ISO-Rolling) | appdirs | 1.4.4 | argon2-cffi | 20.1.0 |
async-generator | 1.10 | attrs | 20.3.0 | backcall | 0.2.0 |
bidict | 0.21.4 | bleach | 3.3.0 | boto3 | 1.16.7 |
botocore | 1.19.7 | certifi | 2020.12.5 | cffi | 1.14.5 |
chardet | 4.0.0 | cycler | 0.10.0 | Cython | 0.29.23 |
dbus-python | 1.2.16 | decorator | 5.0.6 | defusedxml | 0.7.1 |
distlib | 0.3.3 | distro-info | 0.23ubuntu1 | entrypoints | 0.3 |
facets-overview | 1.0.0 | filelock | 3.4.0 | idna | 2.10 |
ipykernel | 5.3.4 | ipython | 7.22.0 | ipython-genutils | 0.2.0 |
ipywidgets | 7.6.3 | jedi | 0.17.2 | Jinja2 | 2.11.3 |
jmespath | 0.10.0 | joblib | 1.0.1 | jsonschema | 3.2.0 |
jupyter-client | 6.1.12 | jupyter-core | 4.7.1 | jupyterlab-pygments | 0.1.2 |
jupyterlab-widgets | 1.0.0 | kiwisolver | 1.3.1 | koalas | 1.8.2 |
MarkupSafe | 2.0.1 | matplotlib | 3.4.2 | mistune | 0.8.4 |
nbclient | 0.5.3 | nbconvert | 6.0.7 | nbformat | 5.1.3 |
nest-asyncio | 1.5.1 | 筆記本 | 6.3.0 | numpy | 1.19.2 |
packaging | 20.9 | pandas | 1.2.4 | pandocfilters | 1.4.3 |
parso | 0.7.0 | patsy | 0.5.1 | pexpect | 4.8.0 |
pickleshare | 0.7.5 | Pillow | 8.2.0 | pip | 21.0.1 |
plotly | 5.3.1 | prometheus-client | 0.10.1 | prompt-toolkit | 3.0.17 |
protobuf | 3.17.2 | psycopg2 | 2.8.5 | ptyprocess | 0.7.0 |
pyarrow | 4.0.0 | pycparser | 2.20 | Pygments | 2.8.1 |
PyGObject | 3.36.0 | pyparsing | 2.4.7 | pyrsistent | 0.17.3 |
python-apt | 2.0.0+ubuntu0.20.4.6 | python-dateutil | 2.8.1 | python-engineio | 4.3.0 |
python-socketio | 5.4.1 | pytz | 2020.5 | pyzmq | 20.0.0 |
requests | 2.25.1 | requests-unixsocket | 0.2.0 | s3transfer | 0.3.7 |
scikit-learn | 0.24.1 | scipy | 1.6.2 | seaborn | 0.11.1 |
Send2Trash | 1.5.0 | setuptools | 52.0.0 | six | 1.15.0 |
ssh-import-id | 5.10 | statsmodels | 0.12.2 | tenacity | 8.0.1 |
terminado | 0.9.4 | testpath | 0.4.4 | threadpoolctl | 2.1.0 |
tornado | 6.1 | traitlets | 5.0.5 | unattended-upgrades | 0.1 |
urllib3 | 1.25.11 | virtualenv | 20.4.1 | wcwidth | 0.2.5 |
webencodings | 0.5.1 | wheel | 0.36.2 | widgetsnbextension | 3.5.1 |
已安裝的 R 程式庫
R 連結庫會從 2021-11-30 Microsoft CRAN 快照集安裝。
程式庫 | 版本 | 程式庫 | 版本 | 程式庫 | 版本 |
---|---|---|---|---|---|
askpass | 1.1 | assertthat | 0.2.1 | backports | 1.4.0 |
base | 4.1.2 | base64enc | 0.1-3 | bit | 4.0.4 |
bit64 | 4.0.5 | blob | 1.2.2 | boot | 1.3-28 |
brew | 1.0-6 | brio | 1.1.2 | broom | 0.7.10 |
bslib | 0.3.1 | cachem | 1.0.6 | callr | 3.7.0 |
caret | 6.0-90 | cellranger | 1.1.0 | chron | 2.3-56 |
class | 7.3-19 | cli | 3.1.0 | clipr | 0.7.1 |
叢集 | 2.1.2 | codetools | 0.2-18 | colorspace | 2.0-2 |
commonmark | 1.7 | compiler | 4.1.2 | config | 0.3.1 |
cpp11 | 0.4.1 | crayon | 1.4.2 | credentials | 1.3.2 |
curl | 4.3.2 | data.table | 1.14.2 | datasets | 4.1.2 |
DBI | 1.1.1 | dbplyr | 2.1.1 | 遞減 | 1.4.0 |
devtools | 2.4.2 | diffobj | 0.3.5 | digest | 0.6.28 |
dplyr | 1.0.7 | dtplyr | 1.1.0 | e1071 | 1.7-9 |
省略符號 | 0.3.2 | evaluate | 0.14 | fansi | 0.5.0 |
farver | 2.1.0 | fastmap | 1.1.0 | fontawesome | 0.2.2 |
forcats | 0.5.1 | foreach | 1.5.1 | foreign | 0.8-81 |
forge | 0.2.0 | fs | 1.5.0 | future | 1.23.0 |
future.apply | 1.8.1 | gargle | 1.2.0 | 泛型 | 0.1.1 |
gert | 1.4.3 | ggplot2 | 3.3.5 | gh | 1.3.0 |
gitcreds | 0.1.1 | glmnet | 4.1-3 | globals | 0.14.0 |
glue | 1.5.0 | googledrive | 2.0.0 | googlesheets4 | 1.0.0 |
gower | 0.2.2 | graphics | 4.1.2 | grDevices | 4.1.2 |
grid | 4.1.2 | gridExtra | 2.3 | gsubfn | 0.7 |
gtable | 0.3.0 | haven | 2.4.3 | highr | 0.9 |
hms | 1.1.1 | htmltools | 0.5.2 | htmlwidgets | 1.5.4 |
httpuv | 1.6.3 | httr | 1.4.2 | hwriter | 1.3.2 |
hwriterPlus | 1.0-3 | ids | 1.0.1 | ini | 0.3.1 |
ipred | 0.9-12 | isoband | 0.2.5 | iterators | 1.0.13 |
jquerylib | 0.1.4 | jsonlite | 1.7.2 | KernSmooth | 2.23-20 |
knitr | 1.36 | labeling | 0.4.2 | later | 1.3.0 |
lattice | 0.20-45 | Lava | 1.6.10 | 生命週期 | 1.0.1 |
listenv | 0.8.0 | lubridate | 1.8.0 | magrittr | 2.0.1 |
markdown | 1.1 | MASS | 7.3-54 | 矩陣 | 1.3-4 |
memoise | 2.0.1 | 方法 | 4.1.2 | mgcv | 1.8-38 |
mime | 0.12 | ModelMetrics | 1.2.2.2 | modelr | 0.1.8 |
munsell | 0.5.0 | nlme | 3.1-152 | nnet | 7.3-16 |
numDeriv | 2016.8-1.1 | openssl | 1.4.5 | parallel | 4.1.2 |
parallelly | 1.29.0 | pillar | 1.6.4 | pkgbuild | 1.2.0 |
pkgconfig | 2.0.3 | pkgload | 1.2.3 | plogr | 0.2.0 |
plyr | 1.8.6 | praise | 1.0.0 | prettyunits | 1.1.1 |
pROC | 1.18.0 | processx | 3.5.2 | prodlim | 2019.11.13 |
進度 | 1.2.2 | progressr | 0.9.0 | promises | 1.2.0.1 |
proto | 1.0.0 | proxy | 0.4-26 | ps | 1.6.0 |
purrr | 0.3.4 | r2d3 | 0.2.5 | R6 | 2.5.1 |
randomForest | 4.6-14 | rappdirs | 0.3.3 | rcmdcheck | 1.4.0 |
RColorBrewer | 1.1-2 | Rcpp | 1.0.7 | RcppEigen | 0.3.3.9.1 |
readr | 2.1.0 | readxl | 1.3.1 | recipes | 0.1.17 |
rematch | 1.0.1 | rematch2 | 2.1.2 | remotes | 2.4.1 |
reprex | 2.0.1 | reshape2 | 1.4.4 | rlang | 0.4.12 |
rmarkdown | 2.11 | RODBC | 1.3-19 | roxygen2 | 7.1.2 |
rpart | 4.1-15 | rprojroot | 2.0.2 | Rserve | 1.8-10 |
RSQLite | 2.2.8 | rstudioapi | 0.13 | rversions | 2.1.1 |
rvest | 1.0.2 | sass | 0.4.0 | scales | 1.1.1 |
selectr | 0.4-2 | sessioninfo | 1.2.1 | shape | 1.4.6 |
shiny | 1.7.1 | sourcetools | 0.1.7 | sparklyr | 1.7.2 |
SparkR | 3.2.0 | spatial | 7.3-11 | splines | 4.1.2 |
sqldf | 0.4-11 | SQUAREM | 2021.1 | stats | 4.1.2 |
stats4 | 4.1.2 | stringi | 1.7.6 | stringr | 1.4.0 |
survival | 3.2-13 | sys | 3.4 | tcltk | 4.1.2 |
TeachingDemos | 2.10 | testthat | 3.1.0 | tibble | 3.1.6 |
tidyr | 1.1.4 | tidyselect | 1.1.1 | tidyverse | 1.3.1 |
timeDate | 3043.102 | tinytex | 0.35 | tools | 4.1.2 |
tzdb | 0.2.0 | usethis | 2.1.3 | utf8 | 1.2.2 |
utils | 4.1.2 | uuid | 1.0-3 | vctrs | 0.3.8 |
viridisLite | 0.4.0 | vroom | 1.5.6 | waldo | 0.3.1 |
whisker | 0.4 | withr | 2.4.2 | xfun | 0.28 |
xml2 | 1.3.2 | xopen | 1.0.0 | xtable | 1.8-4 |
yaml | 2.2.1 | zip | 2.2.0 |
安裝 Java 和 Scala 函式庫 (Scala 2.12 叢群版本)
群組識別碼 | 成品識別碼 | 版本 |
---|---|---|
ANTLR | ANTLR | 2.7.7 |
com.amazonaws | amazon-kinesis-client | 1.12.0 |
com.amazonaws | aws-java-sdk-autoscaling | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudformation | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudfront | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudhsm | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudsearch | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudtrail | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudwatch | 1.11.655 |
com.amazonaws | aws-java-sdk-cloudwatchmetrics | 1.11.655 |
com.amazonaws | aws-java-sdk-codedeploy | 1.11.655 |
com.amazonaws | aws-java-sdk-cognitoidentity | 1.11.655 |
com.amazonaws | aws-java-sdk-cognitosync | 1.11.655 |
com.amazonaws | aws-java-sdk-config | 1.11.655 |
com.amazonaws | aws-java-sdk-core | 1.11.655 |
com.amazonaws | aws-java-sdk-datapipeline | 1.11.655 |
com.amazonaws | aws-java-sdk-directconnect | 1.11.655 |
com.amazonaws | aws-java-sdk-directory | 1.11.655 |
com.amazonaws | aws-java-sdk-dynamodb | 1.11.655 |
com.amazonaws | aws-java-sdk-ec2 | 1.11.655 |
com.amazonaws | aws-java-sdk-ecs | 1.11.655 |
com.amazonaws | aws-java-sdk-efs | 1.11.655 |
com.amazonaws | aws-java-sdk-elasticache | 1.11.655 |
com.amazonaws | aws-java-sdk-elasticbeanstalk | 1.11.655 |
com.amazonaws | aws-java-sdk-elasticloadbalancing | 1.11.655 |
com.amazonaws | aws-java-sdk-elastictranscoder | 1.11.655 |
com.amazonaws | aws-java-sdk-emr | 1.11.655 |
com.amazonaws | aws-java-sdk-glacier | 1.11.655 |
com.amazonaws | aws-java-sdk-glue | 1.11.655 |
com.amazonaws | aws-java-sdk-iam | 1.11.655 |
com.amazonaws | aws-java-sdk-importexport | 1.11.655 |
com.amazonaws | aws-java-sdk-kinesis | 1.11.655 |
com.amazonaws | aws-java-sdk-kms | 1.11.655 |
com.amazonaws | aws-java-sdk-lambda | 1.11.655 |
com.amazonaws | aws-java-sdk-logs | 1.11.655 |
com.amazonaws | aws-java-sdk-machinelearning | 1.11.655 |
com.amazonaws | aws-java-sdk-opsworks | 1.11.655 |
com.amazonaws | aws-java-sdk-rds | 1.11.655 |
com.amazonaws | aws-java-sdk-redshift | 1.11.655 |
com.amazonaws | aws-java-sdk-route53 | 1.11.655 |
com.amazonaws | aws-java-sdk-s3 | 1.11.655 |
com.amazonaws | aws-java-sdk-ses | 1.11.655 |
com.amazonaws | aws-java-sdk-simpledb | 1.11.655 |
com.amazonaws | aws-java-sdk-simpleworkflow | 1.11.655 |
com.amazonaws | aws-java-sdk-sns | 1.11.655 |
com.amazonaws | aws-java-sdk-sqs | 1.11.655 |
com.amazonaws | aws-java-sdk-ssm | 1.11.655 |
com.amazonaws | aws-java-sdk-storagegateway | 1.11.655 |
com.amazonaws | aws-java-sdk-sts | 1.11.655 |
com.amazonaws | aws-java-sdk-support | 1.11.655 |
com.amazonaws | aws-java-sdk-js-libraries | 1.11.22 |
com.amazonaws | aws-java-sdk-workspaces | 1.11.655 |
com.amazonaws | jmespath-java | 1.11.655 |
com.chuusai | shapeless_2.12 | 2.3.3 |
com.clearspring.analytics | stream | 2.9.6 |
com.databricks | Rserve | 1.8-3 |
com.databricks | jets3t | 0.7.1-0 |
com.databricks.scalapb | compilerplugin_2.12 | 0.4.15-10 |
com.databricks.scalapb | scalapb-runtime_2.12 | 0.4.15-10 |
com.esotericsoftware | kryo-shaded | 4.0.2 |
com.esotericsoftware | minlog | 1.3.0 |
com.fasterxml | classmate | 1.3.4 |
com.fasterxml.jackson.core | jackson-annotations | 2.12.3 |
com.fasterxml.jackson.core | jackson-core | 2.12.3 |
com.fasterxml.jackson.core | jackson-databind | 2.12.3 |
com.fasterxml.jackson.dataformat | jackson-dataformat-cbor | 2.12.3 |
com.fasterxml.jackson.datatype | jackson-datatype-joda | 2.12.3 |
com.fasterxml.jackson.module | jackson-module-paranamer | 2.12.3 |
com.fasterxml.jackson.module | jackson-module-scala_2.12 | 2.12.3 |
com.github.ben-manes.咖啡因 | caffeine | 2.3.4 |
com.github.fommil | jniloader | 1.1 |
com.github.fommil.netlib | 核心 | 1.1.2 |
com.github.fommil.netlib | native_ref-java | 1.1 |
com.github.fommil.netlib | native_ref-java-natives | 1.1 |
com.github.fommil.netlib | native_system java | 1.1 |
com.github.fommil.netlib | native_system-java-natives | 1.1 |
com.github.fommil.netlib | netlib-native_ref-linux-x86_64-natives | 1.1 |
com.github.fommil.netlib | netlib-native_system-linux-x86_64-natives | 1.1 |
com.github.luben | zstd-jni | 1.5.0-4 |
com.github.wendykierp | JTransforms | 3.1 |
com.google.code.findbugs | jsr305 | 3.0.0 |
com.google.code.gson | gson | 2.8.6 |
com.google.crypto.tink | tink | 1.6.0 |
com.google.flatbuffers | flatbuffers-java | 1.9.0 |
com.google.guava | guava | 15.0 |
com.google.protobuf | protobuf-java | 2.6.1 |
com.h2database | h2 | 1.4.195 |
com.helger | 分析工具 | 1.1.1 |
com.jcraft | jsch | 0.1.50 |
com.jolbox | bonecp | 0.8.0.版 |
com.lihaoyi | sourcecode_2.12 | 0.1.9 |
com.microsoft.azure | azure-data-lake-store-sdk | 2.3.9 |
com.microsoft.sqlserver | mssql-jdbc | 9.2.1.jre8 |
com.ning | compress-lzf | 1.0.3 |
com.sun.istack | istack-commons-runtime | 3.0.8 |
com.sun.mail | javax.mail | 1.5.2 |
com.tdunning | json | 1.8 |
com.thoughtworks.paranamer | paranamer | 2.8 |
com.trueaccord.lenses | lenses_2.12 | 0.4.12 |
com.twitter | chill-java | 0.10.0 |
com.twitter | chill_2.12 | 0.10.0 |
com.twitter | util-app_2.12 | 7.1.0 |
com.twitter | util-core_2.12 | 7.1.0 |
com.twitter | util-function_2.12 | 7.1.0 |
com.twitter | util-jvm_2.12 | 7.1.0 |
com.twitter | util-lint_2.12 | 7.1.0 |
com.twitter | util-registry_2.12 | 7.1.0 |
com.twitter | util-stats_2.12 | 7.1.0 |
com.typesafe | config | 1.2.1 |
com.typesafe.scala-logging | scala-logging_2.12 | 3.7.2 |
com.univocity | univocity-parsers | 2.9.1 |
com.zaxxer | HikariCP | 4.0.3 |
commons-cli | commons-cli | 1.2 |
commons-codec | commons-codec | 1.15 |
commons-collections | commons-collections | 3.2.2 |
commons-dbcp | commons-dbcp | 1.4 |
commons-fileupload | commons-fileupload | 1.3.3 |
commons-httpclient | commons-httpclient | 3.1 |
commons-io | commons-io | 2.8.0 |
commons-lang | commons-lang | 2.6 |
commons-logging | commons-logging | 1.1.3 |
commons-net | commons-net | 3.1 |
commons-pool | commons-pool | 1.5.4 |
dev.ludovic.netlib | arpack | 1.3.2 |
dev.ludovic.netlib | blas | 1.3.2 |
dev.ludovic.netlib | lapack | 1.3.2 |
hive-2.3__hadoop-3.2 | jets3t-0.7 | liball_deps_2.12 |
info.ganglia.gmetric4j | gmetric4j | 1.0.10 |
io.airlift | aircompressor | 0.21 |
io.delta | delta-sharing-spark_2.12 | 0.2.0 |
io.dropwizard.metrics | metrics-core | 4.1.1 |
io.dropwizard.metrics | metrics-graphite | 4.1.1 |
io.dropwizard.metrics | metrics-healthchecks | 4.1.1 |
io.dropwizard.metrics | metrics-jetty9 | 4.1.1 |
io.dropwizard.metrics | metrics-jmx | 4.1.1 |
io.dropwizard.metrics | metrics-json | 4.1.1 |
io.dropwizard.metrics | metrics-jvm | 4.1.1 |
io.dropwizard.metrics | metrics-servlet | 4.1.1 |
io.netty | netty-all | 4.1.68.Final |
io.prometheus | simpleclient | 0.7.0 |
io.prometheus | simpleclient_common | 0.7.0 |
io.prometheus | simpleclient_dropwizard | 0.7.0 |
io.prometheus | simpleclient_pushgateway | 0.7.0 |
io.prometheus | simpleclient_servlet | 0.7.0 |
io.prometheus.jmx | 收集器 | 0.12.0 |
jakarta.annotation | jakarta.annotation-api | 1.3.5 |
jakarta.servlet | jakarta.servlet-api | 4.0.3 |
jakarta.validation | jakarta.validation-api | 2.0.2 |
jakarta.ws.rs | jakarta.ws.rs-api | 2.1.6 |
javax.activation | 啟用 | 1.1.1 |
javax.annotation | javax.annotation-api | 1.3.2 |
javax.el | javax.el-api | 2.2.4 |
javax.jdo | jdo-api | 3.0.1 |
javax.transaction | jta | 1.1 |
javax.transaction | transaction-api | 1.1 |
javax.xml.bind | jaxb-api | 2.2.2 |
javax.xml.stream | stax-api | 1.0-2 |
javolution | javolution | 5.5.1 |
jline | jline | 2.14.6 |
joda-time | joda-time | 2.10.10 |
log4j | apache-log4j-extras | 1.2.17 |
log4j | log4j | 1.2.17 |
maven-trees | hive-2.3__hadoop-3.2 | liball_deps_2.12 |
net.java.dev.jna | jna | 5.8.0 |
net.razorvine | pyolite | 4.30 |
net.sf.jpam | jpam | 1.1 |
net.sf.opencsv | opencsv | 2.3 |
net.sf.supercsv | super-csv | 2.2.0 |
net.snowflake | snowflake-ingest-sdk | 0.9.6 |
net.snowflake | snowflake-jdbc | 3.13.3 |
net.snowflake | spark-snowflake_2.12 | 2.9.0-spark_3.1 |
net.sourceforge.f2j | arpack_combined_all | 0.1 |
org.acplt.remotetea | remotetea-oncrpc | 1.1.2 |
org.antlr | ST4 | 4.0.4 |
org.antlr | antlr-runtime | 3.5.2 |
org.antlr | antlr4-runtime | 4.8 |
org.antlr | stringtemplate | 3.2.1 |
org.apache.ant | ant | 1.9.2 |
org.apache.ant | ant-jsch | 1.9.2 |
org.apache.ant | ant-launcher | 1.9.2 |
org.apache.arrow | arrow-format | 2.0.0 |
org.apache.arrow | arrow-memory-core | 2.0.0 |
org.apache.arrow | arrow-memory-netty | 2.0.0 |
org.apache.arrow | arrow-vector | 2.0.0 |
org.apache.avro | Avro | 1.10.2 |
org.apache.avro | avro-ipc | 1.10.2 |
org.apache.avro | avro-mapred | 1.10.2 |
org.apache.commons | commons-compress | 1.21 |
org.apache.commons | commons-crypto | 1.1.0 |
org.apache.commons | commons-lang3 | 3.12.0 |
org.apache.commons | commons-math3 | 3.4.1 |
org.apache.commons | commons-text | 1.6 |
org.apache.curator | curator-client | 2.13.0 |
org.apache.curator | curator-framework | 2.13.0 |
org.apache.curator | curator-recipes | 2.13.0 |
org.apache.derby | Derby | 10.14.2.0 |
org.apache.hadoop | hadoop-client-api | 3.3.1-databricks |
org.apache.hadoop | hadoop-client-runtime | 3.3.1 |
org.apache.hive | hive-beeline | 2.3.9 |
org.apache.hive | hive-cli | 2.3.9 |
org.apache.hive | hive-jdbc | 2.3.9 |
org.apache.hive | hive-llap-client | 2.3.9 |
org.apache.hive | hive-llap-common | 2.3.9 |
org.apache.hive | hive-serde | 2.3.9 |
org.apache.hive | hive-shims | 2.3.9 |
org.apache.hive | hive-storage-api | 2.7.2 |
org.apache.hive.shims | hive-shims-0.23 | 2.3.9 |
org.apache.hive.shims | hive-shims-common | 2.3.9 |
org.apache.hive.shims | hive-shims-scheduler | 2.3.9 |
org.apache.htrace | htrace-core4 | 4.1.0-incubating |
org.apache.httpcomponents | HttpClient | 4.5.13 |
org.apache.httpcomponents | httpcore | 4.4.12 |
org.apache.ivy | ivy | 2.5.0 |
org.apache.mesos | mesos-shaded-protobuf | 1.4.0 |
org.apache.orc | orc-core | 1.6.12 |
org.apache.orc | orc-mapreduce | 1.6.12 |
org.apache.orc | orc-shims | 1.6.12 |
org.apache.parquet | parquet-column | 1.12.0-databricks-0003 |
org.apache.parquet | parquet-common | 1.12.0-databricks-0003 |
org.apache.parquet | parquet-encoding | 1.12.0-databricks-0003 |
org.apache.parquet | parquet-format-structure | 1.12.0-databricks-0003 |
org.apache.parquet | parquet-hadoop | 1.12.0-databricks-0003 |
org.apache.parquet | parquet-jackson | 1.12.0-databricks-0003 |
org.apache.thrift | libfb303 | 0.9.3 |
org.apache.thrift | libthrift | 0.12.0 |
org.apache.xbean | xbean-asm9-shaded | 4.20 |
org.apache.yetus | audience-annotations | 0.5.0 |
org.apache.zookeeper | ZooKeeper | 3.6.2 |
org.apache.zookeeper | zookeeper-jute | 3.6.2 |
org.checkerframework | checker-qual | 3.5.0 |
org.codehaus.jackson | jackson-core-asl | 1.9.13 |
org.codehaus.jackson | jackson-mapper-asl | 1.9.13 |
org.codehaus.janino | commons-compiler | 3.0.16 |
org.codehaus.janino | janino | 3.0.16 |
org.datanucleus | datanucleus-api-jdo | 4.2.4 |
org.datanucleus | datanucleus-core | 4.1.17 |
org.datanucleus | datanucleus-rdbms | 4.1.19 |
org.datanucleus | javax.jdo | 3.2.0-m3 |
org.eclipse.jetty | jetty-client | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-continuation | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-http | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-io | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-jndi | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-plus | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-proxy | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-security | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-server | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-servlet | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-servlets | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-util | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-util-ajax | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-webapp | 9.4.43.v20210629 |
org.eclipse.jetty | jetty-xml | 9.4.43.v20210629 |
org.eclipse.jetty.websocket | websocket-api | 9.4.43.v20210629 |
org.eclipse.jetty.websocket | websocket-client | 9.4.43.v20210629 |
org.eclipse.jetty.websocket | websocket-common | 9.4.43.v20210629 |
org.eclipse.jetty.websocket | websocket-server | 9.4.43.v20210629 |
org.eclipse.jetty.websocket | websocket-servlet | 9.4.43.v20210629 |
org.fusesource.leveldbjni | leveldbjni-all | 1.8 |
org.glassfish.hk2 | hk2-api | 2.6.1 |
org.glassfish.hk2 | hk2-locator | 2.6.1 |
org.glassfish.hk2 | hk2-utils | 2.6.1 |
org.glassfish.hk2 | osgi-resource-locator | 1.0.3 |
org.glassfish.hk2.external | aopalliance-repackaged | 2.6.1 |
org.glassfish.hk2.external | jakarta.inject | 2.6.1 |
org.glassfish.jaxb | jaxb-runtime | 2.3.2 |
org.glassfish.jersey.containers | jersey-container-servlet | 2.34 |
org.glassfish.jersey.containers | jersey-container-servlet-core | 2.34 |
org.glassfish.jersey.core | jersey-client | 2.34 |
org.glassfish.jersey.core | jersey-common | 2.34 |
org.glassfish.jersey.core | jersey-server | 2.34 |
org.glassfish.jersey.inject | jersey-hk2 | 2.34 |
org.hibernate.validator | hibernate-validator | 6.1.0.Final |
org.javassist | javassist | 3.25.0-GA |
org.jboss.logging | jboss-logging | 3.3.2.Final |
org.jdbi | jdbi | 2.63.1 |
org.jetbrains | annotations | 17.0.0 |
org.joda | joda-convert | 1.7 |
org.jodd | jodd-core | 3.5.2 |
org.json4s | json4s-ast_2.12 | 3.7.0-M11 |
org.json4s | json4s-core_2.12 | 3.7.0-M11 |
org.json4s | json4s-jackson_2.12 | 3.7.0-M11 |
org.json4s | json4s-scalap_2.12 | 3.7.0-M11 |
org.lz4 | lz4-java | 1.7.1 |
org.mariadb.jdbc | mariadb-java-client | 2.2.5 |
org.objenesis | objenesis | 2.5.1 |
org.postgresql | postgresql | 42.2.19 |
org.roaringbitmap | RoaringBitmap | 0.9.14 |
org.roaringbitmap | 墊片 | 0.9.14 |
org.rocksdb | rocksdbjni | 6.20.3 |
org.rosuda.REngine | REngine | 2.1.0 |
org.scala-lang | scala-compiler_2.12 | 2.12.14 |
org.scala-lang | scala-library_2.12 | 2.12.14 |
org.scala-lang | scala-reflect_2.12 | 2.12.14 |
org.scala-lang.modules | scala-collection-compat_2.12 | 2.4.3 |
org.scala-lang.modules | scala-parser-combinators_2.12 | 1.1.2 |
org.scala-lang.modules | scala-xml_2.12 | 1.2.0 |
org.scala-sbt | test-interface | 1.0 |
org.scalacheck | scalacheck_2.12 | 1.14.2 |
org.scalactic | scalactic_2.12 | 3.0.8 |
org.scalanlp | breeze-macros_2.12 | 1.2 |
org.scalanlp | breeze_2.12 | 1.2 |
org.scalatest | scalatest_2.12 | 3.0.8 |
org.slf4j | jcl-over-slf4j | 1.7.30 |
org.slf4j | jul-to-slf4j | 1.7.30 |
org.slf4j | slf4j-api | 1.7.30 |
org.slf4j | slf4j-log4j12 | 1.7.30 |
org.spark-project.spark | 未使用的 | 1.0.0 |
org.springframework | spring-core | 4.1.4.RELEASE |
org.springframework | spring-test | 4.1.4.RELEASE |
org.threeten | threeten-extra | 1.5.0 |
org.tukaani | xz | 1.8 |
org.typelevel | algebra_2.12 | 2.0.1 |
org.typelevel | cats-kernel_2.12 | 2.1.1 |
org.typelevel | macro-compat_2.12 | 1.1.1 |
org.typelevel | spire-macros_2.12 | 0.17.0 |
org.typelevel | spire-platform_2.12 | 0.17.0 |
org.typelevel | spire-util_2.12 | 0.17.0 |
org.typelevel | spire_2.12 | 0.17.0 |
org.wildfly.openssl | wildfly-openssl | 1.0.7.Final |
org.xerial | sqlite-jdbc | 3.8.11.2 |
org.xerial.snappy | snappy-java | 1.1.8.4 |
org.yaml | snakeyaml | 1.24 |
oro | oro | 2.0.8 |
pl.edu.icm | JLargeArrays | 1.5 |
software.amazon.ion | ion-java | 1.0.2 |
stax | stax-api | 1.0.1 |