Udostępnij za pośrednictwem

Databricks Runtime 10.2 (EoS)

  • Artykuł

Uwaga

Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby uzyskać datę zakończenia pomocy technicznej, zobacz Historia zakończenia pomocy technicznej. Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w temacie Databricks Runtime release notes versions and compatibility (Wersje i zgodność środowiska Databricks Runtime).

Poniższe informacje o wersji zawierają informacje o środowiskach Databricks Runtime 10.2 i Databricks Runtime 10.2 Photon obsługiwanych przez platformę Apache Spark 3.2.0. Usługa Databricks wydała tę wersję w grudniu 2021 r. Photon jest w publicznej wersji zapoznawczej.

Nowe funkcje i ulepszenia

Używanie plików w repozytoriach z przesyłaniem strumieniowym platformy Spark

Teraz możesz uzyskać dostęp do plików w repozytoriach z poziomu przesyłania strumieniowego platformy Spark.

Narzędzia usługi Databricks dodaje polecenie instalacji aktualizacji

Nowe polecenie jest podobne do dbutils.fs.updateMountpolecenia , ale to nowe dbutils.fs.mount polecenie aktualizuje istniejący punkt instalacji zamiast tworzyć nowe. Zobacz polecenie updateMount (dbutils.fs.updateMount).

Usługa Delta Lake obsługuje zmienianie nazw kolumn (publiczna wersja zapoznawcza)

Usługa Delta Lake obsługuje teraz zmianę nazw kolumn. Aby zmienić nazwę kolumny tabeli delty, należy uaktualnić wersję tabeli delta, a następnie ustawić tryb mapowania kolumn na mapowanie nazw. Zobacz Zmienianie nazwy i usuwanie kolumn za pomocą mapowania kolumn usługi Delta Lake.

Historia tabel usługi Delta Lake dodaje informacje o wersji środowiska Databricks Runtime

Gdy zapis jest teraz zapisywany w tabeli delty, informacje o wersji środowiska Databricks Runtime, która dokonała zapisu, również są rejestrowane. Aby uzyskać informacje o wersji, uruchom DESCRIBE HISTORY polecenie w tabeli, a następnie wyświetl kolumnę engineInfo w danych wyjściowych. Zobacz DESCRIBE HISTORY i Pracuj z historią tabel usługi Delta Lake.

Program Databricks Utilities dodaje najnowsze informacje o czasie modyfikacji, gdy katalogi są wyświetlane

Polecenie dbutils.fs.ls służące do wyświetlania listy zawartości katalogu powoduje teraz wyświetlenie modificationTime pola. To pole zawiera najnowszy czas modyfikacji dla każdego wymienionego pliku lub katalogu. Zobacz polecenie ls (dbutils.fs.ls).

Usługa Spark SQL dodaje funkcję zwracającą approx_top_k najważniejsze elementy i ich liczby

Nowa approx_top_k funkcja zwraca najczęściej występujące wartości elementów wraz z ich przybliżonymi liczbami dla określonego wyrażenia. Przykłady obejmują:

df = spark.sql('SELECT approx_top_k(col, 10, 100) FROM VALUES (0), (1), (1), (2), (2), (2) AS tab(col)')

display(df)

import pyspark.sql.functions as F

df = spark.createDataFrame([
       (0,), (1,), (1,), (2,), (2,), (2,)
     ]).select(F.expr('approx_top_k(_1, 10)'))

display(df)

Wynikiem uruchomienia jednego z przykładów jest:

[{"item": 2, "count": 3}, {"item": 1, "count": 2}, {"item": 0, "count": 1}]

Zobacz approx_top_k funkcji agregującej.

Trigger.AvailableNow jest teraz dostępna w języku Python, a także w języku Scala

Ta zmiana obsługuje zapytania Trigger.AvailableNow przesyłania strumieniowego źródła delta w języku Python, a także Język Scala. Środowisko Databricks Runtime 10.1 wprowadziło obsługę tego wyzwalacza w języku Scala. Środowisko Databricks Runtime 10.2 obsługuje teraz również ten wyzwalacz w języku Python. Zobacz pokrycie w temacie Trigger.AvailableNowCo to jest automatyczne ładowanie?.

Automatyczne ładowanie obsługuje teraz ewolucję schematu dla avro (publiczna wersja zapoznawcza)

Zobacz Konfigurowanie wnioskowania schematu i ewolucji w module automatycznego ładowania.

Uaktualnienia biblioteki

  • Uaktualnione biblioteki języka Python:
    • filelock z wersji 3.3.1 do 3.4.0
    • wykres z wersji 5.3.0 do 5.3.1
  • Uaktualnione biblioteki języka R:
    • od 4.1.1 do 4.1.2
    • Kompilator z wersji 4.1.1 do 4.1.2
    • zestawy danych z wersji 4.1.1 do 4.1.2
    • grafika z wersji 4.1.1 do 4.1.2
    • grDevices z wersji 4.1.1 do 4.1.2
    • siatka z 4.1.1 do 4.1.2
    • metody z wersji 4.1.1 do 4.1.2
    • równoległe z wersji 4.1.1 do 4.1.2
    • Rserve od 1.8-8 do 1.8-10
    • linie od 4.1.1 do 4.1.2
    • statystyki z 4.1.1 do 4.1.2
    • stats4 z 4.1.1 do 4.1.2
    • tcltk z wersji 4.1.1 do 4.1.2
    • narzędzia z wersji 4.1.1 do 4.1.2
    • Narzędzia z wersji 4.1.1 do 4.1.2
    • Backports z wersji 1.2.1 do 1.4.0
    • miotła od 0.7.9 do 0.7.10
    • interfejs wiersza polecenia z wersji 3.0.1 do 3.1.0
    • cpp11 z 0.4.0 do 0.4.1
    • kredka z 1.4.1 do 1.4.2
    • poświadczenia z wersji 1.3.1 do 1.3.2
    • przyszłość z wersji 1.22.1 do 1.23.0
    • gert z 1.4.1 do 1.4.3
    • glmnet z 4.1-2 do 4.1-3
    • klej z 1.4.2 do 1.5.0
    • Zapamiętywanie z wersji 2.0.0 do 2.0.1
    • równolegle z wersji 1.28.1 do 1.29.0
    • readr z wersji 2.0.2 do 2.1.0
    • sessioninfo z wersji 1.1.1 do 1.2.1
    • stringi z 1.7.5 do 1.7.6
    • tibble z 3.1.5 do 3.1.6
    • tinytex z 0.34 do 0.35
    • tzdb z 0.1.2 do 0.2.0
    • usethis z 2.1.2 do 2.1.3
    • uuid z 0.1-4 do 1.0-3
    • vroom od 1.5.5 do 1.5.6
    • xfun od 0.27 do 0.28
  • Uaktualnione biblioteki Java:
    • com.fasterxml.jackson z wersji 2.12.2 do 2.12.3
    • io.aircompressor od 0.19 do 0.21
    • io.netty.netty-all from 4.1.63.Final do 4.1.68.Final
    • joda-time.joda-time od 2.10.5 do 2.10.10
    • org.apache.commons.commons-compress z wersji 1.20 do 1.21
    • org.apache.orc z wersji 1.6.10 do 1.6.12
    • org.eclipse.jetty z wersji 9.4.40.v20210413 do 9.4.43.v20210629
    • org.scalanlp.breeze-macros_2.12 z 1.0 do 1.2
    • org.scalanlp.breeze_2.12 z wersji 1.0 do 1.2
    • org.org.typelevel.algebra_2.12 z wersji 2.0.0 do 2.0.1
    • org.typelevel.cats-kernel_2.12 z 2.0.0 do 2.0.1

Apache Spark

Środowisko Databricks Runtime 10.2 obejmuje platformę Apache Spark 3.2.0. Ta wersja zawiera wszystkie poprawki i ulepszenia platformy Spark zawarte w środowisku Databricks Runtime 10.1 (EoS), a także następujące dodatkowe poprawki błędów i ulepszenia wprowadzone na platformie Spark:

  • [SPARK-37447] [SQL] Cache LogicalPlan.isStreaming() powoduje opóźnienie
  • [SPARK-37468] [SQL] Obsługa interwałów ANSI i timestampNTZ dla unionEstimation
  • [SPARK-37464] [SQL] SCHEMA i DATABASE powinny być po prostu aliasami namespace
  • [SPARK-37452] [SQL] Char i Varchar przerywają zgodność z poprzednimi wersjami między wersjami 3.1 i v2
  • [SPARK-36861] [SQL] Użyj yyyy-MM-dd jako wzorca daty w odnajdywania partycji
  • [SPARK-37456] [SQL] UTWÓRZ PRZESTRZEŃ NAZW powinna kwalifikować się do polecenia w wersji 2
  • [SPARK-37357] [SQL] Dodawanie małego współczynnika partycji dla partycji ponownego równoważenia
  • [SPARK-37446] [SQL] Użyj odbicia dla polecenia getWithoutRegisterFns, aby umożliwić tworzenie różnych wersji programu Hive
  • [SPARK-37444] [SQL] ALTER NAMESPACE ... SET LOCATION powinna spójnie obsługiwać pustą lokalizację w komendach wersja 1 i wersja 2.
  • [SPARK-36357] [SQL] Obsługa znacznika czasu wypychania bez strefy czasowej dla orc
  • [SPARK-36346] [SQL] Obsługa typu TimestampNTZ w źródle pliku Orc
  • [SPARK-36646] [SQL] Wypychanie grupy według kolumny partycji dla agregacji
  • [SPARK-34960] [SQL] Wypychanie agregacji dla orc
  • [SPARK-37386] [SQL] Uprość optymalizacjęSkewedJoin, aby nie uruchamiać ewaluatora kosztów
  • [SPARK-36073] [SQL] Poprawki i ulepszenia odpowiednikówExpressions
  • [SPARK-35352] [SQL] Dodawanie generacji kodu na potrzeby pełnego sprzężenia scalania sortowania zewnętrznego
  • [SPARK-37292] [SQL] Usuwa sprzężenia zewnętrzne, jeśli ma tylko funkcję DISTINCT po stronie przesyłanej strumieniowo z aliasem
  • [SPARK-37371] [SQL] Funkcja UnionExec powinna obsługiwać kolumny, jeśli wszystkie elementy podrzędne obsługują kolumnę
  • [SPARK-36645] [SQL] Wypychanie agregacji (minimalna/maksymalna/liczba) dla parquet
  • [SPARK-37379] [SQL] Dodawanie przycinania wzorca drzewa do reguły CTESubstitution
  • [SPARK-37332] [SQL] Zezwalaj na interwały ANSI w ALTER TABLE .. ADD COLUMNS
  • [SPARK-37224] [SS] Optymalizowanie ścieżki zapisu u dostawcy magazynu stanów bazy danych RocksDB
  • [SPARK-37304] [SQL] Zezwalaj na interwały ANSI w wersji 2 ALTER TABLE .. REPLACE COLUMNS
  • [SPARK-36924] [SQL] RZUTOWANIE między interwałami ANSI i IntegralType
  • [SPARK-37289] [SQL] Remove partitionSchemaOption , funkcja
  • [SPARK-37270] [SQL] Naprawa wypychania zwijanego do gałęzi CaseWhen, jeśli wartość elseValue jest pusta
  • [SPARK-35345] [SQL] Dodawanie testów Parquet do obiektu BloomFilterBenchmark
  • [SPARK-37341] [SQL] Unikaj niepotrzebnego buforu i kopiowania w pełnym sprzężeniach scalania sortowania zewnętrznego
  • [SPARK-37266] [SQL] Wyświetlanie tekstu można SELECT zapytań
  • [SPARK-37288] [PYTHON][3.2] Backport od aktualizacji adnotacji
  • [SPARK-37262] [SQL] Nie rejestruj pustego agregowania i grupowania według w narzędziu JDBCScan
  • [SPARK-37283] [SQL] Nie próbuj przechowywać tabeli w wersji 1 zawierającej interwały ANSI w formacie zgodnym z programem Hive
  • [SPARK-37221] [SQL] Interfejs API przypominający zbieranie w narzędziu SparkPlan powinien obsługiwać dane wyjściowe kolumnowe
  • [SPARK-37202] [SQL] Śledzenie określonych funkcji tymczasowych przy użyciu funkcji AnalysisContext
  • [SPARK-37023] [CORE] Unikaj pobierania stanu scalania, gdy funkcja shuffleMergeEnabled jest fałszywa w przypadku mieszaniaDependency podczas ponawiania próby
  • [SPARK-37307] [CORE] Nie pobieraj połączenia JDBC dla pustych partycji
  • [SPARK-37267] [SQL] OptimizeSkewInRebalancePartitions obsługują optymalizowanie węzła innego niż główny
  • [SPARK-36799] [SQL] Przekazywanie nazwy queryExecution w interfejsie wiersza polecenia
  • [SPARK-37261] [SQL] Zezwalaj na dodawanie partycji z interwałami ANSI w usłudze DSv2
  • [SPARK-37203] [SQL] Napraw wyjątek NotSerializableException podczas obserwowania za pomocą klasy TypedImperativeAggregate
  • [SPARK-37199] [SQL] Dodawanie pola deterministycznego do elementu QueryPlan
  • [SPARK-37253] [PYTHON] try_simplify_traceback nie powinna zakończyć się niepowodzeniem, gdy tb_frame.f_lineno ma wartość Brak
  • [SPARK-37214] [SQL] Analiza zapytań niepowodzeniem wcześniej z nieprawidłowymi identyfikatorami
  • [SPARK-37240] [SQL] Obsługa interwałów ANSI według ColumnVectorUtils.populate()
  • [SPARK-35437] [SQL] Filtrowanie partycji Hive po stronie klienta przy użyciu wyrażeń
  • [SPARK-32940] [SQL] Zbieranie, najpierw i ostatnio powinny być funkcjami agregacji deterministycznej
  • [SPARK-37231] [SQL] Dynamiczne zapisy/odczyty partycji interwału ANSI
  • [SPARK-37038] [SQL] Przykładowe wypchnięcie DSV2
  • [SPARK-36665] [SQL] Dodawanie większej liczby nieuwzroszeń operatorów
  • [SPARK-37150] [SQL] Migrowanie PRZESTRZENI NAZW DESCRIBE do domyślnego używania polecenia V2
  • [SPARK-37196] [SQL] Funkcja HiveDecimal enforcePrecisionScale nie zwróciła wartości null
  • [SPARK-37212] [SQL] Popraw implementację zagregowanego wypychania.
  • [SPARK-37190] [SQL] Ulepszanie komunikatów o błędach rzutowania w trybie ANSI
  • [SPARK-37161] [SQL] Element RowToColumnConverter obsługuje typ AnsiIntervalType
  • [SPARK-37160] [SQL] Dodaj konfigurację, aby opcjonalnie wyłączyć dopełnianie dla typu char
  • [SPARK-36554] [SQL][PYTHON] Uwidaczniaj wyrażenie make_date w pliku functions.scala
  • [SPARK-37200] [SQL] Indeks upuszczania obsługi dla źródła danych w wersji 2
  • [SPARK-37179] [SQL] Tryb ANSI: dodaj konfigurację, aby zezwolić na rzutowanie między wartościami Datetime i Numeryczne
  • [SPARK-37168] [SQL] Ulepszanie komunikatów o błędach dla funkcji i operatorów SQL w trybie ANSI
  • [SPARK-36935] [SQL] Rozszerzanie obiektu ParquetSchemaConverter w celu obliczenia powtórzeń i poziomu definicji Parquet
  • [SPARK-37066] [SQL] Popraw komunikat o błędzie, aby pokazać ścieżkę pliku, gdy nie można odczytać następnego pliku
  • [SPARK-32567] [SQL] Dodawanie generacji kodu w celu uzyskania pełnego sprzężenia skrótu połączonego z pełną zewnętrzną mieszania
  • [SPARK-37176] [SQL] Synchronizacja logiki obsługi wyjątków metody JsonInferSchema#infer przy użyciu metody JacksonParser#parse
  • [SPARK-37149] [SQL] Ulepszanie komunikatów o błędach dla wyjątków przepełnienia arytmetycznego w trybie ANSI
  • [SPARK-37136] [SQL] Usuwanie kodu dotyczącego funkcji hive buildin, ale nie implementowanie na platformie Spark
  • [SPARK-16280][SPARK-37082] [SQL] Implementuje funkcję agregacji histogram_numeric, która obsługuje częściową agregację.
  • [SPARK-36975] [SQL] Poprawianie metryk klienta hive w programie HiveClientImpl

Aktualizacje konserwacyjne

Zobacz Aktualizacje konserwacji środowiska Databricks Runtime 10.2.

Środowisko systemu

  • System operacyjny: Ubuntu 20.04.3 LTS
  • Java: Zulu 8.58.0.13-CA-linux64
  • Scala: 2.12.14
  • Python: 3.8.10
  • R: 4.1.2
  • Delta Lake: 1.1.0

Zainstalowane biblioteki języka Python

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
Antergos Linux 2015.10 (rolling ISO) appdirs 1.4.4 argon2-cffi 20.1.0
async-generator 1.10 attrs 20.3.0 backcall 0.2.0
bidict 0.21.4 wybielacz 3.3.0 boto3 1.16.7
botocore 1.19.7 certifi 2020.12.5 cffi 1.14.5
chardet 4.0.0 rowerzysta 0.10.0 Cython 0.29.23
dbus-python 1.2.16 dekorator 5.0.6 defusedxml 0.7.1
distlib 0.3.3 dystrybucja informacji 0.23ubuntu1 punkty wejścia 0.3
aspekty — omówienie 1.0.0 filelock 3.4.0 idna 2.10
ipykernel 5.3.4 ipython 7.22.0 ipython-genutils 0.2.0
ipywidgets 7.6.3 jedi 0.17.2 Jinja2 2.11.3
jmespath 0.10.0 joblib 1.0.1 jsonschema 3.2.0
jupyter-client 6.1.12 jupyter-core 4.7.1 jupyterlab-pygments 0.1.2
jupyterlab-widgets 1.0.0 kiwisolver 1.3.1 Koale 1.8.2
MarkupSafe 2.0.1 matplotlib 3.4.2 mistune 0.8.4
nbclient 0.5.3 nbconvert 6.0.7 nbformat 5.1.3
nest-asyncio 1.5.1 notes 6.3.0 numpy 1.19.2
opakowanie 20.9 Pandas 1.2.4 pandocfilters 1.4.3
parso 0.7.0 Patsy 0.5.1 pexpect 4.8.0
pickleshare 0.7.5 Poduszka 8.2.0 pip 21.0.1
kreślenie 5.3.1 prometheus-client 0.10.1 prompt-toolkit 3.0.17
protobuf 3.17.2 psycopg2 2.8.5 ptyprocess 0.7.0
pyarrow 4.0.0 pycparser 2,20 Pygments 2.8.1
PyGObject 3.36.0 pyparsing 2.4.7 pirstent 0.17.3
python-apt 2.0.0+ubuntu0.20.4.6 python-dateutil 2.8.1 python-engineio 4.3.0
python-socketio 5.4.1 pytz 2020.5 pyzmq 20.0.0
żądania 2.25.1 requests-unixsocket 0.2.0 s3transfer 0.3.7
scikit-learn 0.24.1 scipy 1.6.2 seaborn 0.11.1
Send2Trash 1.5.0 setuptools 52.0.0 Sześć 1.15.0
ssh-import-id 5.10 statsmodels 0.12.2 Wytrzymałość 8.0.1
terminado 0.9.4 ścieżka testowa 0.4.4 threadpoolctl 2.1.0
tornado 6.1 traitlety 5.0.5 nienadzorowane uaktualnienia 0.1
urllib3 1.25.11 virtualenv 20.4.1 wcwidth 0.2.5
webencodings 0.5.1 koło 0.36.2 widgetsnbextension 3.5.1

Zainstalowane biblioteki języka R

Biblioteki języka R są instalowane z migawki usługi Microsoft CRAN w dniach 2021-11-30.

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
askpass 1.1 assertthat 0.2.1 backports (backports) 1.4.0
base 4.1.2 base64enc 0.1-3 bitowe 4.0.4
bit64 4.0.5 blob 1.2.2 rozruch 1.3-28
warzyć 1.0-6 Brio 1.1.2 miotła 0.7.10
bslib 0.3.1 cachem 1.0.6 obiekt wywołujący 3.7.0
caret 6.0-90 cellranger 1.1.0 chron 2.3-56
class 7.3-19 cli 3.1.0 clipr 0.7.1
cluster 2.1.2 codetools 0.2-18 przestrzeń kolorów 2.0-2
commonmark 1,7 — kompilator 4.1.2 config 0.3.1
cpp11 0.4.1 kredka 1.4.2 poświadczenia 1.3.2
lok 4.3.2 data.table 1.14.2 usługi Power BI 4.1.2
DBI 1.1.1 dbplyr 2.1.1 Desc 1.4.0
devtools 2.4.2 diffobj 0.3.5 trawić 0.6.28
dplyr 1.0.7 dtplyr 1.1.0 e1071 1.7-9
wielokropek 0.3.2 evaluate 0,14 fani 0.5.0
farver 2.1.0 szybka mapa 1.1.0 fontawesome 0.2.2
forcats 0.5.1 foreach 1.5.1 zagraniczny 0.8-81
kuźnia 0.2.0 Fs 1.5.0 przyszłość 1.23.0
future.apply 1.8.1 płukać gardło 1.2.0 Generyczne 0.1.1
Gert 1.4.3 ggplot2 3.3.5 Gh 1.3.0
gitcreds 0.1.1 glmnet 4.1-3 globalna 0.14.0
klej 1.5.0 googledrive 2.0.0 googlesheets4 1.0.0
Gower 0.2.2 grafika 4.1.2 grDevices 4.1.2
siatka 4.1.2 gridExtra 2.3 gsubfn 0,7
gtable 0.3.0 przystań 2.4.3 wysoki 0,9
Hms 1.1.1 htmltools 0.5.2 htmlwidgets 1.5.4
httpuv 1.6.3 httr 1.4.2 hwriter 1.3.2
hwriterPlus 1.0-3 Identyfikatory 1.0.1 ini 0.3.1
ipred 0.9-12 isoband 0.2.5 Iteratory 1.0.13
jquerylib 0.1.4 jsonlite 1.7.2 KernSmooth 2.23-20
knitr 1.36 Etykietowania 0.4.2 później 1.3.0
krata 0.20-45 lawa 1.6.10 cykl życia 1.0.1
nasłuchiwanie 0.8.0 lubridate 1.8.0 magrittr 2.0.1
Markdown 1.1 MASA 7.3-54 Macierz 1.3-4
zapamiętywanie 2.0.1 metody 4.1.2 mgcv 1.8-38
mim 0,12 Metryki modelu 1.2.2.2 modeler 0.1.8
munsell 0.5.0 nlme 3.1-152 nnet 7.3-16
numDeriv 2016.8-1.1 openssl 1.4.5 parallel 4.1.2
równolegle 1.29.0 filar 1.6.4 pkgbuild 1.2.0
pkgconfig 2.0.3 pkgload 1.2.3 plogr 0.2.0
plyr 1.8.6 pochwała 1.0.0 prettyunits 1.1.1
Proc 1.18.0 processx 3.5.2 prodlim 2019.11.13
Postęp 1.2.2 progressr 0.9.0 Obietnice 1.2.0.1
Proto 1.0.0 proxy 0.4-26 PS 1.6.0
purrr 0.3.4 r2d3 0.2.5 R6 2.5.1
randomForest 4.6-14 rappdirs 0.3.3 rcmdcheck 1.4.0
RColorBrewer 1.1-2 Rcpp 1.0.7 RcppEigen 0.3.3.9.1
readr 2.1.0 readxl 1.3.1 przepisy 0.1.17
rewanż 1.0.1 rewanż2 2.1.2 Piloty 2.4.1
reprex 2.0.1 zmień kształt2 1.4.4 rlang 0.4.12
rmarkdown 2,11 RODBC 1.3-19 roxygen2 7.1.2
rpart 4.1-15 rprojroot 2.0.2 Rserve 1.8-10
RSQLite 2.2.8 rstudioapi 0,13 rversions (rversions) 2.1.1
rvest 1.0.2 Sass 0.4.0 waga 1.1.1
selektor 0.4-2 sessioninfo 1.2.1 kształt 1.4.6
błyszczący 1.7.1 sourcetools 0.1.7 sparklyr 1.7.2
SparkR 3.2.0 przestrzenny 7.3-11 Splajnów 4.1.2
sqldf 0.4-11 KWADRAT 2021.1 Statystyki 4.1.2
stats4 4.1.2 stringi 1.7.6 stringr 1.4.0
przetrwanie 3.2-13 sys 3.4 tcltk 4.1.2
NauczanieDemos 2.10 testthat 3.1.0 tibble 3.1.6
tidyr 1.1.4 tidyselect 1.1.1 tidyverse 1.3.1
timeDate 3043.102 tinytex 0,35 tools 4.1.2
tzdb 0.2.0 usethis 2.1.3 utf8 1.2.2
narzędzia 4.1.2 uuid 1.0-3 vctrs 0.3.8
viridisLite 0.4.0 Vroom 1.5.6 Waldo 0.3.1
wąs 0,4 withr 2.4.2 xfun 0,28
xml2 1.3.2 xopen 1.0.0 xtable 1.8-4
yaml 2.2.1 zamek 2.2.0

Zainstalowane biblioteki Java i Scala (wersja klastra Scala 2.12)

Identyfikator grupy Identyfikator artefaktu Wersja
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws aws-java-sdk-autoscaling 1.11.655
com.amazonaws aws-java-sdk-cloudformation 1.11.655
com.amazonaws aws-java-sdk-cloudfront 1.11.655
com.amazonaws aws-java-sdk-cloudhsm 1.11.655
com.amazonaws aws-java-sdk-cloudsearch 1.11.655
com.amazonaws aws-java-sdk-cloudtrail 1.11.655
com.amazonaws aws-java-sdk-cloudwatch 1.11.655
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.11.655
com.amazonaws aws-java-sdk-codedeploy 1.11.655
com.amazonaws aws-java-sdk-cognitoidentity 1.11.655
com.amazonaws aws-java-sdk-cognitosync 1.11.655
com.amazonaws aws-java-sdk-config 1.11.655
com.amazonaws aws-java-sdk-core 1.11.655
com.amazonaws aws-java-sdk-datapipeline 1.11.655
com.amazonaws aws-java-sdk-directconnect 1.11.655
com.amazonaws aws-java-sdk-directory 1.11.655
com.amazonaws aws-java-sdk-dynamodb 1.11.655
com.amazonaws aws-java-sdk-ec2 1.11.655
com.amazonaws aws-java-sdk-ecs 1.11.655
com.amazonaws aws-java-sdk-efs 1.11.655
com.amazonaws aws-java-sdk-elasticache 1.11.655
com.amazonaws aws-java-sdk-elasticbeanstalk 1.11.655
com.amazonaws aws-java-sdk-elasticloadbalancing 1.11.655
com.amazonaws aws-java-sdk-elastictranscoder 1.11.655
com.amazonaws aws-java-sdk-emr 1.11.655
com.amazonaws aws-java-sdk-glacier 1.11.655
com.amazonaws aws-java-sdk-klej 1.11.655
com.amazonaws aws-java-sdk-iam 1.11.655
com.amazonaws aws-java-sdk-importexport 1.11.655
com.amazonaws aws-java-sdk-kinesis 1.11.655
com.amazonaws aws-java-sdk-kms 1.11.655
com.amazonaws aws-java-sdk-lambda 1.11.655
com.amazonaws aws-java-sdk-logs 1.11.655
com.amazonaws aws-java-sdk-machinelearning 1.11.655
com.amazonaws aws-java-sdk-opsworks 1.11.655
com.amazonaws aws-java-sdk-rds 1.11.655
com.amazonaws aws-java-sdk-redshift 1.11.655
com.amazonaws aws-java-sdk-route53 1.11.655
com.amazonaws aws-java-sdk-s3 1.11.655
com.amazonaws aws-java-sdk-ses 1.11.655
com.amazonaws aws-java-sdk-simpledb 1.11.655
com.amazonaws aws-java-sdk-simpleworkflow 1.11.655
com.amazonaws aws-java-sdk-sns 1.11.655
com.amazonaws aws-java-sdk-sqs 1.11.655
com.amazonaws aws-java-sdk-ssm 1.11.655
com.amazonaws aws-java-sdk-storagegateway 1.11.655
com.amazonaws aws-java-sdk-sts 1.11.655
com.amazonaws aws-java-sdk-support 1.11.655
com.amazonaws aws-java-sdk-biblioteka-biblioteka 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.11.655
com.amazonaws jmespath-java 1.11.655
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics strumień 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware kryo-cieniowane 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml kolega z klasy 1.3.4
com.fasterxml.jackson.core adnotacje jackson 2.12.3
com.fasterxml.jackson.core jackson-core 2.12.3
com.fasterxml.jackson.core jackson-databind 2.12.3
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.12.3
com.fasterxml.jackson.datatype jackson-datatype-joda 2.12.3
com.fasterxml.jackson.module jackson-module-paranamer 2.12.3
com.fasterxml.jackson.module jackson-module-scala_2.12 2.12.3
com.github.ben-manes.kofeina kofeina 2.3.4
com.github.fommil jniloader 1.1
com.github.fommil.netlib core 1.1.2
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java-natives 1.1
com.github.fommil.netlib native_system java 1.1
com.github.fommil.netlib native_system-java-natives 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1.1
com.github.luben zstd-jni 1.5.0-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink Tink 1.6.0
com.google.flatbuffers flatbuffers-java 1.9.0
com.google.guava guawa 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 1.4.195
com.helger Profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 9.2.1.jre8
com.ning compress-lzf 1.0.3
com.sun.istack istack-commons-runtime 3.0.8
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.univocity parsery jednowołciowości 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.2
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.8.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-net commons-net 3.1
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 1.3.2
dev.ludovic.netlib Blas 1.3.2
dev.ludovic.netlib lapack 1.3.2
hive-2.3__hadoop-3.2 jets3t-0.7 liball_deps_2.12
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.2.0
io.dropwizard.metrics metryki —rdzeń 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metrics-healthchecks 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics serwlety metrics-servlets 4.1.1
io.netty netty-all 4.1.68.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx kolekcjoner 0.12.0
jakarta.adnotacja jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktywacja 1.1.1
javax.annotation javax.annotation-api 1.3.2
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.2
javax.xml.stream stax-api 1.0-2
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.10
log4j apache-log4j-extras 1.2.17
log4j log4j 1.2.17
drzewa maven hive-2.3__hadoop-3.2 liball_deps_2.12
net.java.dev.jna jna 5.8.0
net.razorvine pirolit 4.30
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.3
net.snowflake spark-snowflake_2.12 2.9.0-spark_3.1
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant tat 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow format strzałki 2.0.0
org.apache.arrow strzałka-pamięć-rdzeń 2.0.0
org.apache.arrow arrow-memory-netty 2.0.0
org.apache.arrow wektor strzałki 2.0.0
org.apache.avro avro 1.10.2
org.apache.avro avro-ipc 1.10.2
org.apache.avro avro-mapred 1.10.2
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.4.1
org.apache.commons commons-text 1.6
org.apache.curator kurator-klient 2.13.0
org.apache.curator struktura kuratora 2.13.0
org.apache.curator przepisy kuratora 2.13.0
org.apache.derby Derby 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.1-databricks
org.apache.hadoop hadoop-client-runtime 3.3.1
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive podkładki hive 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.htrace htrace-core4 4.1.0 inkubacja
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.12
org.apache.ivy bluszcz 2.5.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.6.12
org.apache.orc orc-mapreduce 1.6.12
org.apache.orc podkładki orc-shim 1.6.12
org.apache.parquet parquet-column 1.12.0-databricks-0003
org.apache.parquet parquet-common 1.12.0-databricks-0003
org.apache.parquet kodowanie parquet 1.12.0-databricks-0003
org.apache.parquet parquet-format-structures 1.12.0-databricks-0003
org.apache.parquet parquet-hadoop 1.12.0-databricks-0003
org.apache.parquet parquet-jackson 1.12.0-databricks-0003
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-cieniowane 4.20
org.apache.yetus adnotacje odbiorców 0.5.0
org.apache.zookeeper zookeeper 3.6.2
org.apache.zookeeper jute dozorców 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.43.v20210629
org.eclipse.jetty jetty-kontynuacja 9.4.43.v20210629
org.eclipse.jetty jetty-http 9.4.43.v20210629
org.eclipse.jetty jetty-io 9.4.43.v20210629
org.eclipse.jetty jetty-jndi 9.4.43.v20210629
org.eclipse.jetty jetty-plus 9.4.43.v20210629
org.eclipse.jetty jetty-proxy 9.4.43.v20210629
org.eclipse.jetty jetty-security 9.4.43.v20210629
org.eclipse.jetty jetty-server 9.4.43.v20210629
org.eclipse.jetty jetty-servlet 9.4.43.v20210629
org.eclipse.jetty jetty-servlets 9.4.43.v20210629
org.eclipse.jetty jetty-util 9.4.43.v20210629
org.eclipse.jetty jetty-util-ajax 9.4.43.v20210629
org.eclipse.jetty jetty-webapp 9.4.43.v20210629
org.eclipse.jetty jetty-xml 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-api 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-client 9.4.43.v20210629
org.eclipse.jetty.websocket websocket —wspólne 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-server 9.4.43.v20210629
org.eclipse.jetty.websocket websocket-servlet 9.4.43.v20210629
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 lokalizator hk2 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jaxb jaxb-runtime 2.3.2
org.glassfish.jersey.containers jersey-container-servlet 2.34
org.glassfish.jersey.containers jersey-container-servlet-core 2.34
org.glassfish.jersey.core jersey-client 2.34
org.glassfish.jersey.core jersey-common 2.34
org.glassfish.jersey.core jersey-server 2.34
org.glassfish.jersey.inject jersey-hk2 2.34
org.hibernate.validator moduł sprawdzania poprawności hibernacji 6.1.0.Final
org.javassist javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains Adnotacje 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.7.1
org.mariadb.jdbc mariadb-java-client 2.2.5
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.2.19
org.roaringbitmap RoaringBitmap 0.9.14
org.roaringbitmap Podkładki 0.9.14
org.rocksdb rocksdbjni 6.20.3
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt interfejs testowy 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.30
org.slf4j jul-to-slf4j 1.7.30
org.slf4j slf4j-api 1.7.30
org.slf4j slf4j-log4j12 1.7.30
org.spark-project.spark.spark Nieużywane 1.0.0
org.springframework spring-core 4.1.4.RELEASE
org.springframework spring-test 4.1.4.RELEASE
org.threeten trzydostępne dodatkowe 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel macro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1.24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1