Sdílet prostřednictvím

Databricks Runtime 12.0 (EoS)

  • Článek

Poznámka:

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Historie ukončení podpory. Všechny podporované verze databricks Runtime najdete v poznámkách k verzi Databricks Runtime a kompatibilitu.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 12.0, který využívá Apache Spark 3.3.1.

Databricks vydala tuto verzi v prosinci 2022.

Nové funkce a vylepšení

Prediktivní vstupně-výstupní operace jsou obecně dostupné

Prediktivní vstupně-výstupní operace jsou nyní obecně dostupné. Další informace najdete v tématu Co je prediktivní vstupně-výstupní operace?

Foton writer podporuje kompresi zstd

Nativní zapisovač Photon nyní podporuje kodek komprese zstd, pokud je povolen zstd nastavením spark.sql.parquet.compression.codec na zstd.

Podpora profilu prostředků úloh na úrovni fáze pro samostatné clustery

Plánování na úrovni fáze teď můžete použít v samostatných clusterech, když je dynamické přidělování zakázané. Pokud chcete tuto funkci použít, zadejte zdroje úkolů pro ResourceProfileBuilder každou fázi.

Podpora SQL pro selektivní přepsání pomocí REPLACE WHERE

Teď můžete selektivně přepsat data odpovídající libovolnému výrazu v tabulce Delta pomocí následujícího vzoru.

INSERT INTO table_name REPLACE WHERE predicate append_relation

Viz Libovolná selektivní přepsání nahrazenímWhere.

Vodoznaky jsou teď podporované v SQL.

Vodoznaky teď můžete zadat pomocí rozhraní SQL Delta Live Tables a v dotazech SQL na streamované datové rámce. Viz klauzule WATERMARK.

Profilace paměti PySpark

Profilace paměti je teď povolená pro uživatelem definované funkce PySpark. Poskytuje informace o přírůstcích paměti, využití paměti a počtu výskytů pro každý řádek kódu v uživatelem definované funkci.

Dynamické vyřezávání pro DELETE a UPDATE

Při použití výpočetních prostředků s podporou Photon teď UPDATE používejte dynamické vyřezávání souborů a oddílů, DELETE kde zlepšuje výkon. Dynamické vyřezávání je například povolené, když se k aktualizaci nebo odstranění řádků ve větší tabulce použije menší zdrojová tabulka.

Metriky odstranění na úrovni řádků pro operace jazyka pro manipulaci s dělenými daty

S dělenými predikáty teď uživatelé můžou auditovat, kolik řádků se odstraní při spouštění operací jazyka DML (Data Manipulat Language), jako DELETEje , TRUNCATEa replaceWhere.

Opravy chyb

Opravili jsme problém s analýzou JSON v automatickém zavaděče, kdy byly všechny sloupce ponechány jako řetězce. cloudFiles.inferColumnTypes Dříve nebyla nastavena nebo nastavena false na vnořené objekty JSON.

Upgrady knihoven

  • Upgradované knihovny Pythonu:
    • argon2-cffi od 20.1.0 do 21.3.0
    • attrs od 21.2.0 do 21.4.0
    • backports.entry-points-selectable from 1.1.1 to 1.2.0
    • od 4.0.0 do 4.1.0
    • boto3 od 1.21.18 do 1.21.32
    • botocore od 1.24.18 do 1.24.32
    • cffi od 1.14.6 do 1.15.0
    • klikněte z 8.0.3 na 8.0.4
    • cycler od 0.10.0 do 0.11.0
    • Cython od 0.29.24 do 0.29.28
    • debugpy od 1.4.1 do 1.5.1
    • dekorátor od 5.1.0 do 5.1.1
    • vstupní body od 0.3 do 0.4
    • idna od 3.2 do 3.3
    • ipykernel od 6.12.1 do 6.15.3
    • ipython od 7.32.0 do 8.5.0
    • ipywidgets od 7.7.0 do 7.7.2
    • jedi od 0.18.0 do 0.18.1
    • joblib od 1.0.1 do 1.1.0
    • jsonschema od 3.2.0 do 4.4.0
    • verizonsolver od 1.3.1 do 1.3.2
    • matplotlib od 3.4.3 do 3.5.1
    • nbclient od 0.5.3 do 0.5.13
    • nbconvert od 6.1.0 do 6.4.4
    • nbformat od 5.1.3 do 5.3.0
    • nest-asyncio od 1.5.1 do 1.5.5
    • poznámkový blok od 6.4.5 do 6.4.8
    • numpy od 1.20.3 do 1.21.5
    • balení od 21.0 do 21.3
    • pandas od 1.3.4 do 1.4.2
    • pandocfilters od 1.4.3 do 1.5.0
    • parso od 0.8.2 do 0.8.3
    • Polštář od 8.4.0 do 9.0.1
    • platformdirs from 2.5.2 to 2.5.4
    • vykreslit od 5.9.0 do 5.6.0
    • prometheus-client od 0.11.0 do 0.13.1
    • protobuf od 4.21.5 do 3.19.4
    • pycparser od 2.20 do 2.21
    • Pygments od 2.10.0 do 2.11.2
    • pyodbc od 4.0.31 do 4.0.32
    • pyzmq od 22.2.1 do 22.3.0
    • žádosti od 2.26.0 do 2.27.1
    • s3transfer from 0.5.2 to 0.5.0
    • scikit-learn od 0.24.2 do 1.0.2
    • scipy od 1.7.1 do 1.7.3
    • statsmodels from 0.12.2 to 0.13.2
    • terminado od 0.9.4 do 0.13.1
    • tomli od 2.0.1 do 1.2.2
    • zrádce od 5.1.0 do 5.1.1
    • urllib3 od 1.26.7 do 1.26.9
    • widgetsnbextension od 3.6.0 do 3.6.1
  • Upgradované knihovny jazyka R:
    • základ od 4.1.3 do 4.2.2
    • vaření od 1.0-7 do 1.0-8
    • bslib od 0.4.0 do 0.4.1
    • volající od 3.7.2 do 3.7.3
    • Chron od 2.3-57 do 2.3-58
    • cli from 3.3.0 to 3.4.1
    • cluster od 2.1.3 do 2.1.4
    • commonmark from 1.8.0 to 1.8.1
    • kompilátor z verze 4.1.3 do 4.2.2
    • cpp11 od 0.4.2 do 0.4.3
    • crayon od 1.5.1 do 1.5.2
    • curl od 4.3.2 do 4.3.3
    • data.table od 1.14.2 do 1.14.4
    • datové sady od 4.1.3 do 4.2.2
    • desc od 1.4.1 do 1.4.2
    • devtools od 2.4.4 do 2.4.5
    • digest od 0.6.29 do 0.6.30
    • e1071 od 1.7-11 do 1.7-12
    • vyhodnocení z 0,16 na 0,18
    • fontawesome od 0.3.0 do 0.4.0
    • budoucí od 1.28.0 do 1.29.0
    • future.apply from 1.9.1 to 1.10.0
    • gargle od 1.2.0 do 1.2.1
    • gert od 1.8.0 do 1.9.1
    • ggplot2 od 3.3.6 do 3.4.0
    • gh od 1.3.0 do 1.3.1
    • gitcreds od 0.1.1 do 0.1.2
    • grafika od 4.1.3 do 4.2.2
    • grDevices od 4.1.3 do 4.2.2
    • mřížka od 4.1.3 do 4.2.2
    • httpuv od 1.6.5 do 1.6.6
    • isoband od 0.2.5 do 0.2.6
    • jsonlite od 1.8.0 do 1.8.3
    • láva od 1.6.10 do 1.7.0
    • životní cyklus od 1.0.1 do 1.0.3
    • lubridate od 1.8.0 do 1.9.0
    • markdown od 1.1 do 1.3
    • HMOTNOST od 7.3-56 do 7.3-58
    • Matice od 1,4-1 do 1,5-1
    • metody od 4.1.3 do 4.2.2
    • mgcv od 1,8-40 do 1,8-41
    • nlme od 3.1-157 do 3.1-160
    • nnet od 7.3-17 do 7.3-18
    • openssl od 2.0.2 do 2.0.4
    • paralelní od 4.1.3 do 4.2.2
    • pkgload od 1.3.0 do 1.3.1
    • processx od 3.7.0 do 3.8.0
    • ps od 1.7.1 do 1.7.2
    • purrr od 0.3.4 do 0.3.5
    • ragg od 1.2.2 do 1.2.4
    • RcppEigen od 0.3.3.9.2 do 0.3.3.9.3
    • readr od 2.1.2 do 2.1.3
    • recepty od 1.0.1 do 1.0.3
    • rlang od 1.0.5 do 1.0.6
    • rmarkdown od 2.16 do 2.18
    • rpart from 4.1.16 to 4.1.19
    • RSQLite od 2.2.16 do 2.2.18
    • lesklý od 1.7.2 do 1.7.3
    • SparkR od 3.3.0 do 3.3.1
    • splines od 4.1.3 do 4.2.2
    • Statistiky od 4.1.3 do 4.2.2
    • Statistiky 4 od 4.1.3 do 4.2.2
    • sys od 3.4 do 3.4.1
    • tcltk od 4.1.3 do 4.2.2
    • test ze 3.1.4 do 3.1.5
    • tidyr od 1.2.0 do 1.2.1
    • Tidyselect from 1.1.2 to 1.2.0
    • TimeDate from 4021.104 to 4021.106
    • tinytex od 0.41 do 0.42
    • nástroje od 4.1.3 do 4.2.2
    • nástroje od 4.1.3 do 4.2.2
    • vctrs od 0.4.1 do 0.5.0
    • vroom od 1.5.7 do 1.6.0
    • xfun od 0.32 do 0.34
    • yaml od 2.3.5 do 2.3.6
    • zip od 2.2.0 do 2.2.2
  • Upgradované knihovny Java:
    • com.fasterxml.jackson.core.jackson-databind od 2.13.4 do 2.13.4.2
    • org.apache.parquet.parquet-column od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-common od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-encoding od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-format-structures from 1.12.0-databricks-0007 to 1.12.3-databricks-0001
    • org.apache.parquet.parquet-hadoop od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.parquet.parquet-jackson od 1.12.0-databricks-0007 do 1.12.3-databricks-0001
    • org.apache.yetus.audience-annotations od 0.5.0 do 0.13.0

Apache Spark

Databricks Runtime 12.0 zahrnuje Apache Spark 3.3.1. Tato verze zahrnuje všechny opravy a vylepšení Sparku, která jsou součástí Databricks Runtime 11.3 LTS, a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-40844] [SC-116996][12.x][12.0][12.0.0] Vrátí zpět "[SC-113542][SS] Překlopit výchozí hodnotu konfigurace načítání posunu Kafka.
  • [SPARK-40646] [SC-116061] Vrácení kódu [SC-113379][SQL] Oprava vrácení částečných výsledků ve zdroji dat JSON a funkcích JSON
  • [SPARK-41195] [SC-116305][SQL] Podpora kontingenční tabulky nebo funkce UNPIVOT s podřízenými spoji
  • [SPARK-41178] [SC-116139][SQL] Oprava priority pravidel analyzátoru mezi funkcí JOIN a čárkou
  • [SPARK-41072] [SC-116140][SC-116044][SC-115852][SQL][SS] Přidání třídy STREAM_FAILED chyb do StreamingQueryException
  • [SPARK-40921] Revert "[SC-115140][SC-114585][SQL] Přidání klauzule WHEN NOT MATCHED BY SOURCE pro merge INTO
  • [SPARK-37980] [SC-115758] [SQL] Rozšíření sloupce METADATA pro podporu indexů řádků pro soubory Parquet
  • [SPARK-41055] [SC-115582][SQL] Přejmenovat _LEGACY_ERROR_TEMP_2424 na GROUP_BY_AGGREGATE
  • [SPARK-41101] [SC-115849][PYTHON][PROTOBUF] Podpora názvu třídy zpráv pro PYSPARK-PROTOBUF
  • [SPARK-40956] [SC-115867] Ekvivalent SQL pro příkaz Přepsání datového rámce
  • [SPARK-41095] [SC-115659][SQL] Převod nevyřešených operátorů na vnitřní chyby
  • [SPARK-41144] [SC-115866][SQL] Nevyřešený tip by neměl způsobovat selhání dotazu
  • [SPARK-41137] [SC-115858][SQL] Přejmenovat LATERAL_JOIN_OF_TYPE na INVALID_LATERAL_JOIN_TYPE
  • [SPARK-40998] [SC-114754][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_0040 chyb na INVALID_IDENTIFIER
  • [SPARK-41015] [SC-115130][SQL][PROTOBUF] UnitTest null – kontrola generátoru dat
  • [SPARK-40769] [SC-114923][JÁDRO][SQL] Selhání kontroly typů agregačních výrazů do tříd chyb
  • [SPARK-41043] [SC-115183][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_2429 chyb na NUM_COLUMNS_MISMATCH
  • [SPARK-40777] [SC-114855][SQL][PROTOBUF] Protobuf – podpora importu a přesun tříd chyb
  • [SPARK-41019] [SC-114987][SQL] Zadání kontextu dotazu pro failAnalysis()
  • [SPARK-41027] [SC-115131][SQL] Používejte UNEXPECTED_INPUT_TYPE místo MAP_FROM_ENTRIES_WRONG_TYPE
  • [SPARK-40476] [SC-115868][SC-111163][ML][SQL] Zmenšení velikosti náhodného prohazování ALS
  • [SPARK-41134] [SC-115851][SQL] Zlepšení chybové zprávy vnitřních chyb
  • [SPARK-37980] Vrátit " [SQL] Rozšířit sloupec METADATA pro podporu indexů řádků pro soubory Parquet
  • [SPARK-41109] [SC-115788][SQL] Přejmenování _LEGACY_ERROR_TEMP_1216 třídy chyb na INVALID_LIKE_PATTERN
  • [SPARK-40984] [SC-115844][JÁDRO][SQL] Používejte NON_FOLDABLE_INPUT místo FRAME_LESS_OFFSET_WITHOUT_FOLDABLE
  • [SPARK-41029] [SC-115828][SQL] Optimalizace použití konstruktoru GenericArrayData pro Scala 2.13
  • [SPARK-40697] [SC-113648][SQL] Přidání odsazení znaku na straně čtení pro pokrytí externích datových souborů
  • [SPARK-40978] [SC-114574][SQL] Migrace failAnalysis() kontextu do tříd chyb
  • [SPARK-40663] [SC-114586][SQL] Chyby provádění migrace do tříd chyb: _LEGACY_ERROR_TEMP_2251-2275
  • [SPARK-38959] [SC-115672][SC-112707][SQL] DS V2: Podpora filtrování skupin runtime v příkazech na úrovni řádků
  • [SPARK-40372] [SC-115668][SQL] Migrace selhání kontroly typu pole na třídy chyb
  • [SPARK-41038] [SC-115371][SQL] Přejmenovat MULTI_VALUE_SUBQUERY_ERROR na SCALAR_SUBQUERY_TOO_MANY_ROWS
  • [SPARK-40965] [SC-114443][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_1208 chyb na FIELD_NOT_FOUND
  • [SPARK-40748] [SC-114696][SQL] Selhání kontroly typů migrace podmínek do tříd chyb
  • [SPARK-40371] [SC-114557][SQL] Selhání kontroly typů NthValue a NTile do tříd chyb
  • [SPARK-41092] [SC-115547][SQL] Nepoužívejte identifikátor ke shodě jednotek intervalu.
  • [SPARK-41009] [SC-115360][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_1070 chyb na LOCATION_ALREADY_EXISTS
  • [SPARK-37980] [SQL] Rozšíření sloupce METADATA pro podporu indexů řádků pro soubory Parquet
  • [SPARK-40967] [SC-114448][SQL] Migrace failAnalysis() na třídy chyb
  • [SPARK-34265] [SC-115486][SC-113788][PYTHON][SQL] Instrumentace uživatelem definovaných funkcí Pythonu s využitím metrik SQL
  • [SPARK-41012] [SC-114873][SQL] Přejmenovat _LEGACY_ERROR_TEMP_1022 na ORDER_BY_POS_OUT_OF_RANGE
  • [SPARK-41042] [SC-115142][SQL] Přejmenovat PARSE_CHAR_MISSING_LENGTH na DATATYPE_MISSING_SIZE
  • [SPARK-40752] [SC-114442][SQL] Selhání kontroly typu migrace chybových výrazů do tříd chyb
  • [SPARK-37945] [SC-115534][SQL][JÁDRO] Použitítřídch
  • [SPARK-40374] [SC-114705][SQL] Migrace selhání kontroly typů tvůrců typů na třídy chyb
  • [SPARK-41056] [SC-115354][R] Oprava nového chování R_LIBS_SITE zavedeného v R 4.2
  • [SPARK-41041] [SC-115357][SQL] Integrace _LEGACY_ERROR_TEMP_1279 do TABLE_OR_VIEW_ALREADY_EXISTS
  • [SPARK-40663] [SC-114852][SQL] Migrace chyb spuštění do tříd chyb: _LEGACY_ERROR_TEMP_2201-2225
  • [SPARK-41020] [SC-114984][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_1019 chyb na STAR_GROUP_BY_POS
  • [SPARK-41035] [SC-115233][SQL] Neopravy skládacích podřízených položek agregačních funkcí v RewriteDistinctAggregates
  • [SPARK-39778] [SC-114353][SQL] Vylepšení tříd chyb a zpráv
  • [SPARK-40798] [SC-113782][SQL] Alter partition should verify value follow storeAssignmentPolicy
  • [SPARK-40810] [SC-113533][SQL] Použití SparkIllegalArgumentException místo IllegalArgumentException v CreateDatabaseCommand &AlterDatabaseSetLocationCommand
  • [SPARK-40921] [SC-115140][SC-114585][SQL] Přidání klauzule WHEN NOT MATCHED BY SOURCE pro MERGE INTO
  • [SPARK-40360] [SC-114965] výjimky ALREADY_EXISTS a NOT_FOUND
  • [SPARK-41007] [SC-115085][SQL] Přidání chybějícího serializátoru pro java.math.BigInteger
  • [SPARK-40751] [SC-114254][SQL] Selhání kontroly typů u funkcí s vysokým pořadím na třídy chyb
  • [SPARK-40248] [SC-114704][SQL] Použití většího počtu bitů k vytvoření filtru Bloom
  • [SPARK-41040] [SC-115145][SS] Oprava selhání dotazu samoobslužného sjednocení streamování při použití readStream.table
  • [SPARK-32380] [SC-114966][SQL] Oprava přístupu k tabulce HBase přes Hive ze Sparku
  • [SPARK-40749] [SC-114860][SQL] Migrace selhání kontroly typů generátorů do tříd chyb
  • [SPARK-40925] [SC-114445][SQL][SS][WARMFIX][12.x] Oprava stavových operátorů zpoždění...
  • [SPARK-40654] [SC-112783] Odebrání dočasných řádků protokolu
  • [SPARK-40742] [SC-114913][SC-112646][JÁDRO][SQL] Oprava upozornění kompilace Java související s obecným typem
  • [SPARK-40657] [SC-113642][Cherry-pick] Přidání podpory pro třídy Java v Protob...
  • [SPARK-40898] [SC-113932][SQL] Chyby neshody u funkcí uvozovek v neshodě datových typů
  • [SPARK-40760] [SC-113750][SQL] Migrace selhání kontroly typů výrazů intervalu do tříd chyb
  • [SPARK-36114] [SC-113771][SQL] Podpora poddotazů s korelovanými predikáty bez rovnosti
  • [SPARK-40856] [SC-113738][SQL] Aktualizace šablony chyby WRONG_NUM_PARAMS
  • [SPARK-40759] [SC-114251][SQL] Selhání kontroly typů migrace časových intervalů do tříd chyb
  • [SPARK-40750] [SC-113812][SQL] Migrace selhání kontroly typů matematických výrazů do tříd chyb
  • [SPARK-40756] [SC-113749][SQL] Migrace selhání kontroly typů řetězcových výrazů na třídy chyb
  • [SPARK-40768] [SC-113640][SQL] Selhání kontroly typů bloom_filter_agg() do tříd chyb
  • [SPARK-40369] [SC-113402][JÁDRO][SQL] Migrace selhání kontroly typů volání prostřednictvím reflexe na třídy chyb
  • [SPARK-39445] [SQL] Odebrání okna, pokud je windowExpressions prázdný ve sloupci vyřazování
  • [SPARK-40761] [SC-113245][SQL] Migrace selhání kontroly typů výrazů percentilu do tříd chyb
  • [SPARK-40361] [SC-112789][SQL] Migrace aritmetických chyb kontroly typů do tříd chyb
  • [SPARK-40714] [SC-112576][SQL] Odstranit PartitionAlreadyExistsException
  • [SPARK-40702] [SC-112437][SQL] Oprava specifikací oddílů v PartitionsAlreadyExistException
  • [SPARK-40358] [SC-112631][SQL] Selhání kontroly typů kolekce do tříd chyb
  • [SPARK-40910] [SC-114259][SQL] Nahrazení nepodporované funkceOperationException sadou SparkUnsupportedOperationException
  • [SPARK-39876] [SC-112429][SQL] Přidání funkce UNPIVOT do syntaxe SQL
  • [SPARK-39783] [SC-113389][SQL] Citace qualifiedName pro opravu backticks pro kandidáty sloupců v chybových zprávách
  • [SPARK-40663] [SC-112520][SQL] Migrace chyb spuštění do tříd chyb: _LEGACY_ERROR_TEMP_2026-2282
  • [SPARK-40975] [SC-114555][SQL] Přejmenování třídy _LEGACY_ERROR_TEMP_0021 chyb na UNSUPPORTED_TYPED_LITERAL
  • [SPARK-37935] [SC-114472][SQL] Odstranění samostatných polí podtřidy chyb
  • [SPARK-40944] [SC-114530][SQL] Uvolnění omezení řazení pro možnosti sloupce CREATE TABLE
  • [SPARK-40815] [SC-114528][SQL] Přidání DelegateSymlinkTextInputFormat chyby alternativního řešení SymlinkTextInputSplit
  • [SPARK-40933] [SC-114441][SQL] Reimplement df.stat. {cov, corr} s integrovanými funkcemi SQL
  • [SPARK-40932] [SC-114439][JÁDRO] Oprava zpráv o problému pro allGather jsou přepsány
  • [SPARK-39312] [SQL] Použití nativního parquetu v predikáte pro vyfiltrování dolů
  • [SPARK-40862] [SC-114352][SQL] Podpora neagregovaných poddotazů v rewriteCorrelatedScalarSubquery
  • [SPARK-40963] [SC-114446][SQL] Nastavení hodnoty nullable správně v projektu vytvořeném ExtractGenerator
  • [SPARK-40663] [SC-112295][SQL] Migrace chyb spuštění do tříd chyb: _LEGACY_ERROR_TEMP_2000-2024
  • [SPARK-40892] [SC-114347][SQL][SS] Uvolnění požadavku pravidla window_time – povolení více volání window_time
  • [SPARK-40540] [SC-111639][SQL] Migrace chyb kompilace do tříd chyb: _LEGACY_ERROR_TEMP_1100-1347
  • [SPARK-40924] [SC-114258][SQL] Oprava funkce Unhex, pokud má vstup lichý počet symbolů
  • [SPARK-40821] [SC-113754][SQL][JÁDRO][PYTHON][SS] Zavedení window_time funkce pro extrakci času události ze sloupce okna
  • [SPARK-40800] [SC-113772][SQL] Vždy vložené výrazy v OptimizeOneRowRelationSubquery
  • [SPARK-40900] [SC-114006][SQL] Reimplement frequentItems s operacemi datového rámce
  • [SPARK-40735] [SC-114022][SC-112657] Konzistentně vyvolejte Bash pomocí /usr/bin/env bash ve skriptech, aby byl kód přenosnější.
  • [SPARK-40773] [SC-113091][SQL] Refaktoring checkCorrelationsInSubquery
  • [SPARK-40615] [SC-113400][SQL] Kontrola nepodporovaných datových typů při dekódování poddotazů
  • [SPARK-40660] [SC-112293][JÁDRO][SQL] Přepnutí na XORShiftRandom pro distribuci elementů
  • [SPARK-40540] [SC-113926][SC-111331][SQL] Migrace chyb kompilace do tříd chyb
  • [SPARK-40551] [SC-113135][SQL] DataSource V2: Přidání rozhraní API pro operace na úrovni řádků založené na rozdílech
  • [SPARK-39391] [SC-110676][JÁDRO] Opakované použití tříd Partitioneru
  • [SPARK-40368] [SC-113396][SQL] Migrace kontroly typu Bloom Filter do tříd chyb
  • [SPARK-39146] [SC-111814][JÁDRO][SQL] Zavedení místního singletonu pro ObjectMapper to, co je možné znovu použít
  • [SPARK-40357] [SC-113786][SC-111352][SQL] Migrovat selhání kontroly typů oken do tříd chyb
  • [SPARK-40874] [SC-113756][PYTHON] Oprava všesměrových vysílání v uživatelem definovaných funkcích Pythonu při povoleném šifrování
  • [SPARK-40359] [SC-113770][SC-111146][SQL] Kontrola typu migrace selže ve výrazech CSV/JSON do chybových tříd
  • [SPARK-40880] [SC-113764][SQL] Reimplement summary s operacemi datového rámce
  • [SPARK-40877] [SC-113763][SQL] Reimplement crosstab s operacemi datového rámce
  • [SPARK-40382] [SC-113098][SQL] Seskupení jedinečných agregačních výrazů podle sémanticky ekvivalentních podřízených výrazů v RewriteDistinctAggregates
  • [SPARK-40826] [SC-113532][SS] Přidání další kontroly souboru přejmenování kontrolního bodu
  • [SPARK-40829] [SC-113426][SQL] ULOŽENÉ JAKO serde v zobrazení CREATE TABLE LIKE nefunguje
  • [SPARK-40844] [SC-113542][SS] Překlopení výchozí hodnoty konfigurace načítání posunu Kafka
  • [SPARK-40488] [SC-113568][SC-111160] Nezalamovat výjimky vyvolané selháním zápisu zdroje dat
  • [SPARK-40560] [SC-113631][SC-111335][SQL] Přejmenování message ve messageTemplate STANDARD formátu chyb
  • [SPARK-40618] [SC-113096][SQL] Oprava chyby v pravidle MergeScalarSubqueries s vnořenými poddotazy pomocí sledování odkazů
  • [SPARK-40530] [SC-113528][SC-111332][SQL] Přidání rozhraní API pro vývojáře související s chybami
  • [SPARK-40806] [SC-113250][SQL] Oprava překlepu: CREATE TABLE –> NAHRADIT TABULKU
  • [SPARK-40646] [SC-113379][SQL] Oprava vrácení částečných výsledků ve zdroji dat JSON a funkcích JSON
  • [SPARK-40654] [Cherry-pick][SC-112783][SQL] Podpora Protobuf pro Spark – z...
  • [SPARK-40753] [SC-113539][SQL] Oprava chyby v testovacím případě pro operaci adresáře katalogu
  • [SPARK-40765] [SC-113056][SQL] Optimalizace redundantní operace fs v CommandUtils#calculateSingleLocationSize#getPathSize metodě
  • [SPARK-40114] [ES-479282][R][11.X] Podpora arrow 9.0.0 s SparkR
  • [SPARK-40479] [SC-110935][SQL] Migrace neočekávané chyby typu vstupu do třídy chyb
  • [SPARK-40473] [SC-113388][SC-111141][SQL] Migrace chyb analýzy na třídy chyb
  • [SPARK-39853] [SC-111867][JÁDRO] Profil prostředků úloh na úrovni fáze podpory pro samostatný cluster, pokud je dynamické přidělení zakázané (back port z PR-47157)
  • [SPARK-40407] [SC-111161][SQL] Oprava potenciální nerovnoměrné distribuce dat způsobených rozdělením df.repartition
  • [SPARK-40425] [SC-110840][SQL] DROP TABLE nemusí provádět vyhledávání tabulek.
  • [SPARK-40703] [SC-113242][SQL] Zavedení náhodného prohazování jedné části za účelem zlepšení paralelismu
  • [SPARK-40640] [SC-113138][JÁDRO] SparkHadoopUtil k nastavení původu možností konfigurace hadoop/hive
  • [SPARK-39062] [11.x][JÁDRO] Přidání podpory plánování prostředků na úrovni fáze pro samostatný cluster
  • [SPARK-33861] [SC-109877]Vrátit zpět [SQL] Zjednodušení podmíněného nastavení v predikátu
  • [SPARK-40667] [SC-113136][SQL] Refaktoring možností zdroje dat souboru
  • [SPARK-40370] [SC-110677][SQL] Kontrola typu migrace selže s chybovými třídami v castu
  • [SPARK-40611] [SC-113105][SQL] Zlepšení výkonu a getInterval zlepšení výkonu setIntervalUnsafeRow
  • [SPARK-40733] [SC-113126][SQL] Nastavení obsahu SERDEPROPERTIES ve výsledku ShowCreateTableAsSerdeCommand pevného pořadí
  • [SPARK-40585] [SC-112180][SQL] Podpora dvojitých uvozových identifikátorů
  • [SPARK-40772] [SC-112992][SQL] Vylepšení spark.sql.adaptive.skewJoin.skewedPartitionFactor pro podporu Double hodnot
  • [SPARK-40565] [SC-112417][SQL] Nenasdílejte ne deterministické filtry do zdrojů souborů V2.
  • [SPARK-8731] [SC-112784] Beeline nefunguje s parametrem -e při spuštění na pozadí
  • [SPARK-35242] [SC-111398][SQL] Podpora změny výchozí databáze katalogu relací
  • [SPARK-40426] [SC-110672][SQL] Vrácení mapy ze SparkThrowable.getMessageParameters
  • [SPARK-40494] [SC-112655][SC-111025][JÁDRO][SQL][ML][MLLIB] Optimalizace výkonu keys.zipWithIndex.toMap vzoru kódu
  • [SPARK-40521] [SC-112430][SQL] Návrat existuje pouze oddíly z PartitionsAlreadyExistException oddílu pro vytvoření Hive.
  • [SPARK-40705] [SC-112567][SQL] Zpracování případu použití proměnlivého pole při převodu řádku na JSON pro Scala 2.13
  • [SPARK-39895] [SC-112590][SQL][PYTHON] Podpora poklesu více sloupců
  • [SPARK-40607] [SC-112296][JÁDRO][SQL][MLLIB][SS] Odebrání redundantních operací interpolátoru řetězců
  • [SPARK-40420] [SC-112604][SC-110569][SQL] Řazení parametrů chybové zprávy podle názvů ve formátech JSON
  • [SPARK-40403] [SC-110564][SQL] Výpočet nebezpečné velikosti pole pomocí dlouhých hodnot, aby se zabránilo záporné velikosti v chybové zprávě
  • [SPARK-40482] [SC-110831][SQL] Vrátit SPARK-24544 Print actual failure cause when look up function failed
  • [SPARK-40400] [SC-112555][SC-110397][SQL] Předání parametrů chybové zprávy výjimkám jako mapám
  • [SPARK-40628] [SC-112414][SQL] Nesdílejte složitou částečně nebo anti join podmínku prostřednictvím projektu
  • [SPARK-40562] [SC-111455][SQL] Přidat spark.sql.legacy.groupingIdWithAppendedUserGroupBy
  • [SPARK-40501] [SC-111333][SQL] Přidání PushProjectionThroughLimit pro optimalizátor
  • [SPARK-39200] [SC-111244][JÁDRO] Nastavení záložního úložiště pro čtení obsahu
  • [SPARK-38717] [SC-111241][SQL] Zpracování chování zachování případu specifikace kontejneru Hive
  • [SPARK-40385] [SC-111123][SQL] Oprava interpretované cesty pro konstruktor doprovodného objektu
  • [SPARK-40216] [SC-112413][SQL] Extrahování běžné ParquetUtils.prepareWrite metody pro odstranění duplicitních dat v ParquetFileFormat kódu a ParquetWrite
  • [SPARK-40636] [SC-112160][JÁDRO] Oprava nesprávného protokolu náhodného prohazování v BlockManagerDecommissioner
  • [SPARK-40617] [SC-112009] Oprava stavu časování při zpracování položek StageTCMP executorMetricsPoller
  • [SPARK-40618] [SC-112046][SQL] Oprava chyby v pravidle MergeScalarSubqueries s vnořenými poddotazy
  • [SPARK-40612] [SC-111933][JÁDRO] Oprava objektu zabezpečení používaného pro obnovení tokenu delegování u správců prostředků mimo YARN
  • [SPARK-40595] [SC-111662][SQL] Zlepšení chybové zprávy pro nepoužívané vztahy CTE
  • [SPARK-40314] [SC-111879][SQL][PYTHON] Přidání vazeb scala a Python pro vložené a inline_outer
  • [SPARK-40416] [SC-110945][SQL] Přesunutí chybových zpráv checkAnalysis poddotazového výrazu za účelem použití nové architektury chyb
  • [SPARK-40318] [SC-111865][SC-109986][SQL] try_avg() by měla vyvolat výjimky z podřízeného
  • [SPARK-40509] [SC-111644][SS][PYTHON] Přidat příklad pro applyInPandasWithState
  • [SPARK-40310] [SC-111329][SC-109842][SQL] try_sum() by měla vyvolat výjimky z podřízeného
  • [SPARK-40016] [SQL] Odebrání nepotřebné funkce TryEval při implementaci try_sum()
  • [SPARK-40527] [SC-111224][SQL] Zachování názvů polí struktury nebo mapových klíčů ve struktuře CreateStruct
  • [SPARK-38098] [SC-111178][PYTHON] Přidání podpory pro ArrayType vnořeného typu struktury na převod na základě šipky
  • [SPARK-40324] [SC-111359][SC-110293][SQL] Poskytnutí kontextu dotazu v nástroji AnalysisException
  • [SPARK-40492] [SC-111324][SS] Proveďte údržbu před uvolněním úložiště statestore streamování
  • [SPARK-40487] [SC-111124][SQL] Nastavení defaultJoin ve BroadcastNestedLoopJoinExec spuštěné paralelně
  • [SPARK-40474] [SC-111273][SQL] Oprava chování odvození schématu CSV a analýzy dat u sloupců se smíšenými daty a časovými razítky
  • [SPARK-40508] [SC-111066][SQL] Zacházení s neznámým dělením jako unknownPartitioning
  • [SPARK-40496] [SC-111234][SC-111013][SQL] Oprava konfigurací pro řízení "enableDateTimeParsingFallback"
  • [SPARK-40435] [SC-111214][SS][PYTHON] Přidání testovacích sad pro applyInPandasWithState v PySparku
  • [SPARK-40434] [SC-111125][SS][PYTHON] Implementace applyInPandasWithState v PySparku

Aktualizace údržby

Viz aktualizace údržby Databricks Runtime 12.0.

Prostředí systému

  • Operační systém: Ubuntu 20.04.5 LTS
  • Java: Zulu 8.64.0.19-CA-linux64
  • Scala: 2.12.14
  • Python: 3.9.5
  • R: 4.2.2
  • Delta Lake: 2.2.0

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 asttokens 2.0.5
attrs 21.4.0 backcall 0.2.0 backports.entry-points-selectable 1.2.0
krásnásoup4 4.11.1 černý 22.3.0 bělit 4.1.0
boto3 1.21.32 botocore 1.24.32 certifi 2021.10.8
cffi 1.15.0 chardet 4.0.0 charset-normalizer 2.0.4
kliknutí 8.0.4 kryptografie 3.4.8 cyklista 0.11.0
Cython 0.29.28 dbus-python 1.2.16 ladění 1.5.1
dekoratér 5.1.1 defusedxml 0.7.1 distlib 0.3.6
vstupní body 0,4 vykonávající 0.8.3 přehled omezujících vlastností 1.0.0
fastjsonschema 2.16.2 filelock 3.8.0 fonttools 4.25.0
idna 3.3 ipykernel 6.15.3 ipython 8.5.0
ipython-genutils 0.2.0 ipywidgets 7.7.2 Jedi 0.18.1
Jinja2 2.11.3 jmespath 0.10.0 joblib 1.1.0
jsonschema 4.4.0 jupyter-client 6.1.12 jupyter_core 4.11.2
jupyterlab-pygments 0.1.2 jupyterlab-widgety 1.0.0 verizonsolver 1.3.2
MarkupSafe 2.0.1 matplotlib 3.5.1 matplotlib-inline 0.1.2
špatně zamyšlení 0.8.4 mypy-extensions 0.4.3 nbclient 0.5.13
nbconvert 6.4.4 nbformat 5.3.0 nest-asyncio 1.5.5
poznámkový blok 6.4.8 numpy 1.21.5 balení 21.3
pandas 1.4.2 pandocfilters 1.5.0 parso 0.8.3
pathspec 0.9.0 bábovka 0.5.2 pexpect 4.8.0
pickleshare 0.7.5 Polštář 9.0.1 jádro 21.2.4
platformdirs 2.5.4 plotly 5.6.0 prometheus-client 0.13.1
prompt-toolkit 3.0.20 protobuf 3.19.4 psutil 5.8.0
psycopg2 2.9.3 ptyprocess 0.7.0 čistý-eval 0.2.2
pyarrow 7.0.0 pycparser 2.21 Pygments 2.11.2
PyGObject 3.36.0 pyodbc 4.0.32 pyparsing 3.0.4
pyrsistent 0.18.0 python-dateutil 2.8.2 pytz 2021.3
pyzmq 22.3.0 žádosti 2.27.1 requests-unixsocket 0.2.0
s3transfer 0.5.0 scikit-learn 1.0.2 scipy 1.7.3
seaborn 0.11.2 Send2Trash 1.8.0 setuptools 58.0.4
Šest 1.16.0 polévky 2.3.1 ssh-import-id 5.10
stack-data 0.2.0 statsmodels 0.13.2 houževnatost 8.0.1
terminado 0.13.1 testpath 0.5.0 threadpoolctl 2.2.0
tokenize-rt 4.2.1 tomli 1.2.2 tornádo 6.1
vlastnosti 5.1.1 typing_extensions 4.1.1 bezobslužné upgrady 0,1
urllib3 1.26.9 virtualenv 20.8.0 wcwidth 0.2.5
webencodings 0.5.1 kolo 0.37.0 widgetsnbextension 3.6.1

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku Microsoft CRAN 11.11.2022.

Knihovna Verze Knihovna Verze Knihovna Verze
šipka 10.0.0 askpass 1,1 assertthat 0.2.1
backporty 1.4.1 base 4.2.2 base64enc 0.1-3
bitové 4.0.4 bit64 4.0.5 blob 1.2.3
startování 1.3-28 vařit 1.0-8 verva 1.1.3
koště 1.0.1 bslib 0.4.1 cachem 1.0.6
volající 3.7.3 caret 6.0-93 cellranger 1.1.0
chron 2.3-58 class 7.3-20 Rozhraní příkazového řádku 3.4.1
clipr 0.8.0 clock 0.6.1 cluster 2.1.4
codetools 0.2-18 barevný prostor 2.0-3 commonmark 1.8.1
– kompilátor 4.2.2 config 0.3.1 cpp11 0.4.3
pastelka 1.5.2 přihlašovací údaje 1.3.2 kudrna 4.3.3
data.table 1.14.4 Power BI 4.2.2 DBI 1.1.3
dbplyr 2.2.1 Desc 1.4.2 devtools 2.4.5
diffobj 0.3.5 trávit 0.6.30 downlit 0.4.2
dplyr 1.0.10 dtplyr 1.2.2 e1071 1.7-12
tři tečky 0.3.2 evaluate 0,18 fanynky 1.0.3
farver 2.1.1 fastmap 1.1.0 fontawesome 0.4.0
forcats 0.5.2 foreach 1.5.2 zahraniční 0.8-82
kovat 0.2.0 Fs 1.5.2 budoucnost 1.29.0
future.apply 1.10.0 kloktadlo 1.2.1 Generik 0.1.3
Gert 1.9.1 ggplot2 3.4.0 Gh 1.3.1
gitcreds 0.1.2 glmnet 4.1-4 globálních objektů 0.16.1
lepidlo 1.6.2 googledrive 2.0.0 googlesheets4 1.0.1
Gower 1.0.0 Grafika 4.2.2 grDevices 4.2.2
mřížka 4.2.2 gridExtra 2.3 gsubfn 0,7
gtable 0.3.1 bezpečnostní přilba 1.2.0 útočiště 2.5.1
highr 0,9 Hms 1.1.2 htmltools 0.5.3
htmlwidgets 1.5.4 httpuv 1.6.6 httr 1.4.4
Id 1.0.1 ini 0.3.1 ipred 0.9-13
isoband 0.2.6 Iterátory 1.0.14 jquerylib 0.1.4
jsonlite 1.8.3 KernSmooth 2.23-20 pletení 1,40
značení 0.4.2 později 1.3.0 mříž 0.20-45
láva 1.7.0 lifecycle 1.0.3 listenv 0.8.0
lubridate 1.9.0 magrittr 2.0.3 sleva 1.3
MŠE 7.3-58 Matice 1.5-1 memoise 2.0.1
metody 4.2.2 mgcv 1.8-41 mim 0.12
miniUI 0.1.1.1 ModelMetrics 1.2.2.2 modelr 0.1.9
munsell 0.5.0 nlme 3.1-160 nnet 7.3-18
numDeriv 2016.8-1.1 openssl 2.0.4 parallel 4.2.2
paralelně 1.32.1 pilíř 1.8.1 pkgbuild 1.3.1
pkgconfig 2.0.3 pkgdown 2.0.6 pkgload 1.3.1
plogr 0.2.0 plyr 1.8.7 chválit 1.0.0
prettyunits 1.1.1 pROC 1.18.0 processx 3.8.0
prodlim 2019.11.13 profvis 0.3.7 Průběh 1.2.2
progressr 0.11.0 sliby 1.2.0.1 proto 1.0.0
plná moc 0.4-27 PS 1.7.2 purrr 0.3.5
r2d3 0.2.6 R6 2.5.1 ragg 1.2.4
randomForest 4.7-1.1 rappdirs 0.3.3 Analýza rcmdcheck 1.4.0
RColorBrewer 1.1-3 Rcpp 1.0.9 RcppEigen 0.3.3.9.3
readr 2.1.3 readxl 1.4.1 recepty 1.0.3
odvetný zápas 1.0.1 rematch2 2.1.2 vzdálená zařízení 2.4.2
reprex 2.0.2 reshape2 1.4.4 rlang 1.0.6
rmarkdown 2.18 RODBC 1.3-19 roxygen2 7.2.1
rpart 4.1.19 rprojroot 2.0.3 Rserve 1.8-11
RSQLite 2.2.18 rstudioapi 0,14 rversions 2.1.2
rvest 1.0.3 drzá napodobenina 0.4.2 váhy 1.2.1
selektor 0.4-2 sessioninfo 1.2.2 tvar 1.4.6
lesklý 1.7.3 sourcetools 0.1.7 sparklyr 1.7.8
SparkR 3.3.1 prostorový 7.3-11 spline křivky 4.2.2
sqldf 0.4-11 ČTVEREC 2021.1 statistické údaje 4.2.2
Statistiky 4 4.2.2 stringi 1.7.8 stringr 1.4.1
přežití 3.4-0 sys 3.4.1 systemfonts 1.0.4
tcltk 4.2.2 testthat 3.1.5 textshaping 0.3.6
tibble 3.1.8 tidyr 1.2.1 tidyselect 1.2.0
tidyverse 1.3.2 časový interval 0.1.1 timeDate 4021.106
tinytex 0.42 tools 4.2.2 tzdb 0.3.0
urlchecker 1.0.1 usethis 2.1.6 utf8 1.2.2
utils 4.2.2 Uuid 1.1-0 vctrs 0.5.0
viridisLite 0.4.1 vroom 1.6.0 Waldo 0.4.0
vous 0,4 withr 2.5.0 xfun 0.34
xml2 1.3.3 xopen 1.0.0 xtable 1.8-4
yaml 2.3.6 zip 2.2.2

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws automatické škálování aws-java-sdk 1.12.189
com.amazonaws aws-java-sdk-cloudformation 1.12.189
com.amazonaws aws-java-sdk-cloudfront 1.12.189
com.amazonaws aws-java-sdk-cloudhsm 1.12.189
com.amazonaws aws-java-sdk-cloudsearch 1.12.189
com.amazonaws aws-java-sdk-cloudtrail 1.12.189
com.amazonaws aws-java-sdk-cloudwatch 1.12.189
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.189
com.amazonaws aws-java-sdk-codedeploy 1.12.189
com.amazonaws aws-java-sdk-cognitoidentity 1.12.189
com.amazonaws aws-java-sdk-cognitosync 1.12.189
com.amazonaws aws-java-sdk-config 1.12.189
com.amazonaws aws-java-sdk-core 1.12.189
com.amazonaws aws-java-sdk-datapipeline 1.12.189
com.amazonaws aws-java-sdk-directconnect 1.12.189
com.amazonaws aws-java-sdk-directory 1.12.189
com.amazonaws aws-java-sdk-dynamodb 1.12.189
com.amazonaws aws-java-sdk-ec2 1.12.189
com.amazonaws aws-java-sdk-ecs 1.12.189
com.amazonaws aws-java-sdk-efs 1.12.189
com.amazonaws aws-java-sdk-elasticache 1.12.189
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.189
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.189
com.amazonaws aws-java-sdk-elastictranscoder 1.12.189
com.amazonaws aws-java-sdk-emr 1.12.189
com.amazonaws aws-java-sdk-glacier 1.12.189
com.amazonaws aws-java-sdk-glue 1.12.189
com.amazonaws aws-java-sdk-iam 1.12.189
com.amazonaws aws-java-sdk-importexport 1.12.189
com.amazonaws aws-java-sdk-kinesis 1.12.189
com.amazonaws aws-java-sdk-kms 1.12.189
com.amazonaws aws-java-sdk-lambda 1.12.189
com.amazonaws aws-java-sdk-logs 1.12.189
com.amazonaws aws-java-sdk-machinelearning 1.12.189
com.amazonaws aws-java-sdk-opsworks 1.12.189
com.amazonaws aws-java-sdk-rds 1.12.189
com.amazonaws aws-java-sdk-redshift 1.12.189
com.amazonaws aws-java-sdk-route53 1.12.189
com.amazonaws aws-java-sdk-s3 1.12.189
com.amazonaws aws-java-sdk-ses 1.12.189
com.amazonaws aws-java-sdk-simpledb 1.12.189
com.amazonaws aws-java-sdk-simpleworkflow 1.12.189
com.amazonaws aws-java-sdk-sns 1.12.189
com.amazonaws aws-java-sdk-sqs 1.12.189
com.amazonaws aws-java-sdk-ssm 1.12.189
com.amazonaws aws-java-sdk-storagegateway 1.12.189
com.amazonaws aws-java-sdk-sts 1.12.189
com.amazonaws podpora aws-java-sdk-support 1.12.189
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.189
com.amazonaws jmespath-java 1.12.189
com.chuusai shapeless_2.12 2.3.3
com.clearspring.analytics datový proud 2.9.6
com.databricks Rserve 1.8-3
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.13.4
com.fasterxml.jackson.core jackson-core 2.13.4
com.fasterxml.jackson.core jackson-databind 2.13.4.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-joda 2.13.4
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.13.4
com.fasterxml.jackson.module jackson-module-paranamer 2.13.4
com.fasterxml.jackson.module jackson-module-scala_2.12 2.13.4
com.github.ben-manes.kofein kofein 2.3.4
com.github.fommil jniloader 1,1
com.github.fommil.netlib core 1.1.2
com.github.fommil.netlib native_ref-java 1,1
com.github.fommil.netlib nativní native_ref javy 1,1
com.github.fommil.netlib native_system-java 1,1
com.github.fommil.netlib nativní native_system javy 1,1
com.github.fommil.netlib netlib-native_ref-linux-x86_64-natives 1,1
com.github.fommil.netlib netlib-native_system-linux-x86_64-natives 1,1
com.github.luben zstd-jni 1.5.2-1
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.8.6
com.google.crypto.tink Tink 1.6.1
com.google.flatbuffers flatbuffers-java 1.12.0
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.h2database h2 2.0.204
com.helger profiler 1.1.1
com.jcraft jsch 0.1.50
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.ning compress-lzf 1,1
com.sun.mail javax.mail 1.5.2
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe config 1.2.1
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.0
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.15
commons-collections commons-collections 3.2.2
commons-dbcp commons-dbcp 1.4
commons-fileupload commons-fileupload 1.3.3
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.11.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 2.2.1
dev.ludovic.netlib Blas 2.2.1
dev.ludovic.netlib lapack 2.2.1
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift aircompressor 0.21
io.delta delta-sharing-spark_2.12 0.5.2
io.dropwizard.metrics metriky – jádro 4.1.1
io.dropwizard.metrics metrics-graphite 4.1.1
io.dropwizard.metrics metriky – kontroly stavu 4.1.1
io.dropwizard.metrics metrics-jetty9 4.1.1
io.dropwizard.metrics metrics-jmx 4.1.1
io.dropwizard.metrics metrics-json 4.1.1
io.dropwizard.metrics metrics-jvm 4.1.1
io.dropwizard.metrics metriky – servlety 4.1.1
io.netty netty-all 4.1.74.Final
io.netty netty-buffer 4.1.74.Final
io.netty netty-codec 4.1.74.Final
io.netty netty- common 4.1.74.Final
io.netty obslužná rutina netty 4.1.74.Final
io.netty netty-resolver 4.1.74.Final
io.netty netty-tcnative-classes 2.0.48.Final
io.netty netty transport 4.1.74.Final
io.netty netty-transport-classes-epoll 4.1.74.Final
io.netty netty-transport-classes-kqueue 4.1.74.Final
io.netty netty-transport-native-epoll-linux-aarch_64 4.1.74.Final
io.netty netty-transport-native-epoll-linux-x86_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-aarch_64 4.1.74.Final
io.netty netty-transport-native-kqueue-osx-x86_64 4.1.74.Final
io.netty netty-transport-native-unix-common 4.1.74.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx sběratel 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1,1
javax.transaction transaction-api 1,1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.10.13
net.java.dev.jna jna 5.8.0
net.razorvine marináda 1.2
net.sf.jpam jpam 1,1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.snowflake snowflake-jdbc 3.13.22
net.sourceforge.f2j arpack_combined_all 0,1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.8
org.antlr stringtemplate 3.2.1
org.apache.ant ant 1.9.2
org.apache.ant ant-jsch 1.9.2
org.apache.ant ant-launcher 1.9.2
org.apache.arrow arrow-format 7.0.0
org.apache.arrow arrow-memory-core 7.0.0
org.apache.arrow arrow-memory-netty 7.0.0
org.apache.arrow arrow-vector 7.0.0
org.apache.avro avro 1.11.0
org.apache.avro avro-ipc 1.11.0
org.apache.avro avro-mapred 1.11.0
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.21
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.kurátor kurátor-client 2.13.0
org.apache.kurátor kurátor-framework 2.13.0
org.apache.kurátor kurátor-recepty 2.13.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-api 3.3.4-databricks
org.apache.hadoop hadoop-client-runtime 3.3.4
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.7.2
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.13
org.apache.httpcomponents httpcore 4.4.14
org.apache.ivy břečťan 2.5.0
org.apache.logging.log4j log4j-1.2-api 2.18.0
org.apache.logging.log4j log4j-api 2.18.0
org.apache.logging.log4j log4j-core 2.18.0
org.apache.logging.log4j log4j-slf4j-impl 2.18.0
org.apache.mesos mesos-shaded-protobuf 1.4.0
org.apache.orc orc-core 1.7.6
org.apache.orc orc-mapreduce 1.7.6
org.apache.orc orc-shims 1.7.6
org.apache.parquet parquet-column 1.12.3-databricks-0001
org.apache.parquet parquet-common 1.12.3-databricks-0001
org.apache.parquet kódování parquet 1.12.3-databricks-0001
org.apache.parquet parquet-format-structures 1.12.3-databricks-0001
org.apache.parquet parquet-hadoop 1.12.3-databricks-0001
org.apache.parquet parquet-jackson 1.12.3-databricks-0001
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.xbean xbean-asm9-shaded 4.20
org.apache.yetus cílové skupiny a poznámky 0.13.0
org.apache.zookeeper zookeeper 3.6.2
org.apache.zookeeper zookeeper-jute 3.6.2
org.checkerframework checker-qual 3.5.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.jetty jetty-client 9.4.46.v20220331
org.eclipse.jetty pokračování jetty 9.4.46.v20220331
org.eclipse.jetty jetty-http 9.4.46.v20220331
org.eclipse.jetty jetty-io 9.4.46.v20220331
org.eclipse.jetty jetty-jndi 9.4.46.v20220331
org.eclipse.jetty jetty-plus 9.4.46.v20220331
org.eclipse.jetty jetty-proxy 9.4.46.v20220331
org.eclipse.jetty jetty-security 9.4.46.v20220331
org.eclipse.jetty jetty-server 9.4.46.v20220331
org.eclipse.jetty jetty-servlet 9.4.46.v20220331
org.eclipse.jetty jetty-servlets 9.4.46.v20220331
org.eclipse.jetty jetty-util 9.4.46.v20220331
org.eclipse.jetty jetty-util-ajax 9.4.46.v20220331
org.eclipse.jetty jetty-webapp 9.4.46.v20220331
org.eclipse.jetty jetty-xml 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-api 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-client 9.4.46.v20220331
org.eclipse.jetty.websocket websocket – společné 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-server 9.4.46.v20220331
org.eclipse.jetty.websocket websocket-servlet 9.4.46.v20220331
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.36
org.glassfish.jersey.containers jersey-container-servlet-core 2.36
org.glassfish.jersey.core jersey-client 2.36
org.glassfish.jersey.core žerzejové společné 2.36
org.glassfish.jersey.core jersey-server 2.36
org.glassfish.jersey.inject jersey-hk2 2.36
org.hibernate.validator Hibernate-validator 6.1.0.Final
org.javassist Javassist 3.25.0-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotace 17.0.0
org.joda joda-convert 1,7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mariadb.jdbc mariadb-java-client 2.7.4
org.mlflow mlflow-spark 1.27.0
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.3.3
org.roaringbitmap RoaringBitmap 0.9.25
org.roaringbitmap Podložky 0.9.25
org.rocksdb rocksdbjni 6.24.2
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.14
org.scala-lang scala-library_2.12 2.12.14
org.scala-lang scala-reflect_2.12 2.12.14
org.scala-lang.modules scala-collection-compat_2.12 2.4.3
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt test-interface 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.0.8
org.scalanlp breeze-macros_2.12 1.2
org.scalanlp breeze_2.12 1.2
org.scalatest scalatest_2.12 3.0.8
org.slf4j jcl-over-slf4j 1.7.36
org.slf4j jul-to-slf4j 1.7.36
org.slf4j slf4j-api 1.7.36
org.spark-project.spark nepoužitý 1.0.0
org.threeten threeten-extra 1.5.0
org.tukaani xz 1.8
org.typelevel algebra_2.12 2.0.1
org.typelevel kočky-kernel_2.12 2.1.1
org.typelevel makro-compat_2.12 1.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.0.7.Final
org.xerial sqlite-jdbc 3.8.11.2
org.xerial.snappy snappy-java 1.1.8.4
org.yaml snakeyaml 1,24
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1