Sdílet prostřednictvím

Databricks Runtime 15.3 (EoS)

  • Článek

Poznámka

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v části historie ukončení podpory. Pro další informace o všech podporovaných verzích Databricks Runtime viz poznámky k verzi akompatibility.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 15.3, který využívá Apache Spark 3.5.0.

Databricks vydala tuto verzi v červnu 2024.

Spropitné

Poznámky k vydání pro verze Databricks Runtime, které dosáhly konce podpory (EoS), naleznete v poznámky k vydání Databricks Runtime pro ukončení podpory. Verze EoS Databricks Runtime byly vyřazeny a nemusí se aktualizovat.

Nové funkce a vylepšení

PySpark DataSources teď podporuje čtení a zápis streamů.

PySpark DataSources, které umožňují čtení z vlastních zdrojů dat a zápis do vlastních jímek dat, teď podporují čtení a zápis datových proudů. Viz vlastní zdroje dat PySpark.

Zakázání mapování sloupců pomocí funkce drop

Teď můžete pomocí DROP FEATURE zakázat mapování sloupců u tabulek Delta a downgradovat protokol tabulky. Viz Zakázání mapování sloupců.

Syntaxe a funkce variantního typu ve veřejné ukázce

Nativní podpora Apache Sparku pro práci s částečně strukturovanými daty jako typ VARIANT je teď dostupná v datových rámcích Sparku a SQL. Vizte dotazvarianty dat .

Podpora typů variant pro Delta Lake ve verzi Public Preview

Nyní můžete použít VARIANT k ukládání polo-strukturovaných dat do tabulek podporovaných Delta Lake. Podpora variant v systému Delta Lake.

Podpora různých režimů vývoje schématu v zobrazeních

CREATE VIEW a ALTER VIEW teď umožňují nastavit režim vazby schématu a vylepšit způsob zpracování změn schématu v podkladových objektech. Tato funkce umožňuje zobrazení tolerovat nebo přizpůsobit změny schématu v podkladových objektech. Řeší změny ve schématu dotazu, které jsou výsledkem úprav definic objektů.

Podpora observe() metod přidaných do klienta Spark Connect Scala

Klient Spark Connect Scala teď podporuje metody Dataset.observe(). Podpora těchto metod umožňuje definovat metriky pro sledování Dataset objektu pomocí ds.observe("name", metrics...) nebo ds.observe(observationObject, metrics...) metod.

Vylepšená odezva znovuspuštění streamu pro Auto Loader

Tato verze zahrnuje změnu, která zlepšuje latenci při opětovném spuštění streamu pro Auto Loader. Toto vylepšení je implementováno tak, že načtení stavu úložištěm stavů RocksDB je asynchronní. S touto změnou byste měli zaznamenat zlepšení startovacích časů streamů s velkými stavy, například streamů s velkým počtem již načtených souborů.

Vraťte datový rámec jako pyarrow.Table

Pro podporu zápisu datového rámce přímo do objektu Apache Arrow pyarrow.Table obsahuje tato verze funkci DataFrame.toArrow(). Další informace o použití šipky v PySpark najdete v tématu Apache Arrow v PySpark.

Vylepšení výkonu některých funkcí oken

Tato verze zahrnuje změnu, která zlepšuje výkon některých funkcí okna Sparku, konkrétně funkce, které neobsahují klauzuli ORDER BY nebo parametr window_frame. V těchto případech může systém přepsat dotaz, aby ho spustil pomocí agregační funkce. Tato změna umožňuje, aby dotaz běžel rychleji díky částečné agregaci a eliminaci režijních nákladů při používání okenních funkcí. Parametr konfigurace Sparku spark.databricks.optimizer.replaceWindowsWithAggregates.enabled tuto optimalizaci řídí a je ve výchozím nastavení nastavený na true. Pokud chcete tuto optimalizaci vypnout, nastavte spark.databricks.optimizer.replaceWindowsWithAggregates.enabled na false.

Podpora přidané funkce try_mod

Tato verze přidává podporu pro funkci PySpark try_mod(). Tato funkce podporuje výpočet celočíselného zbytku kompatibilního s ANSI SQL z dělení dvou číselných hodnot. Pokud je argument dělitele 0, vrátí funkce try_mod() hodnotu null místo vyvolání výjimky. Místo try_mod() nebo modmůžete použít funkci %, která vyvolá výjimku, pokud je argument dělitele 0 a je povolený ANSI SQL.

Podpora volitelného parametru oboru v list_secrets()

Tato verze umožňuje omezit výsledky tabulkové funkce list_secrets() na konkrétní rozsah.

Opravy chyb

WriteIntoDeltaCommand metriky v uživatelském rozhraní Sparku se teď zobrazují správně

Tato verze obsahuje opravu metrik zobrazených na kartě SQL uživatelského rozhraní Sparku pro uzel Execute WriteIntoDeltaCommand. Dříve byly metriky zobrazené pro tento uzel všechny nuly.

Funkce groupby() v rozhraní API Pandas ignorovala argument as_index=False.

Tato verze obsahuje opravu problému s funkcí groupby() v rozhraní PANDAS API ve Sparku. Před touto opravou groupby() s přeznačením agregovaných sloupců a argumentem as_index=False nebyly klíče skupiny zahrnuty ve výsledném datovém rámci.

Chyba analýzy s více funkcemi okna, které odkazují na výstup z jiných funkcí.

Tato verze opravuje problém, ke kterému může dojít, když má dotaz Spark několik po sobě jdoucích funkcí okna, kde funkce okna odkazují na výstup z ostatních funkcí okna. Ve výjimečných případech může systém vynechat jeden z odkazů, což vede k chybám při vyhodnocování dotazu. Tyto odkazy se tím opraví a promítnou tak, aby se zajistilo vyhodnocení dotazu. Tuto změnu řídí parametr konfigurace Sparku spark.databricks.optimizer.collapseWindows.projectReferences, který je ve výchozím nastavení nastavený na true. Pokud chcete tuto změnu vypnout, nastavte spark.databricks.optimizer.collapseWindows.projectReferences na false.

Upgrady knihoven

  • Upgradované knihovny Pythonu:
    • filelock od 3.13.1 do 3.13.4
  • Upgradované knihovny jazyka R:
  • Upgradované knihovny Java:
    • org.rocksdb.rocksdbjni od 8.3.2 do 8.11.4

Apache Spark

Databricks Runtime 15.3 zahrnuje Apache Spark 3.5.0. Tato verze zahrnuje všechny opravy a vylepšení Sparku zahrnuté v Databricks Runtime 15.2 (EoS)a také následující další opravy chyb a vylepšení Sparku:

  • [SPARK-48211] [DBRRM-1041][15.x][15.3] Revert "[SC-165552][SQL] DB2: Read SMALLINT as Sho...
  • [SPARK-47904] [DBRRM-1040][CHOVÁNÍ-33][SC-163409] Revert SPARK-47904: Zachování případu ve schématu Avro při použití enableStableIdentifiersForUnionType
  • [SPARK-48288] [SC-166141] Přidání zdrojového datového typu pro výraz přiřazení typu konektoru
  • [SPARK-48175] [SC-166341][SQL][PYTHON] Ukládat informace o kolaci v metadatech a ne v typu pro SER/DE
  • [SPARK-48172] [SC-166078][SQL] Oprava problémů s únikem dat v JDBCDialects
  • [SPARK-48186] [SC-165544][SQL] Přidání podpory pro AbstractMapType
  • [SPARK-48031] [SC-166523] Starší zobrazení pro SCHEMA BINDING
  • [SPARK-48369] [SC-166566][SQL][PYTHON][CONNECT] Přidat funkci timestamp_add
  • [SPARK-48330] [SC-166458][SS][PYTHON] Oprava problému s vypršením časového limitu zdroje dat streamování Pythonu pro velký interval aktivačních událostí
  • [SPARK-48369] Revert "[SC-166494][SQL][PYTHON][CONNECT] Add function timestamp_add"
  • [SPARK-48336] [SC-166495][PS][CONNECT] Implementujte ps.sql ve Spark Connect
  • [SPARK-48369] [SC-166494][SQL][PYTHON][CONNECT] Přidat funkci timestamp_add
  • [SPARK-47354] [SC-165546][SQL] Přidání podpory kolace pro variantní výrazy
  • [SPARK-48161] [SC-165325][SQL] Oprava návratu změn v PR – Přidání podpory kolace pro výrazy JSON
  • [SPARK-48031] [SC-166391] Dekompose viewSchemaMode, přidejte podporu SHOW CREATE TABLE
  • [SPARK-48268] [SC-166217][CORE] Přidání konfigurace pro SparkContext.setCheckpointDir
  • [SPARK-48312] [ES-1076198][SQL] Zlepšení výkonu Alias.removeNonInheritableMetadata
  • [SPARK-48294] [SC-166205][SQL] Zpracování malých písmen ve vnořeném typuMissingElementTypeError
  • [SPARK-47254] [SC-158847][SQL] Přiřazení názvů ke třídám chyb _LEGACY_ERROR_TEMP_325[1-9]
  • [SPARK-47255] [SC-158749][SQL] Přiřaďte názvy třídám chyb _LEGACY_ERROR_TEMP_323[6-7] a _LEGACY_ERROR_TEMP_324[7-9]
  • [SPARK-48310] [SC-166239][PYTHON][CONNECT] Vlastnosti uložené v mezipaměti musí vracet kopie.
  • [SPARK-48308] [SC-166152][Core] Sjednotit způsob získávání schématu dat bez zahrnutí sloupců oddílů ve FileSourceStrategy
  • [SPARK-48301] [SC-166143][SQL] Přejmenování CREATE_FUNC_WITH_IF_NOT_EXISTS_AND_REPLACE na CREATE_ROUTINE_WITH_IF_NOT_EXISTS_AND_REPLACE
  • [SPARK-48287] [SC-166139][PS][CONNECT] Použití integrované metody timestamp_diff
  • [SPARK-47607] [SC-166129] Přidání dokumentace pro architekturu strukturovaného protokolování
  • [SPARK-48297] [SC-166136][SQL] Oprava regrese v klauzuli TRANSFORM s char/varchar
  • [SPARK-47045] [SC-156808][SQL] Nahraďte IllegalArgumentExceptionSparkIllegalArgumentException v sql/api
  • [SPARK-46991] [SC-156399][SQL] Nahraďte IllegalArgumentExceptionSparkIllegalArgumentException v catalyst
  • [SPARK-48031] [SC-165805][SQL] Vývoj schématu zobrazení podpory
  • [SPARK-48276] [SC-166116][PYTHON][CONNECT] Přidejte chybějící metodu __repr__ pro SQLExpression
  • [SPARK-48278] [SC-166071][PYTHON][CONNECT] Upřesněte řetězcovou reprezentaci Cast
  • [SPARK-48272] [SC-166069][SQL][PYTHON][CONNECT] Přidat funkci timestamp_diff
  • [SPARK-47798] [SC-162492][SQL] Rozšíření chybové zprávy pro chyby čtení desetinných hodnot
  • [SPARK-47158] [SC-158078][SQL] Přiřadit správný název a sqlState k _LEGACY_ERROR_TEMP_(2134|2231)
  • [SPARK-48218] [SC-166082][CORE] TransportClientFactory.createClient může způsobit výjimku NullPointerException, což vede k FetchFailedException.
  • [SPARK-48277] [SC-166066] Zlepšení chybové zprávy pro ErrorClassesJsonReader.getErrorMessage
  • [SPARK-47545] [SC-165444][CONNECT] Podpora observe datasetu pro klienta Scala
  • [SPARK-48954] [SC-171672][SQL] Přidání funkce try_mod
  • [SPARK-43258] [SC-158151][SQL] Přiřaďte názvy k chybě _LEGACY_ERROR_TEMP_202[3,5]
  • [SPARK-48267] [SC-165903][SS] Regresní e2e test s SPARK-47305
  • [SPARK-48263] [SC-165925] Podpora sřazování pro řetězce, které nejsou UTF8_BINARY
  • [SPARK-48260] [SC-165883][SQL] Zakázat koordinaci výstupních potvrzení v jednom testu ParquetIOSuite
  • [SPARK-47834] [SC-165645][SQL][CONNECT] Označte zastaralé funkce pomocí @deprecated v SQLImplicits
  • [SPARK-48011] [SC-164061][Core] Uložit LogKey jako hodnotu, aby se zabránilo generování nových instancí řetězců
  • [SPARK-48074] [SC-164647][Core] Vylepšení čitelnosti protokolování JSON
  • [SPARK-44953] [SC-165866][CORE] Zaznamenejte upozornění, když je sledování shuffle povoleno spolu s jiným podporovaným mechanismem DA.
  • [SPARK-48266] [SC-165897][CONNECT] Přesunutí objektu balíčku org.apache.spark.sql.connect.dsl do testovacího adresáře
  • [SPARK-47847] [SC-165651][CORE] Označit jako zastaralé spark.network.remoteReadNioBufferConversion
  • [SPARK-48171] [SC-165178][CORE] Odstranit použití zastaralých konstruktorů o.rocksdb.Logger
  • [SPARK-48235] [SC-165669][SQL] Předávání pouze spojení přímo do funkcí getBroadcastBuildSide a getShuffleHashJoinBuildSide místo všech argumentů.
  • [SPARK-48224] [SC-165648][SQL] Zakázat, aby klíče mapy byly typu variant
  • [SPARK-48248] [SC-165791][PYTHON] Oprava vnořeného pole tak, aby respektovala starší verzi souboru conf of inferArrayTypeFromFirstElement
  • [SPARK-47409] [SC-165568][SQL] Přidání podpory kolace pro typ funkcí/výrazů StringTrim (pro UTF8_BINARY & LCASE)
  • [SPARK-48143] [ES-1095638][SQL] Použití jednoduchých výjimek pro tok řízení mezi univocityParser a FailureSafeParser
  • [SPARK-48146] [SC-165668][SQL] Oprava agregační funkce v kontrolním výrazu části 'With'
  • [SPARK-48161] Vrátit zpět "[SC-165325][SQL] Přidání podpory kolací pro výrazy JSON"
  • [SPARK-47963] [CORE] Zajistit, aby externí ekosystém Spark mohl používat mechanismy strukturovaného protokolování.
  • [SPARK-48180] [SC-165632][SQL] Vylepšení chyby, když volání UDTF s TABLE argumentem zapomene závorky kolem více PARTITION/ORDER BY výrazů
  • [SPARK-48002] [SC-164132][PYTHON][SS] Přidání testu pro pozorované metriky v PySpark StreamingQueryListener
  • [SPARK-47421] [SC-165548][SQL] Přidání podpory kolace pro výrazy URL
  • [SPARK-48161] [SC-165325][SQL] Přidání podpory kolace pro výrazy JSON
  • [SPARK-47359] [SC-164328][SQL] Podpora funkce TRANSLATE pro práci s kompletovanými řetězci
  • [SPARK-47365] [SC-165643][PYTHON] Přidat metodu toArrow() DataFrame k PySparku
  • [SPARK-48228] [SC-165649][PYTHON][CONNECT] Implementujte chybějící ověření funkce v ApplyInXXX.
  • [SPARK-47986] [SC-165549][CONNECT][PYTHON] Nelze vytvořit novou relaci, pokud je výchozí relace uzavřena serverem.
  • [SPARK-47963] Vrátit zpět “[CORE] Umožnit externímu ekosystému Sparks použít strukturované mechanismy protokolování”
  • [SPARK-47963] [CORE] Zajistit, aby externí ekosystém Spark mohl používat mechanismy strukturovaného protokolování.
  • [SPARK-48208] [SC-165547][SS] Přeskočení poskytování metrik využití paměti ze služby RocksDB, pokud je povolené omezené využití paměti
  • [SPARK-47566] [SC-164314][SQL] Podpora funkce SubstringIndex pro práci s kompletovanými řetězci
  • [SPARK-47589] [SC-162127][SQL]Hive-Thriftserver: Migrace logError s proměnnými do systému strukturovaného protokolování
  • [SPARK-48205] [SC-165501][PYTHON] Odebrání privátního modifikátoru[sql] pro zdroje dat Pythonu
  • [SPARK-48173] [SC-165181][SQL] CheckAnalysis by měl vidět celý plán dotazu.
  • [SPARK-48197] [SC-165520][SQL] Vyhněte se chybě tvrzení pro neplatnou funkci lambda.
  • [SPARK-47318] [SC-162573][CORE] Přidává kolo HKDF k procesu odvození klíče AuthEngine pro dodržení standardních postupů výměny klíčů (KEX).
  • [SPARK-48184] [SC-165335][PYTHON][CONNECT] Vždy nastavte počáteční hodnotu Dataframe.sample na straně klienta.
  • [SPARK-48128] [SC-165004][SQL] pro výraz BitwiseCount / bit_count opravte chybu syntaxe při generování kódu pro vstupy typu boolean.
  • [SPARK-48147] [SC-165144][SS][CONNECT] Odebrat naslouchací procesy na straně klienta, když je odstraněna místní relace Sparku
  • [SPARK-48045] [SC-165299][PYTHON] Pandas API groupby s multi-agg-relabel ignoruje as_index=False
  • [SPARK-48191] [SC-165323][SQL] Podpora UTF-32 pro kódování a dekódování řetězců
  • [SPARK-45352] [SC-137627][SQL] Eliminujte skládací oddíly oken.
  • [SPARK-47297] [SC-165179][SQL] Přidejte podporu kolace pro výrazy formátu
  • [SPARK-47267] [SC-165170][SQL] Přidání podpory kolace pro výrazy hash
  • [SPARK-47965] [SC-163822][CORE] Vyhněte se orNull v TypedConfigBuilder a OptionalConfigEntry
  • [SPARK-48166] [SQL] Vyhněte se použití chyby BadRecordException jako uživatelské chyby ve VariantExpressionEvalUtils.
  • [SPARK-48105] [SC-165132][SS] Oprava stavu časování mezi uvolněním a snímkováním úložiště stavů
  • [SPARK-47922] [SC-163997][SQL] Implementujte výraz try_parse_json
  • [SPARK-47719] [SC-161909][SQL] Změna spark.sql.legacy.timeParse...
  • [SPARK-48035] [SC-165136][SQL] Oprava try_add/try_multiply, které jsou sémanticky ekvivalentní přidání/násobení.
  • [SPARK-48107] [SC-164878][PYTHON] Vyloučení testů z distribuce Pythonu
  • [SPARK-46894] [SC-164447][PYTHON] Přesunutí chybových podmínek PySpark do samostatného souboru JSON
  • [SPARK-47583] [SC-163825][CORE] SQL Core: Migrace logError s proměnnými do architektury strukturovaného protokolování
  • [SPARK-48064] Vrátit zpět “[SC-164697][SQL] Aktualizovat chybové zprávy pro třídy chyb související s rutinními postupy”
  • [SPARK-48048] [SC-164846][CONNECT][SS] Přidána podpora klientského posluchače pro Scala
  • [SPARK-48064] [SC-164697][SQL] Aktualizace chybových zpráv pro rutinní související třídy chyb
  • [SPARK-48056] [SC-164715][CONNECT][PYTHON] Plán se znovu spustí, pokud dojde k chybě SESSION_NOT_FOUND a nebyla přijata žádná částečná odpověď.
  • [SPARK-48124] [SC-165009][CORE] Ve výchozím nastavení zakažte strukturované protokolování pro Connect-Repl
  • [SPARK-47922] Vrátit zpět "[SC-163997][SQL] Implementujte výraz try_parse_json"
  • [SPARK-48065] [SC-164817][SQL] SPJ: allowJoinKeysSubsetOfPartitionKeys je příliš striktní
  • [SPARK-48114] [SC-164956][CORE] Předkompilování regulárních výrazů šablon, abyste se vyhnuli zbytečné práci
  • [SPARK-48067] [SC-164773][SQL] Oprava výchozích sloupců variant
  • [SPARK-47922] [SC-163997][SQL] Implementujte výraz try_parse_json
  • [SPARK-48075] [SC-164709] [SS] Přidání kontroly typů pro funkce PySpark avro
  • [SPARK-47793] [SC-164324][SS][PYTHON] Implementace SimpleDataSourceStreamReader pro streamovaný zdroj dat Pythonu
  • [SPARK-48081] [SC-164719] Oprava výjimky ClassCastException v NTile.checkInputDataTypes(), pokud je argument nesložitelný nebo nesprávného typu
  • [SPARK-48102] [SC-164853][SS] Sledování doby pro získávání metrik zdroje/výstupu během zaznamenávání průběhu streamovacích dotazů
  • [SPARK-47671] [SC-164854][Core] Povolení strukturovaného protokolování v log4j2.properties.template a aktualizace dokumentů
  • [SPARK-47904] [SC-163409][SQL] Zachování případu ve schématu Avro při použití enableStableIdentifiersForUnionType
  • [SPARK-48058] [SC-164695][SPARK-43727][PYTHON][CONNECT] UserDefinedFunction.returnType parsování řetězce DDL
  • [SPARK-46922] [SC-156102][CORE][SQL] Nezahrnujte uživatelsky viditelné běhové chyby
  • [SPARK-48047] [SC-164576][SQL] Snížení zatížení paměti prázdných značek TreeNode
  • [SPARK-47934] [SC-164648] [CORE] Zajistit koncová lomítka v přesměrováních URL HistoryServer
  • [SPARK-47921] [SC-163826][CONNECT] Oprava vytvoření příkazu ExecuteJobTag v executeHolderu
  • [SPARK-48014] [SC-164150][SQL] Změna chyby makeFromJava v EvaluatePythonu na chybu zobrazenou uživatelem
  • [SPARK-47903] [SC-163424][PYTHON] Přidání podpory pro zbývající skalární typy v knihovně PySpark Variant
  • [SPARK-48068] [SC-164579][PYTHON] mypy by měl mít parametr --python-executable
  • [SPARK-47846] [SC-163074][SQL] Přidání podpory pro typ Variant ve výrazu from_json
  • [SPARK-48050] [SC-164322][SS] Zaznamenat logický plán při spuštění dotazu
  • [SPARK-47810] [SC-163076][SQL] Nahraďte ekvivalentní výraz <=> v podmínce spojení.
  • [SPARK-47741] [SC-164290] Bylo přidáno zpracování přetečení zásobníku v analyzátoru
  • [SPARK-48053] [SC-164309][PYTHON][CONNECT] SparkSession.createDataFrame by měl upozornit na nepodporované možnosti.
  • [SPARK-47939] [SC-164171][SQL] Implementujte nové pravidlo analyzátoru pro přesun ParameterizedQuery uvnitř ExplainCommand a DescribeQueryCommand.
  • [SPARK-48063] [SC-164432][CORE] Ve výchozím nastavení povolte spark.stage.ignoreDecommissionFetchFailure
  • [SPARK-48016] [SC-164280][SQL] Oprava chyby ve funkci try_divide při desítkách
  • [SPARK-48033] [SC-164291][SQL] Oprava výrazů RuntimeReplaceable používaných ve výchozích sloupcích
  • [SPARK-48010] [SC-164051][SQL][ES-1109148] Vyhněte se opakovaným voláním conf.resolver v resolveExpression
  • [SPARK-48003] [SC-164323][SQL] Přidání podpory kolace pro agregaci náčrtků hll
  • [SPARK-47994] [SC-164175][SQL] Oprava chyby s filtrováním sloupců CASE WHEN v SQLServeru
  • [SPARK-47984] [SC-163837][ML][SQL] Změna MetricsAggregate/V2Aggregator#serialize/deserialize pro volání SparkSerDeUtils#serialize/deserialize
  • [SPARK-48042] [SC-164202][SQL] Místo vytváření kopií na úrovni metody použijte formát časového razítka s časovým pásmem na úrovni třídy.
  • [SPARK-47596] [SPARK-47600][SPARK-47604][SPARK-47804] Migrace strukturovaných protokolů
  • [SPARK-47594] [SPARK-47590][SPARK-47588][SPARK-47584] Migrace strukturovaných logů
  • [SPARK-47567] [SC-164172][SQL] Podpora pro funkci NAJÍT pro práci s kolacionovanými řetězci
  • [SPARK-47764] [SC-163820][CORE][SQL] Vyčištění závislostí shuffle na základě ShuffleCleanupMode
  • [SPARK-48039] [SC-164174][PYTHON][CONNECT] Aktualizujte třídu chyb pro group.apply
  • [SPARK-47414] [SC-163831][SQL] Podpora řazení s malými písmeny pro výrazy regexp
  • [SPARK-47418] [SC-163818][SQL] Přidání ručně vytvořených implementací pro kontrolu malých písmen v unicode, funkcí 'startsWith' a 'endsWith', a optimalizaci UTF8_BINARY_LCASE
  • [SPARK-47580] [SC-163834][SQL] SQL catalyst: eliminujte nepojmenované proměnné v protokolech chyb.
  • [SPARK-47351] [SC-164008][SQL] Přidat podporu kolace pro StringToMap & Zakrýt řetězcové výrazy
  • [SPARK-47292] [SC-164151][SS] safeMapToJValue by měl zvážit hodnoty typu null.
  • [SPARK-47476] [SC-164014][SQL] Podpora funkce REPLACE pro práci s kompletovanými řetězci
  • [SPARK-47408] [SC-164104][SQL] Oprava matematických výrazů, které používají StringType
  • [SPARK-47350] [SC-164006][SQL] Přidat podporu kolací pro výraz řetězce SplitPart
  • [SPARK-47692] [SC-163819][SQL] Oprava významu výchozího typu StringType v implicitním přetypování
  • [SPARK-47094] [SC-161957][SQL] SPJ: Dynamicky rebalance počtu kbelíků, pokud se nerovnají
  • [SPARK-48001] [SC-164000][CORE] Odstranit nepoužívané private implicit def arrayToArrayWritable z SparkContext
  • [SPARK-47986] [SC-163999][CONNECT][PYTHON] Při zavření výchozí relace serverem nejde vytvořit novou relaci
  • [SPARK-48019] [SC-164121] Oprava nesprávného chování u ColumnVector/ColumnarArray se slovníkem a hodnotami null
  • [SPARK-47743] [SPARK-47592][SPARK-47589][SPARK-47581][SPARK-47586][SPARK-47593][SPARK-47595][SPARK-47587][SPARK-47603] Migrace strukturovaných protokolů
  • [SPARK-47999] [SC-163998][SS] Vylepšení protokolování při vytváření snímků a přidávání/odebírání položek z mapy mezipaměti stavu ve zprostředkovateli úložiště stavů s podporou HDFS
  • [SPARK-47417] [SC-162872][SQL] Podpora kolace: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Sentences
  • [SPARK-47712] [SC-161871][CONNECT] Povolit pluginům připojení pro vytváření a zpracování datových sad
  • [SPARK-47411] [SC-163351][SQL] Podpora funkcí StringInstr & FindInSet pro práci s kompletovanými řetězci
  • [SPARK-47360] [SC-163014][SQL] Podpora porovnávání řetězců: Překrytí, Formátovací řetězec, Délka, Bitová délka, Oktetová délka, SoundEx, Luhnův test
  • [SPARK-47413] [SC-163323][SQL] – přidat podporu pro funkce substr, left a right s ohledem na kolace
  • [SPARK-47983] [SC-163835][SQL] Demote spark.sql.pyspark.legacy.inferArrayTypeFromFirstElement.enabled na interní
  • [SPARK-47964] [SC-163816][PYTHON][CONNECT] Skrýt SQLContext a HiveContext v pyspark-connect
  • [SPARK-47985] [SC-163841][PYTHON] Zjednodušení funkcí pomocí lit
  • [SPARK-47633] [SC-163453][SQL] Zahrnutí výstupu plánu na pravé straně v LateralJoin#allAttributes pro konzistentnější kanonizaci
  • [SPARK-47909] Vrátit zpět “[PYTHON][CONNECT] Nadřazená třída datového rámce f…
  • [SPARK-47767] [SC-163096][SQL] Zobrazit hodnotu posunu v TakeOrderedAndProjectExec
  • [SPARK-47822] [SC-162968][SQL] Zákaz hashovacích výrazů v hashování datového typu Variant
  • [SPARK-47490] [SC-160494][SS] Oprava použití konstruktoru loggeru RocksDB k zamezení varování o zastaralosti
  • [SPARK-47417] Vrátit "[SC-162872][SQL] Podpora řazení: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Sentences"
  • [SPARK-47352] [SC-163460][SQL] Oprava povědomí o řazení pro velká písmena, malá písmena a první velké písmeno
  • [SPARK-47909] [PYTHON][CONNECT] Třída nadřazeného datového rámce pro Spark Connect a Spark Classic
  • [SPARK-47417] [SC-162872][SQL] Podpora kolace: Ascii, Chr, Base64, UnBase64, Decode, StringDecode, Encode, ToBinary, FormatNumber, Sentences

Podpora ovladačů Databricks ODBC/JDBC

Databricks podporuje ovladače ODBC/JDBC vydané v posledních 2 letech. Stáhněte si nedávno vydané ovladače a upgrade (stáhnout ODBC, stáhnout JDBC).

Viz aktualizace údržby Databricks Runtime 15.3.

Systémové prostředí

  • operační systém: Ubuntu 22.04.4 LTS
  • Java: Zulu 8.78.0.19-CA-linux64
  • Scala: 2.12.18
  • Python: 3.11.0
  • R: 4.3.2
  • Delta Lake: 3.2.0

Nainstalované knihovny Pythonu

Knihovna Verze Knihovna Verze Knihovna Verze
asttokens 2.0.5 astunparse 1.6.3 Azure-Core 1.30.1
azure-storage-blob 12.19.1 azure-storage-file-datalake 12.14.0 zpětné volání 0.2.0
černý 23.3.0 blinkr 1.4 boto3 1.34.39
botocore 1.34.39 cachetools 5.3.3 certifikát 2023.7.22
cffi 1.15.1 chardet 4.0.0 charset-normalizer 2.0.4
Klikněte 8.0.4 cloudpickle 2.2.1 Komunikace 0.1.2
obrysová křivka 1.0.5 kryptografie 41.0.3 cyklista 0.11.0
Cython 0.29.32 Databricks SDK 0.20.0 dbus-python 1.2.18
debugpy 1.6.7 dekoratér 5.1.1 distlib 0.3.8
vstupní body 0.4 vykonávající 0.8.3 přehled aspektů 1.1.1
zámek souboru 3.13.4 fonttools 4.25.0 gitdb 4.0.11
GitPython 3.1.43 google-api-core 2.18.0 google-auth 2.29.0
google-cloud-core 2.4.1 google-cloud-storage 2.16.0 google-crc32c 1.5.0
google-resumable-media 2.7.0 googleapis-common-protos 1.63.0 grpcio 1.60.0
grpcio-status 1.60.0 httplib2 0.20.2 idna 3.4
importlib-metadata 6.0.0 ipyflow-core 0.0.198 ipykernel 6.25.1
ipython 8.15.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 Jedi 0.18.1 Jeepney 0.7.1
jmespath 0.10.0 joblib 1.2.0 jupyter_client 7.4.9
jupyter_core 5.3.0 klíčenka 23.5.0 kiwisolver 1.4.4
launchpadlib 1.10.16 lazr.restfulclient 0.14.4 lazr.uri 1.0.6
matplotlib 3.7.2 matplotlib-inline 0.1.6 mlflow-skinny 2.11.3
more-itertools 8.10.0 mypy-extensions 0.4.3 nest-asyncio 1.5.6
numpy 1.23.5 oauthlib 3.2.0 balení 23.2
pandas 1.5.3 parso 0.8.3 specifikace cesty 0.10.3
bábovka 0.5.3 pexpect 4.8.0 pickleshare 0.7.5
Polštář 9.4.0 pip 23.2.1 platformdirs 3.10.0
plotly 5.9.0 prompt-toolkit 3.0.36 proto-plus 1.23.0
protobuf 4.24.1 psutil 5.9.0 psycopg2 2.9.3
ptyprocess 0.7.0 čistý-eval 0.2.2 pyarrow 14.0.1
pyasn1 0.4.8 pyasn1-modules 0.2.8 pyccolo 0.0.52
pycparser 2.21 pydantic 1.10.6 Pygments 2.15.1
PyGObject 3.42.1 PyJWT 2.3.0 pyodbc 4.0.38
pyparsing 3.0.9 python-dateutil 2.8.2 python-lsp-jsonrpc 1.1.1
pytz 2022.7 PyYAML 6.0 pyzmq 23.2.0
požadavky 2.31.0 Rsa 4.9 s3transfer 0.10.1
scikit-learn 1.3.0 scipy 1.11.1 seaborn 0.12.2
SecretStorage 3.3.1 setuptools 68.0.0 Šest 1.16.0
smmap 5.0.1 sqlparse 0.5.0 ssh-import-id 5.11
stack-data 0.2.0 statsmodels 0.14.0 houževnatost 8.2.2
threadpoolctl 2.2.0 tokenize-rt 4.2.1 tornádo 6.3.2
traitlets 5.7.1 typing_extensions 4.10.0 tzdata 2022.1
ujson 5.4.0 bezobslužné aktualizace 0.1 urllib3 1.26.16
virtualenv 20.24.2 wadllib 1.3.6 wcwidth 0.2.5
kolo 0.38.4 zipp 3.11.0

nainstalované knihovny jazyka R

Knihovny jazyka R se instalují z Posit Package Manageru ze snímku CRAN.

Knihovna Verze Knihovna Verze Knihovna Verze
šíp 14.0.0.2 askpass 1.2.0 assertthat 0.2.1
zpětné portování 1.4.1 základna 4.3.2 base64enc 0.1-3
bigD 0.2.0 trochu 4.0.5 bit64 4.0.5
bitops 1.0-7 skvrna 1.2.4 bota 1.3-28
vařit 1.0-10 šmrnc 1.1.4 koště 1.0.5
bslib 0.6.1 cachem 1.0.8 volající 3.7.3
stříška 6.0-94 cellranger 1.1.0 chronograf 2.3-61
třída 7.3-22 Cli 3.6.2 clipr 0.8.0
hodiny 0.7.0 shluk 2.1.4 codetools 0.2-19
barevný prostor 2.1-0 commonmark 1.9.1 kompilátor 4.3.2
konfigurace 0.3.2 v rozporu 1.2.0 cpp11 0.4.7
pastelka 1.5.2 pověření 2.0.1 kroucení 5.2.0
data.table 1.15.0 Datové sady 4.3.2 DBI 1.2.1
dbplyr 2.4.0 popis 1.4.3 devtools 2.4.5
schéma 1.6.5 diffobj 0.3.5 trávit 0.6.34
osvětlený shora 0.4.3 dplyr 1.1.4 dtplyr 1.3.1
e1071 1.7-14 výpustka 0.3.2 hodnotit 0.23
fanoušci 1.0.6 barvy 2.1.1 Fastmap (rychlé mapování) 1.1.1
fontawesome 0.5.2 forcats 1.0.0 foreach 1.5.2
zahraniční 0.8-85 kovat 0.2.0 fs 1.6.3
budoucnost 1.33.1 future.apply 1.11.1 kloktadlo 1.5.2
generika 0.1.3 Gert 2.0.1 ggplot2 3.4.4
Gh 1.4.0 git2r 0.33.0 gitcreds 0.1.2
glmnet 4.1-8 globály 0.16.2 lepidlo 1.7.0
googledrive 2.1.1 googlesheets4 1.1.1 Gower 1.0.1
grafika 4.3.2 grDevices 4.3.2 mřížka 4.3.2
gridExtra 2.3 gsubfn 0.7 GT 0.10.1
gtable 0.3.4 bezpečnostní přilba 1.3.1 útočiště 2.5.4
highr 0.10 Hms 1.1.3 htmltools 0.5.7
htmlwidgets 1.6.4 httpuv 1.6.14 httr 1.4.7
httr2 1.0.0 Id 1.0.1 ini 0.3.1
ipred 0.9-14 isoband 0.2.7 Iterátory 1.0.14
jquerylib 0.1.4 jsonlite 1.8.8 šťavnatý džus 0.1.0
KernSmooth 2.23-21 knitr 1,45 značení 0.4.3
později 1.3.2 mříž 0.21-8 láva 1.7.3
životní cyklus 1.0.4 listenv 0.9.1 lubridate 1.9.3
magrittr 2.0.3 markdown 1.12 MŠE 7.3-60
Matice 1.5-4.1 memoise 2.0.1 metody 4.3.2
mgcv 1.8-42 mim 0.12 miniUI 0.1.1.1
mlflow 2.10.0 ModelMetrics 1.2.2.2 modelr 0.1.11
munsell 0.5.0 nlme 3.1-163 nnet 7.3-19
numDeriv (numerická derivace) 2016.8-1.1 openssl 2.1.1 rovnoběžný 4.3.2
paralelně 1.36.0 pilíř 1.9.0 pkgbuild 1.4.3
pkgconfig 2.0.3 pkgdown 2.0.7 pkgload 1.3.4
plogr 0.2.0 plyr 1.8.9 chvála 1.0.0
prettyunits 1.2.0 pROC 1.18.5 processx 3.8.3
prodlim 2023.08.28 profvis 0.3.8 pokrok 1.2.3
progressr 0.14.0 sliby 1.2.1 proto 1.0.0
proxy 0.4-27 p.s. 1.7.6 purrr 1.0.2
R6 2.5.1 ragg 1.2.7 randomForest 4.7-1.1
rappdirs 0.3.3 rcmdcheck 1.4.0 RColorBrewer 1.1-3
Rcpp 1.0.12 RcppEigen 0.3.3.9.4 reagovatelná 0.4.4
reactR 0.5.0 čtenář 2.1.5 readxl 1.4.3
recepty 1.0.9 odvetný zápas 2.0.0 rematch2 2.1.2
dálková ovládání 2.4.2.1 reprodukovatelný příklad 2.1.0 reshape2 1.4.4
rlang 1.1.3 rmarkdown 2.25 RODBC 1.3-23
roxygen2 7.3.1 rpart 4.1.21 rprojroot 2.0.4
Rserve 1.8-13 RSQLite 2.3.5 rstudioapi 0.15.0
rversions 2.1.2 rvest 1.0.3 drzost 0.4.8
váhy 1.3.0 selektor 0.4-2 sessioninfo 1.2.2
tvar 1.4.6 lesklý 1.8.0 sourcetools 0.1.7-1
sparklyr 1.8.4 prostorový 7.3-15 spline 4.3.2
sqldf 0.4-11 SQUAREM 2021.1 statistické údaje 4.3.2
Statistiky 4 4.3.2 řetězce 1.8.3 stringr 1.5.1
přežití 3.5-5 naparování 3.33.1 systém 3.4.2
systemfonts 1.0.5 tcltk 4.3.2 testthat 3.2.1
formátování textu 0.3.7 tibble 3.2.1 tidyr 1.3.1
tidyselect 1.2.0 tidyverse 2.0.0 změna času 0.3.0
časDatum 4032.109 tinytex 0.49 nářadí 4.3.2
tzdb 0.4.0 urlchecker 1.0.1 usethis 2.2.2
utf8 1.2.4 nástroje 4.3.2 uuid 1.2-0
V8 4.4.1 vctrs 0.6.5 viridisLite 0.4.2
vrrr 1.6.5 Waldo 0.5.2 vous 0.4.1
withr 3.0.0 xfun 0.41 xml2 1.3.6
xopen 1.0.0 xtable 1.8-4 yaml 2.3.8
zeallot 0.1.0 zip 2.3.1

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny ID artefaktu Verze
antlr antlr 2.7.7
com.amazonaws amazon-kinesis-client 1.12.0
com.amazonaws automatické škálování aws-java-sdk 1.12.610
com.amazonaws aws-java-sdk-cloudformation 1.12.610
com.amazonaws aws-java-sdk-cloudfront 1.12.610
com.amazonaws aws-java-sdk-cloudhsm 1.12.610
com.amazonaws aws-java-sdk-cloudsearch 1.12.610
com.amazonaws aws-java-sdk-cloudtrail 1.12.610
com.amazonaws aws-java-sdk-cloudwatch 1.12.610
com.amazonaws aws-java-sdk-cloudwatchmetrics 1.12.610
com.amazonaws aws-java-sdk-codedeploy 1.12.610
com.amazonaws aws-java-sdk-cognitoidentity 1.12.610
com.amazonaws aws-java-sdk-cognitosync 1.12.610
com.amazonaws aws-java-sdk-config 1.12.610
com.amazonaws aws-java-sdk-core 1.12.610
com.amazonaws aws-java-sdk-datapipeline 1.12.610
com.amazonaws aws-java-sdk-directconnect 1.12.610
com.amazonaws aws-java-sdk-directory 1.12.610
com.amazonaws aws-java-sdk-dynamodb 1.12.610
com.amazonaws aws-java-sdk-ec2 1.12.610
com.amazonaws aws-java-sdk-ecs 1.12.610
com.amazonaws aws-java-sdk-efs 1.12.610
com.amazonaws aws-java-sdk-elasticache 1.12.610
com.amazonaws aws-java-sdk-elasticbeanstalk 1.12.610
com.amazonaws aws-java-sdk-elasticloadbalancing 1.12.610
com.amazonaws aws-java-sdk-elastictranscoder 1.12.610
com.amazonaws aws-java-sdk-emr 1.12.610
com.amazonaws aws-java-sdk-glacier 1.12.610
com.amazonaws aws-java-sdk-glue 1.12.610
com.amazonaws aws-java-sdk-iam 1.12.610
com.amazonaws aws-java-sdk-importexport 1.12.610
com.amazonaws aws-java-sdk-kinesis 1.12.610
com.amazonaws aws-java-sdk-kms 1.12.610
com.amazonaws aws-java-sdk-lambda 1.12.610
com.amazonaws aws-java-sdk-logs 1.12.610
com.amazonaws aws-java-sdk-machinelearning 1.12.610
com.amazonaws aws-java-sdk-opsworks 1.12.610
com.amazonaws aws-java-sdk-rds 1.12.610
com.amazonaws aws-java-sdk-redshift 1.12.610
com.amazonaws aws-java-sdk-route53 1.12.610
com.amazonaws aws-java-sdk-s3 1.12.610
com.amazonaws aws-java-sdk-ses 1.12.610
com.amazonaws aws-java-sdk-simpledb 1.12.610
com.amazonaws aws-java-sdk-simpleworkflow 1.12.610
com.amazonaws aws-java-sdk-sns 1.12.610
com.amazonaws aws-java-sdk-sqs 1.12.610
com.amazonaws aws-java-sdk-ssm 1.12.610
com.amazonaws aws-java-sdk-storagegateway 1.12.610
com.amazonaws aws-java-sdk-sts 1.12.610
com.amazonaws aws-java-sdk-support 1.12.610
com.amazonaws aws-java-sdk-swf-libraries 1.11.22
com.amazonaws aws-java-sdk-workspaces 1.12.610
com.amazonaws jmespath-java 1.12.610
com.clearspring.analytics tok 2.9.6
com.databricks Rserve 1.8-3
com.databricks databricks-sdk-java 0.17.1
com.databricks jets3t 0.7.1-0
com.databricks.scalapb compilerplugin_2.12 0.4.15-10
com.databricks.scalapb scalapb-runtime_2.12 0.4.15-10
com.esotericsoftware Kryo-shaded 4.0.2
com.esotericsoftware minlog 1.3.0
com.fasterxml spolužák 1.3.4
com.fasterxml.jackson.core jackson-annotations 2.15.2
com.fasterxml.jackson.core jackson-core 2.15.2
com.fasterxml.jackson.core jackson-databind 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-cbor 2.15.2
com.fasterxml.jackson.dataformat jackson-dataformat-yaml 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-joda 2.15.2
com.fasterxml.jackson.datatype jackson-datatype-jsr310 2.16.0
com.fasterxml.jackson.module jackson-module-paranamer 2.15.2
com.fasterxml.jackson.module jackson-module-scala_2.12 2.15.2
com.github.ben-manes.kofein kofein 2.9.3
com.github.fommil jniloader 1.1
com.github.fommil.netlib native_ref-java 1.1
com.github.fommil.netlib native_ref-java Nativní verze 1.1
com.github.fommil.netlib nativní_systém-java 1.1
com.github.fommil.netlib nativní_systém-java Nativní verze 1.1
com.github.fommil.netlib netlib-native_ref-linux-x86_64 Nativní verze 1.1
com.github.fommil.netlib netlib-native_system-linux-x86_64 Nativní verze 1.1
com.github.luben zstd-jni 1.5.5-4
com.github.wendykierp JTransforms 3.1
com.google.code.findbugs jsr305 3.0.0
com.google.code.gson gson 2.10.1
com.google.crypto.tink Cink 1.9.0
com.google.errorprone error_prone_annotations 2.10.0
com.google.flatbuffers flatbuffers-java 23.5.26
com.google.guava guava 15.0
com.google.protobuf protobuf-java 2.6.1
com.helger profiler 1.1.1
com.ibm.icu icu4j 72.1
com.jcraft jsch 0.1.55
com.jolbox bonecp 0.8.0.RELEASE
com.lihaoyi sourcecode_2.12 0.1.9
com.microsoft.azure azure-data-lake-store-sdk 2.3.9
com.microsoft.sqlserver mssql-jdbc 11.2.2.jre8
com.ning compress-lzf 1.1.2
com.sun.mail javax.mail 1.5.2
com.sun.xml.bind jaxb-core 2.2.11
com.sun.xml.bind jaxb-impl 2.2.11
com.tdunning json 1.8
com.thoughtworks.paranamer paranamer 2.8
com.trueaccord.lenses lenses_2.12 0.4.12
com.twitter chill-java 0.10.0
com.twitter chill_2.12 0.10.0
com.twitter util-app_2.12 7.1.0
com.twitter util-core_2.12 7.1.0
com.twitter util-function_2.12 7.1.0
com.twitter util-jvm_2.12 7.1.0
com.twitter util-lint_2.12 7.1.0
com.twitter util-registry_2.12 7.1.0
com.twitter util-stats_2.12 7.1.0
com.typesafe konfigurace 1.4.3
com.typesafe.scala-logging scala-logging_2.12 3.7.2
com.uber h3 3.7.3
com.univocity univocity-parsers 2.9.1
com.zaxxer HikariCP 4.0.3
commons-cli commons-cli 1.5.0
commons-codec commons-codec 1.16.0
společné sbírky společné sbírky 3.2.2
commons-dbcp commons-dbcp 1.4
Commons-FileUpload Commons-FileUpload 1.5
commons-httpclient commons-httpclient 3.1
commons-io commons-io 2.13.0
commons-lang commons-lang 2.6
commons-logging commons-logging 1.1.3
commons-pool commons-pool 1.5.4
dev.ludovic.netlib arpack 3.0.3
dev.ludovic.netlib Blas 3.0.3
dev.ludovic.netlib lapack 3.0.3
info.ganglia.gmetric4j gmetric4j 1.0.10
io.airlift kompresor 0.25
io.delta delta-sharing-client_2.12 1.0.5
io.dropwizard.metrics anotace metrik 4.2.19
io.dropwizard.metrics jádro metrik 4.2.19
io.dropwizard.metrics metrics-graphite 4.2.19
io.dropwizard.metrics metriky – kontroly stavu 4.2.19
io.dropwizard.metrics metrics-jetty9 4.2.19
io.dropwizard.metrics metrics-jmx 4.2.19
io.dropwizard.metrics metrics-json 4.2.19
io.dropwizard.metrics metrics-jvm 4.2.19
io.dropwizard.metrics metriky – servlety 4.2.19
io.netty netty-all 4.1.96.Final
io.netty netty-buffer 4.1.96.Final
io.netty netty-codec 4.1.96.Final
io.netty netty-codec-http 4.1.96.Final
io.netty netty-codec-http2 4.1.96.Final
io.netty netty-codec-socks 4.1.96.Final
io.netty netty-common 4.1.96.Final
io.netty obslužná rutina netty 4.1.96.Final
io.netty netty-handler-proxy 4.1.96.Final
io.netty netty-resolver 4.1.96.Final
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-linux-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-aarch_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-osx-x86_64
io.netty netty-tcnative-boringssl-static 2.0.61.Final-windows-x86_64
io.netty netty-tcnative-classes 2.0.61.Final
io.netty netty transport 4.1.96.Final
io.netty netty-transport-classes-epoll 4.1.96.Final
io.netty netty-transport-classes-kqueue 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final
io.netty netty-transport-native-epoll 4.1.96.Final-linux-aarch_64
io.netty netty-transport-native-epoll 4.1.96.Final-linux-x86_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-aarch_64
io.netty netty-transport-native-kqueue 4.1.96.Final-osx-x86_64
io.netty netty-transport-native-unix-common 4.1.96.Final
io.prometheus simpleclient 0.7.0
io.prometheus simpleclient_common 0.7.0
io.prometheus simpleclient_dropwizard 0.7.0
io.prometheus simpleclient_pushgateway 0.7.0
io.prometheus simpleclient_servlet 0.7.0
io.prometheus.jmx sběratel 0.12.0
jakarta.annotation jakarta.annotation-api 1.3.5
jakarta.servlet jakarta.servlet-api 4.0.3
jakarta.validation jakarta.validation-api 2.0.2
jakarta.ws.rs jakarta.ws.rs-api 2.1.6
javax.activation aktivace 1.1.1
javax.el javax.el-api 2.2.4
javax.jdo jdo-api 3.0.1
javax.transaction jta 1.1
javax.transaction transaction-api 1.1
javax.xml.bind jaxb-api 2.2.11
javolution javolution 5.5.1
jline jline 2.14.6
joda-time joda-time 2.12.1
net.java.dev.jna jna 5.8.0
net.razorvine marináda 1.3
net.sf.jpam jpam 1.1
net.sf.opencsv opencsv 2.3
net.sf.supercsv super-csv 2.2.0
net.snowflake snowflake-ingest-sdk 0.9.6
net.sourceforge.f2j arpack_combined_all 0.1
org.acplt.remotetea remotetea-oncrpc 1.1.2
org.antlr ST4 4.0.4
org.antlr antlr-runtime 3.5.2
org.antlr antlr4-runtime 4.9.3
org.antlr stringtemplate 3.2.1
org.apache.ant mravenec 1.10.11
org.apache.ant ant-jsch 1.10.11
org.apache.ant ant-launcher 1.10.11
org.apache.arrow šipkový formát 15.0.0
org.apache.arrow arrow-memory-core 15.0.0
org.apache.arrow arrow-memory-netty 15.0.0
org.apache.arrow šipka-vektor 15.0.0
org.apache.avro avro 1.11.3
org.apache.avro avro-ipc 1.11.3
org.apache.avro avro-mapred 1.11.3
org.apache.commons commons-collections4 4.4
org.apache.commons commons-compress 1.23.0
org.apache.commons commons-crypto 1.1.0
org.apache.commons commons-lang3 3.12.0
org.apache.commons commons-math3 3.6.1
org.apache.commons commons-text 1.10.0
org.apache.kurátor kurátor-klient 2.13.0
org.apache.kurátor kurátor-framework 2.13.0
org.apache.kurátor recepty kurátora 2.13.0
org.apache.datasketches datasketches-java 3.1.0
org.apache.datasketches datasketches-memory 2.0.0
org.apache.derby derby 10.14.2.0
org.apache.hadoop hadoop-client-runtime 3.3.6
org.apache.hive hive-beeline 2.3.9
org.apache.hive hive-cli 2.3.9
org.apache.hive hive-jdbc 2.3.9
org.apache.hive hive-llap-client 2.3.9
org.apache.hive hive-llap-common 2.3.9
org.apache.hive hive-serde 2.3.9
org.apache.hive hive-shims 2.3.9
org.apache.hive hive-storage-api 2.8.1
org.apache.hive.shims hive-shims-0.23 2.3.9
org.apache.hive.shims hive-shims-common 2.3.9
org.apache.hive.shims hive-shims-scheduler 2.3.9
org.apache.httpcomponents httpclient 4.5.14
org.apache.httpcomponents httpcore 4.4.16
org.apache.ivy břečťan 2.5.1
org.apache.logging.log4j log4j-1.2-api 2.22.1
org.apache.logging.log4j log4j-api 2.22.1
org.apache.logging.log4j log4j-core 2.22.1
org.apache.logging.log4j log4j-layout-template-json 2.22.1
org.apache.logging.log4j log4j-slf4j2-impl 2.22.1
org.apache.orc orc-core 1.9.2-shaded-protobuf
org.apache.orc orc-mapreduce 1.9.2-shaded-protobuf
org.apache.orc orc-shims 1.9.2
org.apache.thrift libfb303 0.9.3
org.apache.thrift libthrift 0.12.0
org.apache.ws.xmlschema xmlschema-core 2.3.0
org.apache.xbean xbean-asm9-shaded 4.23
org.apache.yetus poznámky pro publikum 0.13.0
org.apache.zookeeper ošetřovatel zvířat 3.6.3
org.apache.zookeeper zookeeper-jute 3.6.3
org.checkerframework checker-qual 3.31.0
org.codehaus.jackson jackson-core-asl 1.9.13
org.codehaus.jackson jackson-mapper-asl 1.9.13
org.codehaus.janino commons-compiler 3.0.16
org.codehaus.janino Janino 3.0.16
org.datanucleus datanucleus-api-jdo 4.2.4
org.datanucleus datanucleus-core 4.1.17
org.datanucleus datanucleus-rdbms 4.1.19
org.datanucleus javax.jdo 3.2.0-m3
org.eclipse.collections eclipse-collections 11.1.0
org.eclipse.collections eclipse-collections-api 11.1.0
org.eclipse.jetty jetty-client 9.4.52.v20230823
org.eclipse.jetty pokračování Jetty 9.4.52.v20230823
org.eclipse.jetty jetty-http 9.4.52.v20230823
org.eclipse.jetty jetty-io 9.4.52.v20230823
org.eclipse.jetty jetty-jndi 9.4.52.v20230823
org.eclipse.jetty jetty-plus 9.4.52.v20230823
org.eclipse.jetty jetty-proxy 9.4.52.v20230823
org.eclipse.jetty jetty-security 9.4.52.v20230823
org.eclipse.jetty jetty-server 9.4.52.v20230823
org.eclipse.jetty jetty-servlet 9.4.52.v20230823
org.eclipse.jetty jetty-servlets 9.4.52.v20230823
org.eclipse.jetty jetty-util 9.4.52.v20230823
org.eclipse.jetty jetty-util-ajax 9.4.52.v20230823
org.eclipse.jetty jetty-webapp 9.4.52.v20230823
org.eclipse.jetty jetty-xml 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-api 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-client 9.4.52.v20230823
org.eclipse.jetty.websocket websocket – společné 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-server 9.4.52.v20230823
org.eclipse.jetty.websocket websocket-servlet 9.4.52.v20230823
org.fusesource.leveldbjni leveldbjni-all 1.8
org.glassfish.hk2 hk2-api 2.6.1
org.glassfish.hk2 hk2-locator 2.6.1
org.glassfish.hk2 hk2-utils 2.6.1
org.glassfish.hk2 osgi-resource-locator 1.0.3
org.glassfish.hk2.external aopalliance-repackaged 2.6.1
org.glassfish.hk2.external jakarta.inject 2.6.1
org.glassfish.jersey.containers jersey-container-servlet 2.40
org.glassfish.jersey.containers jersey-container-servlet-core 2.40
org.glassfish.jersey.core jersey-client 2.40
org.glassfish.jersey.core žerzejové společné 2.40
org.glassfish.jersey.core jersey-server 2.40
org.glassfish.jersey.inject jersey-hk2 2.40
org.hibernate.validator Hibernate-validator 6.1.7.Final
org.ini4j ini4j 0.5.4
org.javassist Javassist 3.29.2-GA
org.jboss.logging jboss-logging 3.3.2.Final
org.jdbi jdbi 2.63.1
org.jetbrains anotace 17.0.0
org.joda joda-convert 1.7
org.jodd jodd-core 3.5.2
org.json4s json4s-ast_2.12 3.7.0-M11
org.json4s json4s-core_2.12 3.7.0-M11
org.json4s json4s-jackson_2.12 3.7.0-M11
org.json4s json4s-scalap_2.12 3.7.0-M11
org.lz4 lz4-java 1.8.0
org.mlflow mlflow-spark_2.12 2.9.1
org.objenesis objenesis 2.5.1
org.postgresql postgresql 42.6.1
org.roaringbitmap RoaringBitmap 0.9.45-databricks
org.roaringbitmap Podložky 0.9.45-databricks
org.rocksdb rocksdbjni 8.11.4
org.rosuda.REngine REngine 2.1.0
org.scala-lang scala-compiler_2.12 2.12.15
org.scala-lang scala-library_2.12 2.12.15
org.scala-lang scala-reflect_2.12 2.12.15
org.scala-lang.modules scala-collection-compat_2.12 2.11.0
org.scala-lang.modules scala-parser-combinators_2.12 1.1.2
org.scala-lang.modules scala-xml_2.12 1.2.0
org.scala-sbt testovací rozhraní 1.0
org.scalacheck scalacheck_2.12 1.14.2
org.scalactic scalactic_2.12 3.2.15
org.scalanlp breeze-macros_2.12 2.1.0
org.scalanlp breeze_2.12 2.1.0
org.scalatest kompatibilní s scalatestem 3.2.15
org.scalatest scalatest-core_2.12 3.2.15
org.scalatest scalatest-diagrams_2.12 3.2.15
org.scalatest scalatest-featurespec_2.12 3.2.15
org.scalatest scalatest-flatspec_2.12 3.2.15
org.scalatest scalatest-freespec_2.12 3.2.15
org.scalatest scalatest-funspec_2.12 3.2.15
org.scalatest scalatest-funsuite_2.12 3.2.15
org.scalatest scalatest-matchers-core_2.12 3.2.15
org.scalatest scalatest-mustmatchers_2.12 3.2.15
org.scalatest scalatest-propspec_2.12 3.2.15
org.scalatest scalatest-refspec_2.12 3.2.15
org.scalatest scalatest-shouldmatchers_2.12 3.2.15
org.scalatest scalatest-wordspec_2.12 3.2.15
org.scalatest scalatest_2.12 3.2.15
org.slf4j jcl-over-slf4j 2.0.7
org.slf4j jul-to-slf4j 2.0.7
org.slf4j slf4j-api 2.0.7
org.slf4j slf4j-simple 1.7.25
org.threeten threeten-extra 1.7.1
org.tukaani xz 1.9
org.typelevel algebra_2.12 2.0.1
org.typelevel cats-kernel_2.12 2.1.1
org.typelevel spire-macros_2.12 0.17.0
org.typelevel spire-platform_2.12 0.17.0
org.typelevel spire-util_2.12 0.17.0
org.typelevel spire_2.12 0.17.0
org.wildfly.openssl wildfly-openssl 1.1.3.Final
org.xerial sqlite-jdbc 3.42.0.0
org.xerial.snappy snappy-java 1.1.10.3
org.yaml snakeyaml 2.0
oro oro 2.0.8
pl.edu.icm JLargeArrays 1.5
software.amazon.cryptools AmazonCorrettoCryptoProvider 1.6.1-linux-x86_64
software.amazon.ion ion-java 1.0.2
stax stax-api 1.0.1