Databricks Runtime 13.2 (EoS)

Poznámka:

Podpora této verze Databricks Runtime skončila. Datum ukončení podpory najdete v tématu Historie ukončení podpory. Všechny podporované verze databricks Runtime najdete v poznámkách k verzi Databricks Runtime a kompatibilitu.

Následující poznámky k verzi obsahují informace o modulu Databricks Runtime 13.2, který využívá Apache Spark 3.4.0.

Databricks vydala tuto verzi v červenci 2023.

Nové funkce a vylepšení

• Vytváření kontrolních bodů protokolu změn pro úložiště stavů RocksDB
• Vylepšená spolehlivost pro vakuum s mělkým klonem v katalogu Unity.
• Podpora uživatelem definovaných funkcí Pythonu v SQL
• Delta Lake UniForm for Iceberg je ve verzi Public Preview
• Clustering Liquid Delta Lake je ve verzi Public Preview.
• Podpora archivace v Azure Databricks
• Podpora klauzule IDENTIFIER
• Podpora katalogu Unity pro uživatelem definované funkce Pythonu a Pandas
• Sdílení schémat pomocí rozdílového sdílení
• Opravy chyb

Vytváření kontrolních bodů protokolu změn pro úložiště stavů RocksDB

U stavových úloh strukturovaného streamování můžete povolit vytváření kontrolních bodů tak, aby se snížila doba trvání kontrolního bodu a celková latence. Databricks doporučuje zapnout kontrolní body protokolu změn pro všechny stavové dotazy strukturovaného streamování. Viz Povolení vytváření kontrolních bodů protokolu změn.

Vylepšená spolehlivost pro vakuum s mělkým klonem v katalogu Unity.

Při použití spravovaných tabulek Katalogu Unity pro zdroj a cíl operace mělké klonování spravuje Služba Unity Catalog podkladové datové soubory ke zlepšení spolehlivosti pro zdroj a cíl operace klonování. Spuštění VACUUM na zdroji mělké klonování neruší klonovanou tabulku. Viz vakuové a unity katalog mělké klony.

Podpora uživatelem definovaných funkcí Pythonu v SQL

Nyní můžete deklarovat uživatelem definované funkce pomocí Pythonu v rámci příkazů SQL CREATE FUNCTION v katalogu Unity. Viz uživatelem definované funkce (UDF) v katalogu Unity.

Delta Lake UniForm for Iceberg je ve verzi Public Preview

Delta Lake Universal Format (UniForm) umožňuje číst tabulky Delta s klienty Iceberg. Viz Použití uniformu ke čtení tabulek Delta s klienty Iceberg.

Clustering Liquid Delta Lake je ve verzi Public Preview.

Clustering Delta Lake Liquid nahrazuje dělení tabulek a ZORDER zjednodušuje rozhodování o rozložení dat a optimalizuje výkon dotazů. Viz Použití liquid clusteringu pro tabulky Delta.

Podpora archivace v Azure Databricks

Podpora archivace v Azure Databricks představuje kolekci funkcí, které umožňují používat cloudové zásady životního cyklu v cloudovém úložišti objektů obsahujícím tabulky Delta k přesunu souborů do archivních úrovní úložiště. Viz podpora archivace v Azure Databricks.

Podpora klauzule IDENTIFIER

Umožňuje IDENTIFIER(:mytable) bezpečně parametrizovat názvy tabulek, sloupců, funkcí a schémat v mnoha příkazech SQL.

Podpora katalogu Unity pro uživatelem definované funkce Pythonu a Pandas

Ve službě Databricks Runtime 13.2 a novějších se uživatelem definované funkce (UDF) napsané v Pythonu podporují v clusterech, které používají režim sdíleného přístupu v pracovním prostoru s podporou katalogu Unity. To zahrnuje uživatelem definované uživatelem Python a Pandas. Podrobnosti o uživatelem definovaných uživatelem definovaných funkcích Pythonu najdete v tématu Uživatelem definované skalární funkce – Python.

Sdílení schémat pomocí rozdílového sdílení

Databricks Runtime 13.2 přidává možnost sdílení ALTER SHARE <share-name> ADD SCHEMA <schema-name> celého schématu pomocí funkce Delta Sharing a poskytuje příjemci přístup ke všem tabulkám a zobrazením ve schématu v okamžiku, kdy ho sdílíte, spolu s tabulkami a zobrazeními přidanými do schématu v budoucnu. Viz Přidání schémat do sdílené složky a ALTER SHARE.

Opravy chyb

• Opravili jsme chybu se čtečkou JSON, která způsobovala analýzu záznamů v PERMISSIVE režimu, pokud failOnUnknownFieldsmode byla povolená. Záznamy jsou nyní vyřazeny v DROPMALFORMEDparser režimu nebo jsou zapsány do badRecordsPath, pokud jsou některé z těchto možností nastaveny. FAILFAST vyvolá chybu, pokud typ sloupce neodpovídá.

Upgrady knihoven

• Upgradované knihovny Pythonu:
  • nodeenv od 1.7.0 do 1.8.0
• Upgradované knihovny jazyka R:
• Upgradované knihovny Java:
  • io.delta.delta-sharing-spark_2.12 od 0.6.7 do 0.7.0

Apache Spark

Databricks Runtime 13.2 zahrnuje Apache Spark 3.4.0. Tato verze zahrnuje všechny opravy a vylepšení Sparku, která jsou součástí Databricks Runtime 13.1 (EoS), a také následující další opravy chyb a vylepšení Sparku:

• [SPARK-42750] [SC-133452][DBRRM-273] Podpora příkazu Insert By Name
• [SPARK-43133] [SC-133728] Podpora scala Client DataStreamWriter Foreach
• [SPARK-43663] [SC-134135][CONNECT][PS] Zapnout SeriesParityTests.test_compare
• [SPARK-43684] [SC-134162][SPARK-43685][SPARK-43686][SPARK-43691][CONNECT][PS] Oprava (NullOps|NumOps).(eq|ne) pro Spark Connect
• [SPARK-44021] [SC-134109][SQL] Přidání spark.sql.files.maxPartitionNum
• [SPARK-43910] [SC-132936][SQL] Odstranění __auto_generated_subquery_name id v chybách
• [SPARK-43976] [SC-133375][JÁDRO] Zpracování případu, kdy modifiedConfigs v protokolech událostí neexistuje
• [SPARK-32559] [SC-133992][SQL] Oprava logiky oříznutí nezpracovala správně řídicí znaky ASCII
• [SPARK-43421] [SC-132930][SS] Implementace kontrolních bodů založených na protokolu změn pro zprostředkovatele úložiště stavů RocksDB
• [SPARK-43594] [SC-133851][SQL] Přidání LocalDateTime do anyToMicros
• [SPARK-43884] [SC-133867] Značky parametrů v DDL
• [SPARK-43398] [SC-133894][JÁDRO] Časový limit exekutoru by měl být maximální počet nečinných náhodného náhodného prohazování a vypršení časového limitu rdd.
• [SPARK-43610] [SC-133892][CONNECT][PS] Povolte InternalFrame.attach_distributed_column v nástroji Spark Connect.
• [SPARK-43971] [SC-133826][CONNECT][PYTHON] Podpora datového rámce createDataFrame Pythonu streamovaným způsobem
• [SPARK-44006] [SC-133652][CONNECT][PYTHON] Podpora artefaktů mezipaměti
• [SPARK-43790] [SC-133468][PYTHON][CONNECT][ML] Přidání copyFromLocalToFs rozhraní API
• [SPARK-43921] [SC-133461][PROTOBUF] Generování souborů popisovače Protobuf v době sestavení
• [SPARK-43906] [SC-133638][SC-133404][PYTHON][CONNECT] Implementace podpory souborů ve SparkSession.addArtifacts
• [SPARK-44010] [SC-133744][PYTHON][SS][PODVERZE] Oprava typu Python StreamingQueryProgress RowsPerSecond
• [SPARK-43768] [SC-132398][PYTHON][CONNECT] Podpora správy závislostí Pythonu v Python Spark Connectu
• [SPARK-43979] [13.X] Zpět [SC-133456][SQL] Shromážděná metrika by měla být považována za stejnou pro samoobslužné připojení.
• [SPARK-42290] [SC-133696][SQL] Oprava chyby OOM nejde hlásit při zapnutí AQE
• [SPARK-43943] [SC-133648][SQL][PYTHON][CONNECT] Přidání matematických funkcí SQL do Scala a Pythonu
• [SPARK-43747] [SC-132047][PYTHON][CONNECT] Implementace podpory pyfile ve SparkSession.addArtifacts
• [SPARK-43700] [SC-133726][SPARK-43701][CONNECT][PS] Povolení TimedeltaOps.(sub|rsub) s využitím Spark Connect
• [SPARK-43712] [SC-133641][SPARK-43713][CONNECT][PS] Povolit paritní test: test_line_plot, test_pie_plot.
• [SPARK-43867] [SC-132895][SQL] Vylepšení navrhovaných kandidátů pro nevyřešený atribut
• [SPARK-43901] [SC-133454][SQL] Avro to Support custom decimal type backed by Long
• [SPARK-43267] [SC-133024][JDBC] Zpracování neznámého uživatelem definovaného sloupce postgres jako řetězce v poli
• [SPARK-43935] [SC-133637][SQL][PYTHON][CONNECT] Přidání funkcí xpath_* do Scala a Pythonu
• [SPARK-43916] [SC-133647][SQL][PYTHON][CONNECT] Přidání percentilu do rozhraní Scala a python API
• [SPARK-43717] [SC-133455][CONNECT] Klient Scala reduce agg nemůže zpracovat oddíly null pro primitivní vstupy scala
• [SPARK-43984] [SC-133469][SQL][PROTOBUF] Změna použití foreach v případech, kdy map negeneruje výsledky
• [SPARK-43612] [SC-132011][CONNECT][PYTHON] Implementace SparkSession.addArtifact(s) v klientovi Pythonu
• [SPARK-44002] [SC-133606][CONNECT] Oprava obslužné rutiny stavu artefaktů
• [SPARK-43933] [SC-133470][SQL][PYTHON][CONNECT] Přidání agregačních funkcí lineární regrese do Scala a Pythonu
• [SPARK-43920] [SC-133614][SQL][CONNECT] Vytvoření modulu SQL/API
• [SPARK-43979] [SC-133456][SQL] Shromážděná metrika by se měla považovat za stejnou pro připojení k vlastnímu připojení.
• [SPARK-43977] [SC-133373][CONNECT] Oprava neočekávaného výsledku kontroly dev/connect-jvm-client-mima-check
• [SPARK-43985] [SC-133412][PROTOBUF] spark protobuf: oprava výčtů jako chyby ints
• [SPARK-43930] [SC-133406][SQL][PYTHON][CONNECT] Přidání funkcí unix_* do Scala a Pythonu
• [SPARK-43807] [SC-132545][SQL] Migrace _LEGACY_ERROR_TEMP_1269 na PARTITION_SCHEMA_IS_EMPTY
• [SPARK-43956] [SC-133123][SQL] Oprava chyby nezobrazuje sql sloupce pro Percentil[Cont|Disk]
• [SPARK-42626] [SC-133248][CONNECT] Přidání destruktivního iterátoru pro SparkResult
• [SPARK-43333] [SC-132898][SQL] Povolit Avru převést sjednocovacího typu na SQL se stabilním názvem pole s typem
• [SPARK-43953] [SC-133134][CONNECT] Odstranit pass
• [SPARK-43970] [SC-133403][PYTHON][CONNECT] Skrytí nepodporovaných metod datového rámce před automatickým dokončováním
• [SPARK-43973] [SC-133272][SS][UŽIVATELSKÉ ROZHRANÍ] Uživatelské rozhraní strukturovaného streamování by mělo správně zobrazovat neúspěšné dotazy.
• [SPARK-42577] [SC-125445][JÁDRO] Přidání maximálního omezení počtu pokusů o fáze, aby se zabránilo potenciálnímu nekonečnému opakování
• [SPARK-43841] [SC-132699][SQL] Zpracování atributů kandidáta bez předpony v StringUtils#orderSuggestedIdentifiersBySimilarity
• [SPARK-41497] [SC-124795][JÁDRO][Zpracovat]Úprava verze podpory konfigurace spark.rdd.cache.visibilityTracking.enabled na verzi 3.5.0
• [SPARK-37942] [SC-130983][JÁDRO][SQL] Migrace tříd chyb
• [SPARK-43898] [SC-132926][JÁDRO] Automatická registrace immutable.ArraySeq$ofRef pro KryoSerializer Scala 2.13
• [SPARK-43775] [SC-132891][SQL] DataSource V2: Povolit reprezentaci aktualizací při odstraňování a vkládání
• [SPARK-43817] [SC-132662][SPARK-43702][PYTHON] Podpora userDefinedType v createDataFrame z datového rámce pandas a toPandas
• [SPARK-43418] [SC-132753][SC-130685][CONNECT] Přidání SparkSession.Builder.getOrCreate
• [SPARK-43549] [SC-132383][SQL] Převeďte _LEGACY_ERROR_TEMP_0036 na INVALID_SQL_SYNTAX. ANALYZE_TABLE_UNEXPECTED_NOSCAN
• [SPARK-41497] [SC-124644][JÁDRO] Oprava snížení počtu akumulátorů v případě úlohy opakování s mezipamětí rdd
• [SPARK-43892] [SC-133006][PYTHON] Přidání podpory automatického dokončování pro df[|] in pyspark.sql.dataframe.DataFrame
• [SPARK-43881] [SC-133140][SQL][PYTHON][CONNECT] Přidání volitelného vzoru pro Catalog.listDatabases
• [SPARK-43205] [SC-132623] Klauzule IDENTIFIER
• [SPARK-43545] [SC-132378][SQL][PYTHON] Podpora vnořeného typu časového razítka
• [SPARK-43949] [SC-133048][PYTHON] Upgrade cloudpickle na verzi 2.2.1
• [SPARK-43760] [SC-132809][SQL] Nulová dostupnost výsledků skalárních poddotazů
• [SPARK-43696] [SC-132737][SPARK-43697][SPARK-43698][SPARK-43699][PS] Oprava TimedeltaOps pro Spark Connect
• [SPARK-43895] [SC-132897][CONNECT][GO] Příprava cesty k balíčku go
• [SPARK-43894] [SC-132892][PYTHON] Oprava chyby v df.cache()
• [SPARK-43509] [SC-131625][CONNECT] Podpora vytváření více relací Spark Connect
• [SPARK-43882] [SC-132888][SQL] Přiřadit název _LEGACY_ERROR_TEMP_2122
• [SPARK-43687] [SC-132747][SPARK-43688][SPARK-43689][SPARK-43690][PS] Oprava NumOps pro Spark Connect
• [SPARK-43604] [SC-132165][SQL] Refaktoring INVALID_SQL_SYNTAX pro zabránění vložení textu chyby do zdrojového kódu
• [SPARK-43859] [SC-132883][SQL] Přepsat naString v LateralColumnAliasReference
• [SPARK-43792] [SC-132939][SQL][PYTHON][CONNECT] Přidání volitelného vzoru pro Catalog.listCatalogs
• [SPARK-43353] Vrátit zpět "[SC-132734][PYTHON] Migrovat zbývající chyby relace do chybové třídy
• [SPARK-43375] [SC-130309][CONNECT] Vylepšení chybových zpráv pro INVALID_CONNECT_URL
• [SPARK-43863] [SC-132721][CONNECT] Odebrání redundantního toSeq z SparkConnectPlanner platformy Scala 2.13
• [SPARK-43676] [SC-132708][SPARK-43677][SPARK-43678][SPARK-43679][PS] Oprava DatetimeOps pro Spark Connect
• [SPARK-43666] [SC-132689][SPARK-43667][SPARK-43668][SPARK-43669][PS] Oprava BinaryOps pro Spark Connect
• [SPARK-43680] [SC-132709][SPARK-43681][SPARK-43682][SPARK-43683][PS] Oprava NullOps pro Spark Connect
• [SPARK-43782] [SC-132885][JÁDRO] Podpora konfigurace na úrovni protokolu pomocí statické konfigurace Sparku
• [SPARK-43132] [SC-131623] [SS] [CONNECT] Python Client DataStreamWriter foreach() API
• [SPARK-43290] [SC-131961][SQL] Přidá podporu AES IV a AAD do ExpressionImplUtils.
• [SPARK-43795] [SC-132532][CONNECT] Odebrání parametrů, které se nepoužívají pro SparkConnectPlanner
• [SPARK-42317] [SC-129194][SQL] Přiřadit název _LEGACY_ERROR_TEMP_2247: CANNOT_MERGE_SCHEMAS
• [SPARK-43597] [SC-131960][SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0017
• [SPARK-43834] [SC-132679][SQL] Použití tříd chyb v chybách kompilace ResolveDefaultColumns
• [SPARK-43749] [SC-132423][SPARK-43750][SQL] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_240[4-5]
• [SPARK-43576] [SC-132533][JÁDRO] Odebrání nepoužívaných deklarací z modulu Core
• [SPARK-43314] [SC-129970][CONNECT][PYTHON] Migrace chyb klienta Spark Connect do třídy chyb
• [SPARK-43799] [SC-132715][PYTHON] Přidání binární možnosti popisovače do rozhraní API Pyspark Protobuf
• [SPARK-43837] [SC-132678][SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_103[1-2]
• [SPARK-43862] [SC-132750][SQL] Přiřazení názvu ke třídě chyb LEGACY_ERROR_TEMP(1254 & 1315)
• [SPARK-43886] [SC-132808][PYTHON] Přijměte obecnou řazenou kolekci členů jako nápovědu pro zadávání uživatelem definované uživatelem Pandas.
• [SPARK-43530] [SC-132653][PROTOBUF] Čtení souboru popisovače pouze jednou
• [SPARK-43820] [SC-132676][SPARK-43822][SPARK-43823][SPARK-43826][SPARK-43827] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_241[1-7]
• [SPARK-43671] [SC-132519][SPARK-43672][SPARK-43673][SPARK-43674][PS] Oprava CategoricalOps pro Spark Connect
• [SPARK-39979] [SC-132685][SQL] Přidání možnosti pro použití vektorů s velkou proměnlivou šířkou pro operace UDF se šipkami
• [SPARK-43692] [SC-132660][SPARK-43693][SPARK-43694][SPARK-43695][PS] Oprava StringOps pro Spark Connect
• [SPARK-43353] [SC-132734][PYTHON] Migrace zbývajících chyb relace do třídy chyb
• [SPARK-43815] [SC-132781][SQL] Přidání to_varchar aliasu pro to_char
• [SPARK-43543] [13.x][SC-131839][PYTHON] Oprava chování vnořeného typu MapType v knihovně Pandas UDF
• [SPARK-43361] [SC-131789][PROTOBUF] Dokumentace k aktualizaci chyb souvisejících se serializací výčtu
• [SPARK-43740] [SC-132035][PYTHON][CONNECT] Skrytí nepodporovaných session metod před automatickým dokončováním
• [SPARK-43022] [SC-131681][CONNECT] Podpora funkcí protobuf pro klienta Scala
• [SPARK-43304] [13.x][SC-129969][CONNECT][PYTHON] Migrace NotImplementedError do PySparkNotImplementedError
• [SPARK-43860] [SC-132713][SQL] Povolení koncové rekurze, kdykoli je to možné
• [SPARK-42421] [SC-132695][JÁDRO] Pomocí nástrojů získáte přepínač pro dynamické přidělování použité v místním kontrolním bodu.
• [SPARK-43590] [SC-132012][CONNECT] Podpora connect-jvm-client-mima-check kontroly mima s modulem protobuf
• [SPARK-43315] [13.x][CONNECT][PYTHON][SS] Migrace zbývajících chyb z datového rámce (Čtenář|Zapisovač) do třídy chyb
• [SPARK-43361] [SC-130980][PROTOBUF] spark-protobuf: allow serde with enum as ints
• [SPARK-43789] [SC-132397][R] Ve výchozím nastavení používá metodu spark.sql.execution.arrow.maxRecordsPerBatch v prvku R createDataFrame se šipkou.
• [SPARK-43596] [SC-126994][SQL] Popisovač predikátu IsNull v přepisuDomainJoins
• [SPARK-42249] [SC-122565][SQL] Upřesnění odkazu html pro dokumentaci v chybových zprávách
• [SPARK-43128] [SC-131628][CONNECT][SS] Zajištění recentProgress a lastProgress vrácení StreamingQueryProgress konzistentní s nativním rozhraním Scala API
• [SPARK-43387] [SC-130448][SQL] Zadejte čitelný kód chyby člověka pro _LEGACY_ERROR_TEMP_1168.
• [SPARK-43334] [SC-132358] [UŽIVATELSKÉ ROZHRANÍ] Oprava chyby při serializaci ExecutorPeakMetricsDistributions do odpovědi rozhraní API
• [SPARK-42958] [SC-131475][CONNECT] Refaktoring connect-jvm-client-mima-check pro podporu kontroly mima s modulem avro
• [SPARK-43591] [SC-131977][SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0013
• [SPARK-38464] [SC-132211][JÁDRO] Použití tříd chyb v org.apache.spark.io
• [SPARK-43759] [SC-132189][SQL][PYTHON] Zveřejnění timestampNTZType v pyspark.sql.types
• [SPARK-43649] [SC-132036][SPARK-43650][SPARK-43651][SQL] Přiřazení názvů ke třídě chyb _LEGACY_ERROR_TEMP_240[1-3]
• [SPARK-43719] [SC-132016][WEBI] Pole Popisovač missing row.excludedInStages
• [SPARK-42956] [SC-127257][CONNECT] Podpora funkcí avro pro klienta Scala
• [SPARK-43487] [SC-131975][SQL] Oprava chybové zprávy Vnořeného CTE
• [SPARK-43265] [SC-129653] Přesun architektury chyb do běžného modulu nástrojů
• [SPARK-40912] [SC-131547][JÁDRO]Režie výjimek v KryoDeserializationStream
• [SPARK-43583] [SC-131976][CORE] získání MergedBlockedMetaReqHandler z delegáta místo instance SaslRpcHandler
• [SPARK-42996] [SC-131997][CONNECT][PS][ML] Vytvořte a přiřaďte správné lístky JIRA pro všechny neúspěšné testy.
• [SPARK-38469] [SC-131425][JÁDRO] Použití třídy chyb v org.apache.spark.network
• [SPARK-43718] [SC-132014][SQL] Správně nastavit hodnotu null pro klíče ve spojeníCH USING
• [SPARK-43502] [SC-131419][PYTHON][CONNECT] DataFrame.drop by měl přijmout prázdný sloupec.
• [SPARK-43743] [SC-132038][SQL] Port HIVE-12188(DoAs nefunguje správně v hs2 zabezpečených protokolem Kerberos)
• [SPARK-43598] [SC-131929][SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_2400
• [SPARK-43138] [SC-131031][JÁDRO] Oprava třídy ClassNotFoundException během migrace
• [SPARK-43360] [SC-131526][SS][CONNECT] Správce StreamQueryManager klienta Scala
• [SPARK-38467] [SC-131025][JÁDRO] Použití tříd chyb v org.apache.spark.memory
• [SPARK-43345] [SC-131790][SPARK-43346][SQL] Přejmenování tříd chyb LEGACY_ERROR_TEMP[0041|1206]
• [SPARK-42815] [SC-126450][SQL] Výraz pro odstranění dílčího výrazu podporuje zkratku
• [SPARK-38462] [SC-130449][JÁDRO] Přidání třídy chyb INTERNAL_ERROR_EXECUTOR
• [SPARK-43589] [SC-131798][SQL] Oprava cannotBroadcastTableOverMaxTableBytesError použití bytesToString
• [SPARK-43539] [SC-131830][SQL] Přiřazení názvu ke třídě chyb _LEGACY_ERROR_TEMP_0003
• [SPARK-43157] [SC-131688][SQL] Klonování plánu v mezipaměti InMemoryRelation, aby se zabránilo klonování plánu odkazování na stejné objekty
• [SPARK-43309] [SC-129746][SPARK-38461][JÁDRO] Rozšíření INTERNAL_ERROR kategoriemi a přidání třídy chyb INTERNAL_ERROR_BROADCAST
• [SPARK-43281] [SC-131370][SQL] Oprava souběžného zapisovače neaktualizuje metriky souborů
• [SPARK-43383] [SC-130660][SQL] Přidání rowCount statistik do LocalRelation
• [SPARK-43574] [SC-131739][PYTHON][SQL] Podpora nastavení spustitelného souboru Pythonu pro rozhraní API funkcí UDF a pandas v pracovních procesů během běhu
• [SPARK-43569] [SC-131694][SQL] Odebrání alternativního řešení pro HADOOP-14067
• [SPARK-43183] [SC-128938][SS][13.x] Zavedení nového zpětného volání onQueryIdle pro StreamingQueryListener
• [SPARK-43528] [SC-131531][SQL][PYTHON] Podpora duplicitních názvů polí v createDataFrame s datovým rámcem pandas
• [SPARK-43548] [SC-131686][SS] Odebrání alternativního řešení pro HADOOP-16255
• [SPARK-43494] [SC-131272][JÁDRO] Přímé volání replicate() HdfsDataOutputStreamBuilder místo reflexe v SparkHadoopUtil#createFile
• [SPARK-43471] [SC-131063][JÁDRO] Zpracování chybějících metrik hadoopProperties a metrik
• [SPARK-42899] [SC-126456][SQL] Oprava DataFrame.to(schématu) pro zpracování případu, kdy je v poli s možnou hodnotou null vnořené pole bez hodnoty null
• [SPARK-43302] [SC-129747][SQL] Nastavení Pythonu UDAF jako AggregateFunction
• [SPARK-43223] [SC-131270][Připojit] Typed agg, reduce functions, RelationalGroupedDataset#as
• [SPARK-43482] [SC-131375][SS] Rozbalte queryTerminatedEvent tak, aby obsahovala třídu chyb, pokud existuje v výjimce.
• [SPARK-43359] [SC-131463][SQL] Odstranění z tabulky Hive by mělo vyvolat UNSUPPORTED_FEATURE. TABLE_OPERATION"
• [SPARK-43284] [SC-130313] Přepnutí zpět na řetězce kódované adresou URL
• [SPARK-43492] [SC-131227][SQL] Přidání aliasů DATE_ADD funkce 3-args a DATE_DIFF
• [SPARK-43473] [SC-131372][PYTHON] Podpora typu struktury v createDataFrame z datového rámce pandas
• [SPARK-43386] [SC-131110][SQL] Vylepšení seznamu navrhovaných sloupců nebo atributů ve UNRESOLVED_COLUMN.WITH_SUGGESTION třídě chyb
• [SPARK-43443] [SC-131332][SQL] Přidání srovnávacího testu pro odvození typu časového razítka při použití neplatné hodnoty
• [SPARK-43518] [SC-131420][SQL] Převést _LEGACY_ERROR_TEMP_2029 na INTERNAL_ERROR
• [SPARK-42604] [SC-130648][CONNECT] Implementace functions.typedlit
• [SPARK-42323] [ES-669513] Vrátit "[SC-123479][SQL] Přiřadit název _LEGACY_ERROR_TEMP_2332"
• [SPARK-43357] [SC-130649][SQL] Filtrovat datum nabídky typu kalendářního data
• [SPARK-43410] [SC-130526][SQL] Vylepšení vektorizované smyčky pro Packed skipValues
• [SPARK-43441] [SC-130995][JÁDRO] makeDotNode by nemělo selhat, pokud chybí DeterministicLevel
• [SPARK-43324] [SC-130455][SQL] Zpracování příkazů UPDATE pro rozdílové zdroje
• [SPARK-43272] [SC-131168][JÁDRO] Přímé volání createFile místo reflexe
• [SPARK-43296] [13.x][SC-130627][CONNECT][PYTHON] Migrace chyb relace Spark Connect do třídy chyb
• [SPARK-43405] [SC-130987][SQL] Odebrat zbytečné getRowFormatSQL, inputRowFormatSQL, outputRowFormatSQL metoda
• [SPARK-43447] [SC-131017][R] Podpora R 4.3.0
• [SPARK-43425] [SC-130981][SQL] Přidat TimestampNTZType do ColumnarBatchRow
• [SPARK-41532] [SC-130523][CONNECT][KLIENT] Přidání kontroly operací, které zahrnují více datových rámců
• [SPARK-43262] [SC-129270][CONNECT][SS][PYTHON] Migrace chyb strukturovaného streamování Spark Connect do třídy chyb
• [SPARK-42992] [13.x][SC-129465][PYTHON] Představení chyby PySparkRuntimeError
• [SPARK-43422] [SC-130982][SQL] Zachování značek pro LogRelation s výstupem metadat
• [SPARK-43390] [SC-130646][SQL] DSv2 umožňuje CTAS/RTAS rezervovat použitelnost schématu
• [SPARK-43430] [SC-130989][CONNECT][PROTO] ExecutePlanRequest podporuje možnosti libovolného požadavku.
• [SPARK-43313] [SC-130254][SQL] Přidání chybějících hodnot DEFAULT sloupců pro akce MERGE INSERT
• [SPARK-42842] [SC-130438][SQL] Sloučení _LEGACY_ERROR_TEMP_2006 třídy chyb do REGEX_GROUP_INDEX
• [SPARK-43377] [SC-130405][SQL] Povolit spark.sql.thriftServer.interruptOnCancel ve výchozím nastavení
• [SPARK-43292] [SC-130525][JÁDRO][CONNECT] Přechod ExecutorClassLoader na core modul a zjednodušení Executor#addReplClassLoaderIfNeeded
• [SPARK-43040] [SC-130310][SQL] Vylepšení podpory typů TimestampNTZ ve zdroji dat JDBC
• [SPARK-43343] [SC-130629][SS] FileStreamSource by měl při vytváření Zdroje dat zakázat další kontrolu globu souborů.
• [SPARK-43312] [SC-130294][PROTOBUF] Možnost převést všechna pole na JSON
• [SPARK-43404] [SC-130586][SS] Přeskočení opakovaného použití souboru sst pro stejnou verzi úložiště stavů RocksDB, aby se zabránilo chybě neshody ID
• [SPARK-43397] [SC-130614][JÁDRO] Doba vyřazení exekutoru protokolu z provozu v executorLost metodě
• [SPARK-42388] [SC-128568][SQL] Vyhněte se čtení parketových zápatí dvakrát ve vektorizované čtečce.
• [SPARK-43306] [13.x][SC-130320][PYTHON] Migrace ValueError z typů Spark SQL do třídy chyb
• [SPARK-43337] [SC-130353][UŽIVATELSKÉ ROZHRANÍ][3.4] Ikony šipek Asc/desc pro sloupec řazení se nezobrazují ve sloupci tabulky.
• [SPARK-43279] [SC-130351][JÁDRO] Vyčištění nepoužívaných členů z SparkHadoopUtil
• [SPARK-43250] [SC-130147][SQL] Nahrazení třídy _LEGACY_ERROR_TEMP_2014 chyby vnitřní chybou
• [SPARK-43363] [SC-130299][SQL][PYTHON] astype Volání typu kategorie pouze v případech, kdy není zadán typ šipky
• [SPARK-43261] [SC-130154][PYTHON] Migrace TypeError z typů Spark SQL do třídy chyb
• [SPARK-41971] [SC-130230][SQL][PYTHON] Přidání konfigurace pro převod pandas, jak zpracovat typy struktur
• [SPARK-43381] [SC-130464][CONNECT] Make 'transformStatCov' lazy
• [SPARK-43362] [SC-130481][SQL] Speciální zpracování typu JSON pro konektor MySQL
• [SPARK-42843] [SC-130196][SQL] Aktualizace _LEGACY_ERROR_TEMP_2007 třídy chyb na REGEX_GROUP_INDEX
• [SPARK-42585] [SC-129968][CONNECT] Streamování místních vztahů
• [SPARK-43181] [SC-130476][SQL] Zobrazení adresy WebURL uživatelského rozhraní v spark-sql prostředí
• [SPARK-43051] [SC-130194][CONNECT] Přidání možnosti pro generování výchozích hodnot
• [SPARK-43204] [SC-129296][SQL] Zarovnání přiřazení MERGE s atributy tabulky
• [SPARK-43348] [SC-130082][PYTHON] Podpora Python 3.8 v PyPy3
• [SPARK-42845] [SC-130078][SQL] Aktualizace třídy chyb _LEGACY_ERROR_TEMP_2010 na InternalError
• [SPARK-43211] [SC-128978][HIVE] Odebrání podpory Hadoop2 v IsolatedClientLoaderu

Prostředí systému

• Operační systém: Ubuntu 22.04.2 LTS
• Java: Zulu 8.70.0.23-CA-linux64
• Scala: 2.12.15
• Python: 3.10.12
• R: 4.2.2
• Delta Lake: 2.4.0

Nainstalované knihovny Pythonu

Knihovna	Verze	Knihovna	Verze	Knihovna	Verze
appdirs	1.4.4	argon2-cffi	21.3.0	argon2-cffi-bindings	21.2.0
asttokens	2.2.1	attrs	21.4.0	backcall	0.2.0
krásnásoup4	4.11.1	černý	22.6.0	bělit	4.1.0
blinkr	1.4	boto3	1.24.28	botocore	1.27.28
certifi	2022.9.14	cffi	1.15.1	chardet	4.0.0
charset-normalizer	2.0.4	kliknutí	8.0.4	kryptografie	37.0.1
cyklista	0.11.0	Cython	0.29.32	Databricks-sdk	0.1.6
dbus-python	1.2.18	ladění	1.5.1	dekoratér	5.1.1
defusedxml	0.7.1	distlib	0.3.6	docstring-to-markdown	0.12
vstupní body	0,4	vykonávající	1.2.0	přehled omezujících vlastností	1.0.3
fastjsonschema	2.16.3	filelock	3.12.0	fonttools	4.25.0
googleapis-common-protos	1.56.4	grpcio	1.48.1	grpcio-status	1.48.1
httplib2	0.20.2	idna	3.3	importlib-metadata	4.6.4
ipykernel	6.17.1	ipython	8.10.0	ipython-genutils	0.2.0
ipywidgets	7.7.2	Jedi	0.18.1	Jeepney	0.7.1
Jinja2	2.11.3	jmespath	0.10.0	joblib	1.2.0
jsonschema	4.16.0	jupyter-client	7.3.4	jupyter_core	4.11.2
jupyterlab-pygments	0.1.2	jupyterlab-widgety	1.0.0	keyring	23.5.0
verizonsolver	1.4.2	launchpadlib	1.10.16	lazr.restfulclient	0.14.4
lazr.uri	1.0.6	MarkupSafe	2.0.1	matplotlib	3.5.2
matplotlib-inline	0.1.6	Mccabe	0.7.0	špatně zamyšlení	0.8.4
more-itertools	8.10.0	mypy-extensions	0.4.3	nbclient	0.5.13
nbconvert	6.4.4	nbformat	5.5.0	nest-asyncio	1.5.5
nodeenv	1.8.0	poznámkový blok	6.4.12	numpy	1.21.5
oauthlib	3.2.0	balení	21.3	pandas	1.4.4
pandocfilters	1.5.0	parso	0.8.3	pathspec	0.9.0
bábovka	0.5.2	pexpect	4.8.0	pickleshare	0.7.5
Polštář	9.2.0	jádro	22.2.2	platformdirs	2.5.2
plotly	5.9.0	pluggy	1.0.0	prometheus-client	0.14.1
prompt-toolkit	3.0.36	protobuf	3.19.4	psutil	5.9.0
psycopg2	2.9.3	ptyprocess	0.7.0	čistý-eval	0.2.2
pyarrow	8.0.0	pycparser	2.21	pydantic	1.10.6
pyflakes	3.0.1	Pygments	2.11.2	PyGObject	3.42.1
PyJWT	2.3.0	pyodbc	4.0.32	pyparsing	3.0.9
pyright	1.1.294	pyrsistent	0.18.0	python-dateutil	2.8.2
python-lsp-jsonrpc	1.0.0	python-lsp-server	1.7.1	pytoolconfig	1.2.2
pytz	2022.1	pyzmq	23.2.0	žádosti	2.28.1
lano	1.7.0	s3transfer	0.6.0	scikit-learn	1.1.1
scipy	1.9.1	seaborn	0.11.2	SecretStorage	3.3.1
Send2Trash	1.8.0	setuptools	63.4.1	Šest	1.16.0
polévky	2.3.1	ssh-import-id	5,11	stack-data	0.6.2
statsmodels	0.13.2	houževnatost	8.1.0	terminado	0.13.1
testpath	0.6.0	threadpoolctl	2.2.0	tokenize-rt	4.2.1
tomli	2.0.1	tornádo	6.1	vlastnosti	5.1.1
typing_extensions	4.3.0	ujson	5.4.0	bezobslužné upgrady	0,1
urllib3	1.26.11	virtualenv	20.16.3	wadllib	1.3.6
wcwidth	0.2.5	webencodings	0.5.1	whatthepatch	1.0.2
kolo	0.37.1	widgetsnbextension	3.6.1	yapf	0.31.0
zipp	1.0.0

Nainstalované knihovny jazyka R

Knihovny R se instalují ze snímku Microsoft CRAN na 2023-02-10.

Knihovna	Verze	Knihovna	Verze	Knihovna	Verze
šipka	10.0.1	askpass	1,1	assertthat	0.2.1
backporty	1.4.1	base	4.2.2	base64enc	0.1-3
bitové	4.0.5	bit64	4.0.5	blob	1.2.3
startování	1.3-28	vařit	1.0-8	verva	1.1.3
koště	1.0.3	bslib	0.4.2	cachem	1.0.6
volající	3.7.3	caret	6.0-93	cellranger	1.1.0
chron	2.3-59	class	7.3-21	Rozhraní příkazového řádku	3.6.0
clipr	0.8.0	clock	0.6.1	cluster	2.1.4
codetools	0.2-19	barevný prostor	2.1-0	commonmark	1.8.1
– kompilátor	4.2.2	config	0.3.1	cpp11	0.4.3
pastelka	1.5.2	přihlašovací údaje	1.3.2	kudrna	5.0.0
data.table	1.14.6	Power BI	4.2.2	DBI	1.1.3
dbplyr	2.3.0	Desc	1.4.2	devtools	2.4.5
diffobj	0.3.5	trávit	0.6.31	downlit	0.4.2
dplyr	1.1.0	dtplyr	1.2.2	e1071	1.7-13
tři tečky	0.3.2	evaluate	0,20	fanynky	1.0.4
farver	2.1.1	fastmap	1.1.0	fontawesome	0.5.0
forcats	1.0.0	foreach	1.5.2	zahraniční	0.8-82
kovat	0.2.0	Fs	1.6.1	budoucnost	1.31.0
future.apply	1.10.0	kloktadlo	1.3.0	Generik	0.1.3
Gert	1.9.2	ggplot2	3.4.0	Gh	1.3.1
gitcreds	0.1.2	glmnet	4.1-6	globálních objektů	0.16.2
lepidlo	1.6.2	googledrive	2.0.0	googlesheets4	1.0.1
Gower	1.0.1	Grafika	4.2.2	grDevices	4.2.2
mřížka	4.2.2	gridExtra	2.3	gsubfn	0,7
gtable	0.3.1	bezpečnostní přilba	1.2.0	útočiště	2.5.1
highr	0.10	Hms	1.1.2	htmltools	0.5.4
htmlwidgets	1.6.1	httpuv	1.6.8	httr	1.4.4
Id	1.0.1	ini	0.3.1	ipred	0.9-13
isoband	0.2.7	Iterátory	1.0.14	jquerylib	0.1.4
jsonlite	1.8.4	KernSmooth	2.23-20	pletení	1.42
značení	0.4.2	později	1.3.0	mříž	0.20-45
láva	1.7.1	lifecycle	1.0.3	listenv	0.9.0
lubridate	1.9.1	magrittr	2.0.3	sleva	1.5
MŠE	7.3-58.2	Matice	1.5-1	memoise	2.0.1
metody	4.2.2	mgcv	1.8-41	mim	0.12
miniUI	0.1.1.1	ModelMetrics	1.2.2.2	modelr	0.1.10
munsell	0.5.0	nlme	3.1-162	nnet	7.3-18
numDeriv	2016.8-1.1	openssl	2.0.5	parallel	4.2.2
paralelně	1.34.0	pilíř	1.8.1	pkgbuild	1.4.0
pkgconfig	2.0.3	pkgdown	2.0.7	pkgload	1.3.2
plogr	0.2.0	plyr	1.8.8	chválit	1.0.0
prettyunits	1.1.1	pROC	1.18.0	processx	3.8.0
prodlim	2019.11.13	profvis	0.3.7	Průběh	1.2.2
progressr	0.13.0	sliby	1.2.0.1	proto	1.0.0
plná moc	0.4-27	PS	1.7.2	purrr	1.0.1
r2d3	0.2.6	R6	2.5.1	ragg	1.2.5
randomForest	4.7-1.1	rappdirs	0.3.3	Analýza rcmdcheck	1.4.0
RColorBrewer	1.1-3	Rcpp	1.0.10	RcppEigen	0.3.3.9.3
readr	2.1.3	readxl	1.4.2	recepty	1.0.4
odvetný zápas	1.0.1	rematch2	2.1.2	vzdálená zařízení	2.4.2
reprex	2.0.2	reshape2	1.4.4	rlang	1.0.6
rmarkdown	2,20	RODBC	1.3-20	roxygen2	7.2.3
rpart	4.1.19	rprojroot	2.0.3	Rserve	1.8-12
RSQLite	2.2.20	rstudioapi	0,14	rversions	2.1.2
rvest	1.0.3	drzá napodobenina	0.4.5	váhy	1.2.1
selektor	0.4-2	sessioninfo	1.2.2	tvar	1.4.6
lesklý	1.7.4	sourcetools	0.1.7-1	sparklyr	1.7.9
SparkR	3.4.0	prostorový	7.3-15	spline křivky	4.2.2
sqldf	0.4-11	ČTVEREC	2021.1	statistické údaje	4.2.2
Statistiky 4	4.2.2	stringi	1.7.12	stringr	1.5.0
přežití	3.5-3	sys	3.4.1	systemfonts	1.0.4
tcltk	4.2.2	testthat	3.1.6	textshaping	0.3.6
tibble	3.1.8	tidyr	1.3.0	tidyselect	1.2.0
tidyverse	1.3.2	časový interval	0.2.0	timeDate	4022.108
tinytex	0.44	tools	4.2.2	tzdb	0.3.0
urlchecker	1.0.1	usethis	2.1.6	utf8	1.2.3
utils	4.2.2	Uuid	1.1-0	vctrs	0.5.2
viridisLite	0.4.1	vroom	1.6.1	Waldo	0.4.0
vous	0.4.1	withr	2.5.0	xfun	0.37
xml2	1.3.3	xopen	1.0.0	xtable	1.8-4
yaml	2.3.7	zip	2.2.2

Nainstalované knihovny Java a Scala (verze clusteru Scala 2.12)

ID skupiny	ID artefaktu	Verze
antlr	antlr	2.7.7
com.amazonaws	amazon-kinesis-client	1.12.0
com.amazonaws	automatické škálování aws-java-sdk	1.12.390
com.amazonaws	aws-java-sdk-cloudformation	1.12.390
com.amazonaws	aws-java-sdk-cloudfront	1.12.390
com.amazonaws	aws-java-sdk-cloudhsm	1.12.390
com.amazonaws	aws-java-sdk-cloudsearch	1.12.390
com.amazonaws	aws-java-sdk-cloudtrail	1.12.390
com.amazonaws	aws-java-sdk-cloudwatch	1.12.390
com.amazonaws	aws-java-sdk-cloudwatchmetrics	1.12.390
com.amazonaws	aws-java-sdk-codedeploy	1.12.390
com.amazonaws	aws-java-sdk-cognitoidentity	1.12.390
com.amazonaws	aws-java-sdk-cognitosync	1.12.390
com.amazonaws	aws-java-sdk-config	1.12.390
com.amazonaws	aws-java-sdk-core	1.12.390
com.amazonaws	aws-java-sdk-datapipeline	1.12.390
com.amazonaws	aws-java-sdk-directconnect	1.12.390
com.amazonaws	aws-java-sdk-directory	1.12.390
com.amazonaws	aws-java-sdk-dynamodb	1.12.390
com.amazonaws	aws-java-sdk-ec2	1.12.390
com.amazonaws	aws-java-sdk-ecs	1.12.390
com.amazonaws	aws-java-sdk-efs	1.12.390
com.amazonaws	aws-java-sdk-elasticache	1.12.390
com.amazonaws	aws-java-sdk-elasticbeanstalk	1.12.390
com.amazonaws	aws-java-sdk-elasticloadbalancing	1.12.390
com.amazonaws	aws-java-sdk-elastictranscoder	1.12.390
com.amazonaws	aws-java-sdk-emr	1.12.390
com.amazonaws	aws-java-sdk-glacier	1.12.390
com.amazonaws	aws-java-sdk-glue	1.12.390
com.amazonaws	aws-java-sdk-iam	1.12.390
com.amazonaws	aws-java-sdk-importexport	1.12.390
com.amazonaws	aws-java-sdk-kinesis	1.12.390
com.amazonaws	aws-java-sdk-kms	1.12.390
com.amazonaws	aws-java-sdk-lambda	1.12.390
com.amazonaws	aws-java-sdk-logs	1.12.390
com.amazonaws	aws-java-sdk-machinelearning	1.12.390
com.amazonaws	aws-java-sdk-opsworks	1.12.390
com.amazonaws	aws-java-sdk-rds	1.12.390
com.amazonaws	aws-java-sdk-redshift	1.12.390
com.amazonaws	aws-java-sdk-route53	1.12.390
com.amazonaws	aws-java-sdk-s3	1.12.390
com.amazonaws	aws-java-sdk-ses	1.12.390
com.amazonaws	aws-java-sdk-simpledb	1.12.390
com.amazonaws	aws-java-sdk-simpleworkflow	1.12.390
com.amazonaws	aws-java-sdk-sns	1.12.390
com.amazonaws	aws-java-sdk-sqs	1.12.390
com.amazonaws	aws-java-sdk-ssm	1.12.390
com.amazonaws	aws-java-sdk-storagegateway	1.12.390
com.amazonaws	aws-java-sdk-sts	1.12.390
com.amazonaws	podpora aws-java-sdk-support	1.12.390
com.amazonaws	aws-java-sdk-swf-libraries	1.11.22
com.amazonaws	aws-java-sdk-workspaces	1.12.390
com.amazonaws	jmespath-java	1.12.390
com.clearspring.analytics	datový proud	2.9.6
com.databricks	Rserve	1.8-3
com.databricks	jets3t	0.7.1-0
com.databricks.scalapb	compilerplugin_2.12	0.4.15-10
com.databricks.scalapb	scalapb-runtime_2.12	0.4.15-10
com.esotericsoftware	Kryo-shaded	4.0.2
com.esotericsoftware	minlog	1.3.0
com.fasterxml	spolužák	1.3.4
com.fasterxml.jackson.core	jackson-annotations	2.14.2
com.fasterxml.jackson.core	jackson-core	2.14.2
com.fasterxml.jackson.core	jackson-databind	2.14.2
com.fasterxml.jackson.dataformat	jackson-dataformat-cbor	2.14.2
com.fasterxml.jackson.datatype	jackson-datatype-joda	2.14.2
com.fasterxml.jackson.datatype	jackson-datatype-jsr310	2.13.4
com.fasterxml.jackson.module	jackson-module-paranamer	2.14.2
com.fasterxml.jackson.module	jackson-module-scala_2.12	2.14.2
com.github.ben-manes.kofein	kofein	2.9.3
com.github.fommil	jniloader	1,1
com.github.fommil.netlib	native_ref-java	1,1
com.github.fommil.netlib	native_ref-java	Nativní verze 1.1
com.github.fommil.netlib	native_system-java	1,1
com.github.fommil.netlib	native_system-java	Nativní verze 1.1
com.github.fommil.netlib	netlib-native_ref-linux-x86_64	Nativní verze 1.1
com.github.fommil.netlib	netlib-native_system-linux-x86_64	Nativní verze 1.1
com.github.luben	zstd-jni	1.5.2-5
com.github.wendykierp	JTransforms	3.1
com.google.code.findbugs	jsr305	3.0.0
com.google.code.gson	gson	2.8.9
com.google.crypto.tink	Tink	1.7.0
com.google.errorprone	error_prone_annotations	2.10.0
com.google.flatbuffers	flatbuffers-java	1.12.0
com.google.guava	guava	15.0
com.google.protobuf	protobuf-java	2.6.1
com.h2database	h2	2.1.214
com.helger	profiler	1.1.1
com.jcraft	jsch	0.1.55
com.jolbox	bonecp	0.8.0.RELEASE
com.lihaoyi	sourcecode_2.12	0.1.9
com.microsoft.azure	azure-data-lake-store-sdk	2.3.9
com.microsoft.sqlserver	mssql-jdbc	11.2.2.jre8
com.ning	compress-lzf	1.1.2
com.sun.mail	javax.mail	1.5.2
com.sun.xml.bind	jaxb-core	2.2.11
com.sun.xml.bind	jaxb-impl	2.2.11
com.tdunning	json	1.8
com.thoughtworks.paranamer	paranamer	2.8
com.trueaccord.lenses	lenses_2.12	0.4.12
com.twitter	chill-java	0.10.0
com.twitter	chill_2.12	0.10.0
com.twitter	util-app_2.12	7.1.0
com.twitter	util-core_2.12	7.1.0
com.twitter	util-function_2.12	7.1.0
com.twitter	util-jvm_2.12	7.1.0
com.twitter	util-lint_2.12	7.1.0
com.twitter	util-registry_2.12	7.1.0
com.twitter	util-stats_2.12	7.1.0
com.typesafe	config	1.2.1
com.typesafe.scala-logging	scala-logging_2.12	3.7.2
com.uber	h3	3.7.0
com.univocity	univocity-parsers	2.9.1
com.zaxxer	HikariCP	4.0.3
commons-cli	commons-cli	1.5.0
commons-codec	commons-codec	1.15
commons-collections	commons-collections	3.2.2
commons-dbcp	commons-dbcp	1.4
commons-fileupload	commons-fileupload	1.5
commons-httpclient	commons-httpclient	3.1
commons-io	commons-io	2.11.0
commons-lang	commons-lang	2.6
commons-logging	commons-logging	1.1.3
commons-pool	commons-pool	1.5.4
dev.ludovic.netlib	arpack	3.0.3
dev.ludovic.netlib	Blas	3.0.3
dev.ludovic.netlib	lapack	3.0.3
info.ganglia.gmetric4j	gmetric4j	1.0.10
io.airlift	aircompressor	0.21
io.delta	delta-sharing-spark_2.12	0.7.0
io.dropwizard.metrics	metriky – jádro	4.2.10
io.dropwizard.metrics	metrics-graphite	4.2.10
io.dropwizard.metrics	metriky – kontroly stavu	4.2.10
io.dropwizard.metrics	metrics-jetty9	4.2.10
io.dropwizard.metrics	metrics-jmx	4.2.10
io.dropwizard.metrics	metrics-json	4.2.10
io.dropwizard.metrics	metrics-jvm	4.2.10
io.dropwizard.metrics	metriky – servlety	4.2.10
io.netty	netty-all	4.1.87.Final
io.netty	netty-buffer	4.1.87.Final
io.netty	netty-codec	4.1.87.Final
io.netty	netty-codec-http	4.1.87.Final
io.netty	netty-codec-http2	4.1.87.Final
io.netty	netty-codec-socks	4.1.87.Final
io.netty	netty- common	4.1.87.Final
io.netty	obslužná rutina netty	4.1.87.Final
io.netty	netty-handler-proxy	4.1.87.Final
io.netty	netty-resolver	4.1.87.Final
io.netty	netty transport	4.1.87.Final
io.netty	netty-transport-classes-epoll	4.1.87.Final
io.netty	netty-transport-classes-kqueue	4.1.87.Final
io.netty	netty-transport-native-epoll	4.1.87.Final
io.netty	netty-transport-native-epoll	4.1.87.Final-linux-aarch_64
io.netty	netty-transport-native-epoll	4.1.87.Final-linux-x86_64
io.netty	netty-transport-native-kqueue	4.1.87.Final-osx-aarch_64
io.netty	netty-transport-native-kqueue	4.1.87.Final-osx-x86_64
io.netty	netty-transport-native-unix-common	4.1.87.Final
io.prometheus	simpleclient	0.7.0
io.prometheus	simpleclient_common	0.7.0
io.prometheus	simpleclient_dropwizard	0.7.0
io.prometheus	simpleclient_pushgateway	0.7.0
io.prometheus	simpleclient_servlet	0.7.0
io.prometheus.jmx	sběratel	0.12.0
jakarta.annotation	jakarta.annotation-api	1.3.5
jakarta.servlet	jakarta.servlet-api	4.0.3
jakarta.validation	jakarta.validation-api	2.0.2
jakarta.ws.rs	jakarta.ws.rs-api	2.1.6
javax.activation	aktivace	1.1.1
javax.el	javax.el-api	2.2.4
javax.jdo	jdo-api	3.0.1
javax.transaction	jta	1,1
javax.transaction	transaction-api	1,1
javax.xml.bind	jaxb-api	2.2.11
javolution	javolution	5.5.1
jline	jline	2.14.6
joda-time	joda-time	2.12.1
ml.combust.mleap	mleap-databricks-runtime_2.12	v0.20.0-db2
net.java.dev.jna	jna	5.8.0
net.razorvine	marináda	1.3
net.sf.jpam	jpam	1,1
net.sf.opencsv	opencsv	2.3
net.sf.supercsv	super-csv	2.2.0
net.snowflake	snowflake-ingest-sdk	0.9.6
net.snowflake	snowflake-jdbc	3.13.29
net.sourceforge.f2j	arpack_combined_all	0,1
org.acplt.remotetea	remotetea-oncrpc	1.1.2
org.antlr	ST4	4.0.4
org.antlr	antlr-runtime	3.5.2
org.antlr	antlr4-runtime	4.9.3
org.antlr	stringtemplate	3.2.1
org.apache.ant	ant	1.9.16
org.apache.ant	ant-jsch	1.9.16
org.apache.ant	ant-launcher	1.9.16
org.apache.arrow	arrow-format	11.0.0
org.apache.arrow	arrow-memory-core	11.0.0
org.apache.arrow	arrow-memory-netty	11.0.0
org.apache.arrow	arrow-vector	11.0.0
org.apache.avro	avro	1.11.1
org.apache.avro	avro-ipc	1.11.1
org.apache.avro	avro-mapred	1.11.1
org.apache.commons	commons-collections4	4.4
org.apache.commons	commons-compress	1.21
org.apache.commons	commons-crypto	1.1.0
org.apache.commons	commons-lang3	3.12.0
org.apache.commons	commons-math3	3.6.1
org.apache.commons	commons-text	1.10.0
org.apache.kurátor	kurátor-client	2.13.0
org.apache.kurátor	kurátor-framework	2.13.0
org.apache.kurátor	kurátor-recepty	2.13.0
org.apache.datasketches	datasketches-java	3.1.0
org.apache.datasketches	datasketches-memory	2.0.0
org.apache.derby	derby	10.14.2.0
org.apache.hadoop	hadoop-client-runtime	3.3.4
org.apache.hive	hive-beeline	2.3.9
org.apache.hive	hive-cli	2.3.9
org.apache.hive	hive-jdbc	2.3.9
org.apache.hive	hive-llap-client	2.3.9
org.apache.hive	hive-llap-common	2.3.9
org.apache.hive	hive-serde	2.3.9
org.apache.hive	hive-shims	2.3.9
org.apache.hive	hive-storage-api	2.8.1
org.apache.hive.shims	hive-shims-0.23	2.3.9
org.apache.hive.shims	hive-shims-common	2.3.9
org.apache.hive.shims	hive-shims-scheduler	2.3.9
org.apache.httpcomponents	httpclient	4.5.14
org.apache.httpcomponents	httpcore	4.4.16
org.apache.ivy	břečťan	2.5.1
org.apache.logging.log4j	log4j-1.2-api	2.19.0
org.apache.logging.log4j	log4j-api	2.19.0
org.apache.logging.log4j	log4j-core	2.19.0
org.apache.logging.log4j	log4j-slf4j2-impl	2.19.0
org.apache.mesos	mesos	1.11.0-shaded-protobuf
org.apache.orc	orc-core	1.8.3-shaded-protobuf
org.apache.orc	orc-mapreduce	1.8.3-shaded-protobuf
org.apache.orc	orc-shims	1.8.3
org.apache.thrift	libfb303	0.9.3
org.apache.thrift	libthrift	0.12.0
org.apache.xbean	xbean-asm9-shaded	4.22
org.apache.yetus	cílové skupiny a poznámky	0.13.0
org.apache.zookeeper	zookeeper	3.6.3
org.apache.zookeeper	zookeeper-jute	3.6.3
org.checkerframework	checker-qual	3.19.0
org.codehaus.jackson	jackson-core-asl	1.9.13
org.codehaus.jackson	jackson-mapper-asl	1.9.13
org.codehaus.janino	commons-compiler	3.0.16
org.codehaus.janino	Janino	3.0.16
org.datanucleus	datanucleus-api-jdo	4.2.4
org.datanucleus	datanucleus-core	4.1.17
org.datanucleus	datanucleus-rdbms	4.1.19
org.datanucleus	javax.jdo	3.2.0-m3
org.eclipse.jetty	jetty-client	9.4.50.v20221201
org.eclipse.jetty	pokračování jetty	9.4.50.v20221201
org.eclipse.jetty	jetty-http	9.4.50.v20221201
org.eclipse.jetty	jetty-io	9.4.50.v20221201
org.eclipse.jetty	jetty-jndi	9.4.50.v20221201
org.eclipse.jetty	jetty-plus	9.4.50.v20221201
org.eclipse.jetty	jetty-proxy	9.4.50.v20221201
org.eclipse.jetty	jetty-security	9.4.50.v20221201
org.eclipse.jetty	jetty-server	9.4.50.v20221201
org.eclipse.jetty	jetty-servlet	9.4.50.v20221201
org.eclipse.jetty	jetty-servlets	9.4.50.v20221201
org.eclipse.jetty	jetty-util	9.4.50.v20221201
org.eclipse.jetty	jetty-util-ajax	9.4.50.v20221201
org.eclipse.jetty	jetty-webapp	9.4.50.v20221201
org.eclipse.jetty	jetty-xml	9.4.50.v20221201
org.eclipse.jetty.websocket	websocket-api	9.4.50.v20221201
org.eclipse.jetty.websocket	websocket-client	9.4.50.v20221201
org.eclipse.jetty.websocket	websocket – společné	9.4.50.v20221201
org.eclipse.jetty.websocket	websocket-server	9.4.50.v20221201
org.eclipse.jetty.websocket	websocket-servlet	9.4.50.v20221201
org.fusesource.leveldbjni	leveldbjni-all	1.8
org.glassfish.hk2	hk2-api	2.6.1
org.glassfish.hk2	hk2-locator	2.6.1
org.glassfish.hk2	hk2-utils	2.6.1
org.glassfish.hk2	osgi-resource-locator	1.0.3
org.glassfish.hk2.external	aopalliance-repackaged	2.6.1
org.glassfish.hk2.external	jakarta.inject	2.6.1
org.glassfish.jersey.containers	jersey-container-servlet	2.36
org.glassfish.jersey.containers	jersey-container-servlet-core	2.36
org.glassfish.jersey.core	jersey-client	2.36
org.glassfish.jersey.core	žerzejové společné	2.36
org.glassfish.jersey.core	jersey-server	2.36
org.glassfish.jersey.inject	jersey-hk2	2.36
org.hibernate.validator	Hibernate-validator	6.1.7.Final
org.javassist	Javassist	3.25.0-GA
org.jboss.logging	jboss-logging	3.3.2.Final
org.jdbi	jdbi	2.63.1
org.jetbrains	anotace	17.0.0
org.joda	joda-convert	1,7
org.jodd	jodd-core	3.5.2
org.json4s	json4s-ast_2.12	3.7.0-M11
org.json4s	json4s-core_2.12	3.7.0-M11
org.json4s	json4s-jackson_2.12	3.7.0-M11
org.json4s	json4s-scalap_2.12	3.7.0-M11
org.lz4	lz4-java	1.8.0
org.mariadb.jdbc	mariadb-java-client	2.7.4
org.mlflow	mlflow-spark	2.2.0
org.objenesis	objenesis	2.5.1
org.postgresql	postgresql	42.3.8
org.roaringbitmap	RoaringBitmap	0.9.39
org.roaringbitmap	Podložky	0.9.39
org.rocksdb	rocksdbjni	7.8.3
org.rosuda.REngine	REngine	2.1.0
org.scala-lang	scala-compiler_2.12	2.12.15
org.scala-lang	scala-library_2.12	2.12.15
org.scala-lang	scala-reflect_2.12	2.12.15
org.scala-lang.modules	scala-collection-compat_2.12	2.4.3
org.scala-lang.modules	scala-parser-combinators_2.12	1.1.2
org.scala-lang.modules	scala-xml_2.12	1.2.0
org.scala-sbt	test-interface	1.0
org.scalacheck	scalacheck_2.12	1.14.2
org.scalactic	scalactic_2.12	3.2.15
org.scalanlp	breeze-macros_2.12	2.1.0
org.scalanlp	breeze_2.12	2.1.0
org.scalatest	kompatibilní s scalatestem	3.2.15
org.scalatest	scalatest-core_2.12	3.2.15
org.scalatest	scalatest-diagrams_2.12	3.2.15
org.scalatest	scalatest-featurespec_2.12	3.2.15
org.scalatest	scalatest-flatspec_2.12	3.2.15
org.scalatest	scalatest-freespec_2.12	3.2.15
org.scalatest	scalatest-funspec_2.12	3.2.15
org.scalatest	scalatest-funsuite_2.12	3.2.15
org.scalatest	scalatest-matchers-core_2.12	3.2.15
org.scalatest	scalatest-mustmatchers_2.12	3.2.15
org.scalatest	scalatest-propspec_2.12	3.2.15
org.scalatest	scalatest-refspec_2.12	3.2.15
org.scalatest	scalatest-shouldmatchers_2.12	3.2.15
org.scalatest	scalatest-wordspec_2.12	3.2.15
org.scalatest	scalatest_2.12	3.2.15
org.slf4j	jcl-over-slf4j	2.0.6
org.slf4j	jul-to-slf4j	2.0.6
org.slf4j	slf4j-api	2.0.6
org.threeten	threeten-extra	1.7.1
org.tukaani	xz	1,9
org.typelevel	algebra_2.12	2.0.1
org.typelevel	kočky-kernel_2.12	2.1.1
org.typelevel	spire-macros_2.12	0.17.0
org.typelevel	spire-platform_2.12	0.17.0
org.typelevel	spire-util_2.12	0.17.0
org.typelevel	spire_2.12	0.17.0
org.wildfly.openssl	wildfly-openssl	1.1.3.Final
org.xerial	sqlite-jdbc	3.42.0.0
org.xerial.snappy	snappy-java	1.1.8.4
org.yaml	snakeyaml	1.33
oro	oro	2.0.8
pl.edu.icm	JLargeArrays	1.5
software.amazon.cryptools	AmazonCorrettoCryptoProvider	1.6.1-linux-x86_64
software.amazon.ion	ion-java	1.0.2
stax	stax-api	1.0.1