Sdílet prostřednictvím

Omezení služby Databricks Connect pro Scala

  • Článek

Poznámka

Tento článek popisuje Databricks Connect pro Databricks Runtime 13.3 LTS a vyšší.

Tento článek uvádí omezení služby Databricks Connect pro Scala. Databricks Connect umožňuje připojit k clusterům Azure Databricks běžné prostředí IDE, servery poznámkových bloků a vlastní aplikace. Viz Co je Databricks Connect?. Informace o verzi Pythonu tohoto článku najdete v tématu Omezení služby Databricks Connect pro Python.

Důležitý

V závislosti na verzi Scala, Javy, Databricks Runtime a Databricks Connect, kterou používáte, můžou některé funkce obsahovat požadavky na verzi. Viz požadavky .

Dostupnost funkcí

Není k dispozici v Databricks Connect pro Databricks Runtime 13.3 LTS a níže:

  • Streamování foreachBatch
  • Vytváření datových rámců větších než 128 MB
  • Dlouhé dotazy delší než 3600 sekund
  • Skalární UDF v clusterech, které používají režim přístupu s jedním uživatelem

Není k dispozici:

  • Nástroje Databricks: credentials, library, notebook workflow, widgets
  • Kontext Sparku
  • RDDs
  • CREATE TABLE <table-name> AS SELECT (místo toho použijte spark.sql("SELECT ...").write.saveAsTable("table"))
  • Změna úrovně protokolu log4j prostřednictvím SparkContext
  • Distribuované trénování strojového učení
  • Synchronizace místního vývojového prostředí se vzdáleným clusterem