MAX_FILE_PARTITION_BYTES
Aplica-se a: Databricks SQL
O MAX_FILE_PARTITION_BYTES
parâmetro configuration controla o tamanho máximo das partições ao ler a partir de uma fonte de dados de arquivo.
Isso afeta o grau de paralelismo para o processamento da fonte de dados.
Definições
A configuração pode ser qualquer número integral positivo e, opcionalmente, incluir uma medida como b
(bytes) k
ou kb
(1024 bytes).
Você pode definir esse parâmetro no nível da sessão usando a instrução SET.
Predefinição do sistema
O padrão do sistema é 128m
(128 mebibytes).
Exemplos
> SET max_file_partition_bytes = 64mb;