INSERT
Область применения: Databricks SQL
Databricks Runtime
Вставляет новые строки в таблицу и при необходимости усекает таблицу или ее разделы. Вставляемые строки указываются по выражениям значений или результату запроса.
Databricks не поддерживает INSERT
для таблиц Hive Avro, если тип timestamp-millis
присутствует в схеме.
Синтаксис
INSERT { OVERWRITE | INTO } [ TABLE ] table_name
[ PARTITION clause ]
[ ( column_name [, ...] ) | BY NAME ]
query
INSERT INTO [ TABLE ] table_name
REPLACE WHERE predicate
query
Примечание.
При выполнении INSERT INTO
таблицы Delta поддерживается проверка схемы и её эволюция.
Если тип данных столбца нельзя безопасно привести к типу данных Delta таблицы, возникает исключение во время выполнения.
Если включена эволюция схемы, новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.
Параметры
INTO
илиOVERWRITE
При указании
OVERWRITE
применяется следующее:- Без
partition_spec
таблица усечена перед вставкой первой строки. - В противном случае перед вставкой первой строки усекаются все секции, соответствующие
partition_spec
.
Если указать
INTO
, все вставляемые строки добавляются к существующим строкам.- Без
-
Определяет таблицу для вставки. Имя не должно содержать временную спецификацию. Если таблица не найдена, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.
table_name
не должно быть внешней таблицей.применимо:
, начиная с версии Databricks Runtime 16.0
-
Необязательный параметр, указывающий целевую секцию для вставки. Можно также частично указать секцию.
При указании статического раздела (
column = value
), этот столбец не должен повторяться в списке столбцов для вставки.При указании динамического раздела для
, должна быть таблицей Delta Lake для . ( column_name [, …] )
Необязательный список столбцов в таблице. Команда insert может указывать любой конкретный столбец из таблицы не более одного раза.
Область применения:
Databricks SQL
Databricks Runtime 12.2 LTS и выше
- Если эта команда исключает столбец, Databricks SQL назначает соответствующее значение по умолчанию.
- Если целевая схема таблицы не определяет значение по умолчанию для вставленного столбца, Databricks SQL назначает
NULL
, если столбец имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.
Предоставление списка столбцов не эквивалентно указанию всех столбцов, за исключением назначенных значений в предложении
PARTITION
в порядке, определенном в таблице.BY NAME
Область применения:
Databricks SQL
Databricks Runtime 13.3 LTS и выше
Если это предложение используется вместо явного списка столбцов, команда использует открытые имена столбцов
query
для создания списка столбцов в порядкеquery
. Как и в явном списке столбцов, каждый столбец должен существовать в целевой таблице и не должен дублироваться. Если столбец, присутствующий вtable_name
, не является частью списка подразумеваемых столбцов, вместо этого используется значениеDEFAULT
.BY NAME
также соответствует атрибутам структур по имени.Столбец в
query
не может соответствовать столбцу, указанному в предложенииPARTITION
или любом созданном столбце.ЗАМЕНИТЬ WHEREboolean_expression
Область применения:
Databricks SQL
Databricks Runtime 12.2 LTS и выше
Если
table_name
является таблицей Delta Lake, удалите строки, соответствующиеboolean_expression
перед вставкой строк, соответствующихboolean-expression
, указанных вquery
. Строки, вquery
которых не совпадаютboolean_expression
, игнорируются.boolean_expression
может быть любым выражением, которое оценивается в типеBOOLEAN
результата.См . произвольный выборочный перезапись с помощью replaceWhere.
-
Запрос, создающий вставляемые строки.
Количество столбцов, возвращаемых запросом, должно совпадать с указанным или подразумеваемым списком столбцов для вставки.
Если тип данных нельзя безопасно привести к типу данных соответствующего столбца, создается исключение среды выполнения.
Область применения:
Databricks SQL
Databricks Runtime 11.3 LTS и выше
- Если
query
состоит из VALUES предложения, тогдаexpression
может бытьDEFAULT
. - Если
query
состоит из SELECT предложения, тогдаnamed_expression
может бытьDEFAULT
. -
DEFAULT
будет вставлять явно определенное выражениеDEFAULT
соответствующего столбца вtable_name
, илиNULL
, если ничего не определено.
Если включена эволюция схемы, новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.
- Если
Примеры
В этом разделе рассматриваются следующие вопросы.
- INSERT INTO
- Вставка со списком колонок
- Вставка со спецификацией секции и списком столбцов
- INSERT с помощью условия BY NAME
- ЗАМЕНИТЬ WHERE
- INSERT ПЕРЕЗАПИСЬ
INSERT INTO
INSERT с помощью VALUES
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
PARTITIONED BY (student_id);
-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);
-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);
-- Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
('Bob Brown', '456 Taylor St, Cupertino', 444444),
('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);
-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
('Gwyneth Zhao', '120 Main St, Rockport', 666666),
('Jackson Peterson', DEFAULT, 777777);
> SELECT * FROM students;
name address student_id
---------------- ------------------------ ----------
Amy Smith 123 Park Ave, San Jose 111111
Grayson Miller unknown 222222
Youna Kim unknown 333333
Bob Brown 456 Taylor St, Cupertino 444444
Cathy Johnson 789 Race Ave, Palo Alto 555555
Gwyneth Zhao 120 Main St, Rockport 666666
Jackson Peterson unknown 777777
Вставка с использованием подзапросов
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St, Milpitas 345678901
> INSERT INTO students PARTITION (student_id = 444444)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;
Вставка с помощью предложения TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT INTO students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave,San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Вставка в каталог
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT INTO delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Вставка со списком столбцов
> INSERT INTO students (address, name, student_id) VALUES
('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
name address student_id
--------- ---------------------- ----------
Kent Yao Hangzhou, China 11215016
Вставка как со спецификацией партиции, так и со списком столбцов
> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
name address student_id
------------ ---------------------- ----------
Kent Yao Jr. Hangzhou, China 11215017
INSERT с помощью предложения BY NAME
> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
0 data {"a":1,"b":2}
> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
0 [{"a":1,"b":2}]
NULL [{"a":1,"b":2}]
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS
ЗАМЕНА WHERE
> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
(DATE'2022-10-01', 1234),
(DATE'2022-10-02', 2345),
(DATE'2022-10-03', 3456),
(DATE'2022-11-01', 3214);
-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
VALUES (DATE'2022-10-01', 1237),
(DATE'2022-10-02', 2378),
(DATE'2022-10-04', 2456),
(DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY tx_date;
tx_date amount
---------- ------
2022-10-01 1237
2022-10-02 2378
2022-10-04 2456
2022-10-05 6328
2022-11-01 3214
INSERT ПЕРЕЗАПИСЬ
Вставьте с использованием условия VALUES
-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111
Bob Brown 456 Taylor St, Cupertino 222222
Cathy Johnson 789 Race Ave, Palo Alto 333333
Dora Williams 134 Forest Ave, Melo Park 444444
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Helen Davis 469 Mission St, San Diego 999999
Jason Wang 908 Bird St, Saratoga 121212
> INSERT OVERWRITE students VALUES
('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
('Brian Reed', '723 Kern Ave, Palo Alto', 222222);
> SELECT * FROM students;
name address student_id
---------- ----------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Brian Reed 723 Kern Ave, Palo Alto 222222
Вставка с помощью подзапроса
-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
name address ssn
------------- ------------------------- ---------
Dora Williams 134 Forest Ave, Melo Park 123456789
Eddie Davis 245 Market St,Milpitas 345678901
> INSERT OVERWRITE students PARTITION (student_id = 222222)
SELECT name, address FROM persons WHERE name = "Dora Williams";
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Ashua Hill 456 Erica Ct, Cupertino 111111
Dora Williams 134 Forest Ave, Melo Park 222222
Вставьте с клаузой TABLE
-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
> INSERT OVERWRITE students TABLE visiting_students;
> SELECT * FROM students;
name address student_id
------------- --------------------- ----------
Fleur Laurent 345 Copper St, London 777777
Gordon Martin 779 Lake Ave, Oxford 888888
Вставка перезаписи каталога
> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
PARTITIONED BY (student_id)
LOCATION "/path/to/students_table";
> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
name address student_id
------------- ------------------------- ----------
Amy Smith 123 Park Ave, San Jose 111111