Поделиться через


INSERT

Область применения:флажок Databricks SQL флажок Databricks Runtime

Вставляет новые строки в таблицу и при необходимости усекает таблицу или ее разделы. Вставляемые строки указываются по выражениям значений или результату запроса.

Databricks не поддерживает INSERT для таблиц Hive Avro, если тип timestamp-millis присутствует в схеме.

Синтаксис

INSERT { OVERWRITE | INTO } [ TABLE ] table_name
    [ PARTITION clause ]
    [ ( column_name [, ...] ) | BY NAME ]
    query

INSERT INTO [ TABLE ] table_name
    REPLACE WHERE predicate
    query

Примечание.

При выполнении INSERT INTO таблицы Delta поддерживается проверка схемы и её эволюция. Если тип данных столбца нельзя безопасно привести к типу данных Delta таблицы, возникает исключение во время выполнения. Если включена эволюция схемы, новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.

Параметры

  • INTO или OVERWRITE

    При указании OVERWRITE применяется следующее:

    • Без partition_spec таблица усечена перед вставкой первой строки.
    • В противном случае перед вставкой первой строки усекаются все секции, соответствующие partition_spec.

    Если указать INTO, все вставляемые строки добавляются к существующим строкам.

  • table_name

    Определяет таблицу для вставки. Имя не должно содержать временную спецификацию. Если таблица не найдена, Azure Databricks вызывает ошибку TABLE_OR_VIEW_NOT_FOUND.

    table_name не должно быть внешней таблицей.

    применимо:отмечено , начиная с версии Databricks Runtime 16.0

    table_nameможет включать спецификацию параметров.

  • PARTITION предложение

    Необязательный параметр, указывающий целевую секцию для вставки. Можно также частично указать секцию.

    При указании статического раздела (column = value), этот столбец не должен повторяться в списке столбцов для вставки.

    При указании динамического раздела для , должна быть таблицей Delta Lake для .

  • ( column_name [, …] )

    Необязательный список столбцов в таблице. Команда insert может указывать любой конкретный столбец из таблицы не более одного раза.

    Область применения:флажок Databricks SQL флажок Databricks Runtime 12.2 LTS и выше

    • Если эта команда исключает столбец, Databricks SQL назначает соответствующее значение по умолчанию.
    • Если целевая схема таблицы не определяет значение по умолчанию для вставленного столбца, Databricks SQL назначает NULL, если столбец имеет значение NULL. В противном случае SQL Databricks генерирует ошибку.

    Предоставление списка столбцов не эквивалентно указанию всех столбцов, за исключением назначенных значений в предложении PARTITION в порядке, определенном в таблице.

  • BY NAME

    Область применения:флажок Databricks SQL флажок Databricks Runtime 13.3 LTS и выше

    Если это предложение используется вместо явного списка столбцов, команда использует открытые имена столбцов query для создания списка столбцов в порядке query. Как и в явном списке столбцов, каждый столбец должен существовать в целевой таблице и не должен дублироваться. Если столбец, присутствующий в table_name, не является частью списка подразумеваемых столбцов, вместо этого используется значение DEFAULT.

    BY NAME также соответствует атрибутам структур по имени.

    Столбец в query не может соответствовать столбцу, указанному в предложении PARTITION или любом созданном столбце.

  • ЗАМЕНИТЬ WHEREboolean_expression

    Область применения:флажок Databricks SQL флажок Databricks Runtime 12.2 LTS и выше

    Если table_name является таблицей Delta Lake, удалите строки, соответствующие boolean_expression перед вставкой строк, соответствующих boolean-expression, указанных в query. Строки, в query которых не совпадают boolean_expression , игнорируются.

    boolean_expression может быть любым выражением, которое оценивается в типе BOOLEANрезультата.

    См . произвольный выборочный перезапись с помощью replaceWhere.

  • query

    Запрос, создающий вставляемые строки.

    Количество столбцов, возвращаемых запросом, должно совпадать с указанным или подразумеваемым списком столбцов для вставки.

    Если тип данных нельзя безопасно привести к типу данных соответствующего столбца, создается исключение среды выполнения.

    Область применения:флажок Databricks SQL флажок Databricks Runtime 11.3 LTS и выше

    • Если query состоит из VALUES предложения, тогда expression может быть DEFAULT.
    • Если query состоит из SELECT предложения, тогда named_expression может быть DEFAULT.
    • DEFAULT будет вставлять явно определенное выражение DEFAULT соответствующего столбца в table_name, или NULL, если ничего не определено.

    Если включена эволюция схемы, новые столбцы могут существовать в качестве последних столбцов схемы (или вложенных столбцов) для развития схемы.

Примеры

В этом разделе рассматриваются следующие вопросы.

INSERT INTO

INSERT с помощью VALUES

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64) DEFAULT 'unknown', student_id INT)
  PARTITIONED BY (student_id);

-- Single row insert using a `VALUES` clause specifying all columns.
> INSERT INTO students VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);

-- Single row insert using an implicit default for address
> INSERT INTO students(name, student_id) VALUES('Grayson Miller', 222222);

-- Single row insert using an explicit DEFAULT keyword for address
> INSERT INTO students VALUES('Youna Kim', DEFAULT, 333333);

--  Multi-row insert using a `VALUES` clause
> INSERT INTO students VALUES
    ('Bob Brown', '456 Taylor St, Cupertino', 444444),
    ('Cathy Johnson', '789 Race Ave, Palo Alto', 555555);

-- Multi-row insert using a mix of DEFAULT and literals
> INSERT INTO students VALUES
    ('Gwyneth Zhao', '120 Main St, Rockport', 666666),
    ('Jackson Peterson', DEFAULT, 777777);

> SELECT * FROM students;
            name                  address student_id
 ---------------- ------------------------ ----------
        Amy Smith   123 Park Ave, San Jose     111111
   Grayson Miller                  unknown     222222
        Youna Kim                  unknown     333333
        Bob Brown 456 Taylor St, Cupertino     444444
    Cathy Johnson  789 Race Ave, Palo Alto     555555
     Gwyneth Zhao    120 Main St, Rockport     666666
 Jackson Peterson                  unknown     777777

Вставка с использованием подзапросов

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis   245 Market St, Milpitas 345678901

> INSERT INTO students PARTITION (student_id = 444444)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444

-- Use an option specification to influence the write behavior
INSERT INTO t WITH ('write.split-size' = 10) SELECT * FROM s;

Вставка с помощью предложения TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT INTO students TABLE visiting_students;

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith     123 Park Ave,San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888

Вставка в каталог

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT INTO delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111

Вставка со списком столбцов

> INSERT INTO students (address, name, student_id) VALUES
    ('Hangzhou, China', 'Kent Yao', 11215016);
> SELECT * FROM students WHERE name = 'Kent Yao';
      name                address student_id
 --------- ---------------------- ----------
 Kent Yao         Hangzhou, China   11215016

Вставка как со спецификацией партиции, так и со списком столбцов

> INSERT INTO students PARTITION (student_id = 11215017) (address, name) VALUES
    ('Hangzhou, China', 'Kent Yao Jr.');
> SELECT * FROM students WHERE student_id = 11215017;
         name                address student_id
 ------------ ---------------------- ----------
 Kent Yao Jr.        Hangzhou, China   11215017

INSERT с помощью предложения BY NAME

> CREATE TABLE target(n INT, text STRING, s STRUCT<a INT, b INT>);
> INSERT INTO target BY NAME SELECT named_struct('b', 2, 'a', 1) AS s, 0 AS n, 'data' AS text;
> SELECT * FROM target;
  0  data  {"a":1,"b":2}

> CREATE OR REPLACE TABLE target(n INT, arr ARRAY<STRUCT<a INT, b INT>>);
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n;
> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr;
> SELECT * FROM target;
  0     [{"a":1,"b":2}]
  NULL  [{"a":1,"b":2}]

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS badname;
Error

> INSERT INTO target BY NAME SELECT array(named_struct('b', 2, 'a', 1)) AS arr, 0 AS n, 1 AS n;
 Error: INSERT_COLUMN_ARITY_MISMATCH.TOO_MANY_DATA_COLUMNS

ЗАМЕНА WHERE

> CREATE TABLE sales(tx_date DATE, amount INTEGER);
> INSERT INTO sales VALUES
   (DATE'2022-10-01', 1234),
   (DATE'2022-10-02', 2345),
   (DATE'2022-10-03', 3456),
   (DATE'2022-11-01', 3214);

-- Replace any rows with a transaction date in October 2022.
> INSERT INTO sales REPLACE WHERE tx_date BETWEEN '2022-10-01' AND '2022-10-31'
   VALUES (DATE'2022-10-01', 1237),
          (DATE'2022-10-02', 2378),
          (DATE'2022-10-04', 2456),
          (DATE'2022-10-05', 6328);
> SELECT * FROM sales ORDER BY  tx_date;
 tx_date    amount
 ---------- ------
 2022-10-01   1237
 2022-10-02   2378
 2022-10-04   2456
 2022-10-05   6328
 2022-11-01   3214

INSERT ПЕРЕЗАПИСЬ

Вставьте с использованием условия VALUES

-- Assuming the students table has already been created and populated.
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111
     Bob Brown  456 Taylor St, Cupertino     222222
 Cathy Johnson   789 Race Ave, Palo Alto     333333
 Dora Williams 134 Forest Ave, Melo Park     444444
 Fleur Laurent     345 Copper St, London     777777
 Gordon Martin      779 Lake Ave, Oxford     888888
   Helen Davis 469 Mission St, San Diego     999999
    Jason Wang     908 Bird St, Saratoga     121212

> INSERT OVERWRITE students VALUES
    ('Ashua Hill', '456 Erica Ct, Cupertino', 111111),
    ('Brian Reed', '723 Kern Ave, Palo Alto', 222222);

> SELECT * FROM students;
       name                 address student_id
 ---------- ----------------------- ----------
 Ashua Hill 456 Erica Ct, Cupertino     111111
 Brian Reed 723 Kern Ave, Palo Alto     222222

Вставка с помощью подзапроса

-- Assuming the persons table has already been created and populated.
> SELECT * FROM persons;
          name                   address       ssn
 ------------- ------------------------- ---------
 Dora Williams 134 Forest Ave, Melo Park 123456789
   Eddie Davis    245 Market St,Milpitas 345678901

> INSERT OVERWRITE students PARTITION (student_id = 222222)
    SELECT name, address FROM persons WHERE name = "Dora Williams";

> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
    Ashua Hill   456 Erica Ct, Cupertino     111111
 Dora Williams 134 Forest Ave, Melo Park     222222

Вставьте с клаузой TABLE

-- Assuming the visiting_students table has already been created and populated.
> SELECT * FROM visiting_students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

> INSERT OVERWRITE students TABLE visiting_students;

> SELECT * FROM students;
          name               address student_id
 ------------- --------------------- ----------
 Fleur Laurent 345 Copper St, London     777777
 Gordon Martin  779 Lake Ave, Oxford     888888

Вставка перезаписи каталога

> CREATE TABLE students (name VARCHAR(64), address VARCHAR(64), student_id INT)
    PARTITIONED BY (student_id)
    LOCATION "/path/to/students_table";

> INSERT OVERWRITE delta.`/path/to/students_table` VALUES
    ('Amy Smith', '123 Park Ave, San Jose', 111111);
> SELECT * FROM students;
          name                   address student_id
 ------------- ------------------------- ----------
     Amy Smith    123 Park Ave, San Jose     111111