Funkcja to_avro
Dotyczy: Databricks SQL Databricks Runtime 15.4 i nowsze
Zwraca wartość binarną Avro z określoną wartością wejściową.
Składnia
to_avro(expr [, avroSchemaSpec] )
Argumenty
expr
: wyrażenie.avroSchemaSpec
: opcjonalny schemat docelowy w formacie JSON. Jeśli zostanie określony, musi być zgodny z typemexpr
określonym w notatek.
Zwraca
Kodowany BINARY
przez avro .
Uwagi
Mapowanie typów SQL na typy Avro jest następujące:
Typ SQL | Schemat Avro |
---|---|
VOID |
{ "type" : "null" } |
BOOLEAN |
{ "type" : "boolean" } |
TINYINT |
{ "type" : "int" } |
SMALLINT |
{ "type" : "int" } |
INT |
{ "type" : "int" } |
BIGINT |
{ "type" : "long" } |
DECIMAL(p, s) |
{ "type": "fixed", "name": "a", logicalType": "decimal", "size": (p+1)/2, precision": p, "scale": s } |
FLOAT |
{ "type" : "float" } |
DOUBLE |
{ "type" : "float" } |
STRING |
{ "type" : "string" } |
DATE |
{ "type" : "int", "logicalType" : "date" } |
TIMESTAMP |
{ "type" : "long" } jako mikrosekundy od 1970-01-01 00:00:00.000000 |
TIMESTAMP_NTZ |
{ "type" : "long" } jako mikrosekundy od 1970-01-01 00:00:00.000000 |
YEAR MONTH INTERVAL |
{ "type" : "long" } jako miesiące |
DAY TIME INTERVAL |
{ "type" : "long" } jako mikrosekundy |
BINARY |
{ "type" : "bytes" } |
STRUCT<field1 type1, ...> |
{ "type" : "record", "name": "struct_name", "fields": [ { "name" : "field1", "type" : ... }, ... ] } |
ARRAY<type> |
{ "type" : "array", "items": { "type" : ... } |
MAP<STRING, valueType> |
{ "type" : "map", "keyType": { "type" : ... }, "valueType": { "type" : ... } } |
MAP<nonStringType, valueType> |
Nieobsługiwane |
VARIANT |
Nieobsługiwane |
Przykłady
> SELECT from_avro(to_avro(5), '{ "type" : "int" }');
5
> SELECT from_avro(to_avro(5, '{ "type" : "int" }'), '{ "type" : "int" }');
5
> SELECT from_avro(to_avro(named_struct('num', 5, 'txt', 'hello')), '{ "type" : "record", "name": "my_record", "fields": [{ "name": "num", "type": "int"}, { "name": "txt", "type": "string"}]}');
{"num":5,"txt":"hello"}