Проверка знаний

1.

Какие требования пользователя лучше всего подходят для использования интерактивного запроса HDInsight?

Если необходимо использовать MapReduce на неструктурированных данных с элементами управления доступом на основе ролей.

Если требуется использовать запросы SQL, аналогичные структурированным данным, с элементами управления уровня строк и столбцов.

Если вы хотите использовать запросы, похожие на SQL, на массивах с высоким параллелизмом для длительных вычислений.

2.

Какие форматы файлов поддерживаются интерактивным запросом?

.xml, .doc, .log

.json, .csv, .txt

.ФОРМАТ PDF. DBK, . MD

3.

Какой сценарий лучше подходит для интерактивного запроса HDInsight?

Пакетная обработка

Потоковая передача данных.

Нерегламентированные запросы

4.

Зачем нужен Hive Warehouse Connector?

Hive и Spark — это разные типы кластеров.

Hive и Spark имеют два разных хранилища метаданных. Им требуется соединитель для мостов между двумя.

Hive предназначен для статических данных, а Spark — для потоковой передачи данных.

5.

Почему использование Hive Warehouse Connector является более эффективным и масштабируемым по сравнению с использованием стандартного подключения JDBC из Spark в Hive?

Так как библиотека загружает данные из HiveServer в драйвер Spark в параллельном режиме

Так как соединитель хранилища Hive оптимизирован для потоковых данных.

Библиотека HWC загружает данные из управляющих программ LLAP в исполнители Spark параллельно

Обратная связь