Azure HDInsight のドキュメント

Azure HDInsight は、クラウドで Apache Spark、Apache Hive、Apache Kafka、Apache HBase などを実行できるようにするマネージド Apache Hadoop サービスです。

HDInsight について

概要

• Azure HDInsight とは
• HDInsight の OSS コンポーネントとバージョン

作業を開始する

• Azure HDInsight を使用した分析ソリューションの構築
• HDInsight クラスターの作成
• HDInsight での監視
• クラスターのスケーリングによるコストの節約
• HDInsight のセキュリティの概要

Apache Spark

作業を開始する

• Apache Spark とは
• Jupyter で Spark クラスターを作成して Spark を実行する
• データを読み込んで Spark クエリを実行する

攻略ガイド

• Spark の依存関係の管理
• Spark ジョブの最適化

Apache Hadoop

作業を開始する

• Apache Hadoop とは
• Hadoop クラスターを作成して Hive クエリを実行する
• Hadoop サンプルを実行する

攻略ガイド

• Hadoop クラスターの監視と管理
• JDBC/ODBC ドライバーの使用

統合

攻略ガイド

• Spark/Hive - Hive Warehouse Connector を使用して Spark と Hive を関連付ける
• Spark/Kafka - Apache Kafka による Apache Spark 構造化ストリーミング
• Spark/HBase - Apache Spark で Apache HBase にクエリを実行する
• ADF を使用してオンデマンド クラスターを作成する

概念

• 適切な VM サイズの選択
• HDInsight でサポートされている VM の種類
• ストレージ オプションの比較

Apache Kafka

作業を開始する

• Apache Kafka とは
• Kafka クラスターの作成と Kafka トピックの管理
• Producer および Consumer API の使用

攻略ガイド

• Kafka REST プロキシを使用する
• Kafka TLS 暗号化および認証

Interactive query

作業を開始する

• 対話型クエリとは
• Apache Hive を使用してフライト データを分析する

攻略ガイド

• クラスターのサイズ設定ガイド
• Hive を Power BI に関連付ける

エンタープライズ対応

作業を開始する

• HDInsight のセキュリティの概要
• 仮想ネットワークを計画する
• Active Directory 上の Hadoop: Enterprise セキュリティ パッケージ
• オンプレミスのクラスターをクラウドに移行する

Apache HBase

作業を開始する

• Apache HBase とは
• Azure HDInsight で HBase を使用する
• Apache Phoenix を使用して HBase を照会する

攻略ガイド

• HBase 用書き込みアクセラレータを有効にする
• Apache Phoenix のベスト プラクティス