azure-hdinsight

Azure HDInsight スキル

このスキルでは、Azure HDInsight に関する専門的なガイダンスを提供します。トラブルシューティング、ベストプラクティス、意思決定、アーキテクチャと設計パターン、制限とクォータ、セキュリティ、構成、統合とコーディングパターン、デプロイについて説明します。ローカルのクイックリファレンスコンテンツと、ドキュメントをリモートで取得する機能を組み合わせています。

このスキルの使用方法

IMPORTANT for Agent: 以下のカテゴリインデックスを使用して、関連するセクションを見つけてください。行の範囲があるカテゴリ（例：L35-L120）では、指定された行を指定してread_fileを使用してください。ファイルへのリンクがあるカテゴリ（例：[security.md](security.md)）では、リンク先の参照ファイルに対してread_fileを使用してください

IMPORTANT for Agent: metadata.generated_atが3か月以上前の場合は、リポジトリから最新バージョンを取得するようユーザーに提案してください。mcp_microsoftdocsツールを利用できない場合は、インストールするようユーザーに提案してください：インストールガイド

このスキルでは、ドキュメントのコンテンツを取得するためにネットワークアクセスが必要です：

• 推奨：クエリ文字列from=learn-agent-skillを指定してmcp_microsoftdocs:microsoft_docs_fetchを使用します。Markdown が返されます。
• 代替手段：クエリ文字列from=learn-agent-skill&accept=text/markdownを指定してfetch_webpageを使用します。Markdown が返されます。

カテゴリインデックス

カテゴリ	行	説明
トラブルシューティング	L37-L132	HDInsight クラスターの問題の診断と解決：作成／認証、ネットワーク、ストレージ、Ambari／HDFS／Hive／HBase／Kafka／Spark／YARN の問題、パフォーマンス、ディスク／CPU、既知のエラーコードと回避策。
ベストプラクティス	L133-L174	HDInsight クラスターとワークロード（Hadoop、Spark、Hive、HBase、Kafka）の設計、セキュリティ保護、監視、スケーリング、チューニングに関するベストプラクティス。ストレージ、移行、パフォーマンス最適化を含みます。
意思決定	L175-L200	HDInsight の容量、ネットワーク、ストレージ、VM サイズの計画と、Hadoop、HBase、Kafka、Ambari、HDInsight のバージョン、ロードバランサーの詳細な移行／アップグレード手順。
アーキテクチャと設計パターン	L201-L215	HDInsight クラスターのアーキテクチャ、セキュリティ、ネットワーク、高可用性／ディザスターリカバリー、オンプレミスの Hadoop からの移行、共有ストレージ、ストリーミング設計、Ambari／Oozie を使用した運用パイプライン
制限とクォータ	L216-L225	HDInsight の容量制限、ノード構成、Kafka 固有の制限、メタストアの制約、ログのサイズと保持期間、CPU コアクォータの引き上げをリクエスト／管理する方法。
セキュリティ	L226-L269	HDInsight クラスターのセキュリティ保護：ID とアクセス（Entra、LDAP、Ranger、RBAC）、ネットワーク分離（NSG、Private Link）、TLS／暗号化、Kafka／Hive／Spark のセキュリティ、セキュリティのベストプラクティス。
構成	L270-L326	HDInsight クラスターの構成とチューニング：ネットワーク／VPN、Ambari／Hive／Spark／HBase の設定、自動スケーリング、監視／ログ記録、SSH／Jupyter／VS Code アクセス、スクリプトベースのカスタマイズ。
統合とコーディングパターン	L327-L394	HDInsight（Hive、Spark、Kafka、HBase、MapReduce、Sqoop）をツール、SDK、REST／CLI、および SQL、Cosmos DB、Power BI、IoT、Synapse などの外部サービスと統合するためのパターンとコードサンプル
デプロイ	L395-L408	ポータル、CLI、PowerShell、ARM／REST、Data Factory、Marketplace、AMA、ランブックを使用した HDInsight クラスター（Hadoop、HBase、Kafka）の作成、構成、移行、自動化

トラブルシューティング

トピック	URL
古い HDInsight イメージでの信頼性の問題に対処する	https://learn.microsoft.com/en-us/azure/hdinsight/cluster-reliability-issues
HDInsight ARM テンプレートのコンポーネントバージョン検証エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/component-version-validation-error-arm-templates
Azure HDInsight クラスターの作成エラーをトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/create-cluster-error-dictionary
セキュリティ保護された HDInsight クラスターの認証問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/domain-joined-authentication-issues
HDInsight クラスターの作成時に DomainNotFound が発生した場合に診断スクリプトを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/sample-script
HDInsight クラスターの作成時に発生する DomainNotFound エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/troubleshoot-domainnotfound
HDInsight の Apache Ambari ディレクトリアラートを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-directory-alerts
HDInsight の Ambari UI でホストやサービスがダウンしている問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-down-hosts-services
HDInsight の Apache Ambari UI 502 エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-fivezerotwo-error
HDInsight の Apache Ambari ハートビートの問題を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-heartbeat-issues
HDInsight の Apache Ambari Metrics Collector をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-metricservice-issues
HDInsight の Apache Ambari の古いアラートを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-stale-alerts
HDInsight でローカル HDFS がセーフモードから抜け出せない問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-hdfs-troubleshoot-safe-mode
HDInsight クラスターの作成失敗を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-cluster-creation-fails
HDInsight 用にサービスプリンシパル証明書を base-64 に変換する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-converting-service-principal-certificate
HDInsight の Data Lake ストレージファイルアクセスの問題を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-data-lake-files
HDInsight の InvalidNetworkSecurityGroupSecurityRules を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-invalidnetworksecuritygroupsecurityrules-cluster-creation-fails
HDInsight ノードのディスク容量不足を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-out-disk-space
HDInsight の Watchdog BUG soft lockup CPU エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-soft-lockup-cpu
HDInsight クラスターでノードを追加できない問題を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-unable-add-nodes
HDInsight クラスターへのログイン失敗をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-unable-log-in-cluster
HDInsight のディスク容量の問題を管理およびトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-disk-space
HDInsight の InvalidNetworkConfigurationErrorCode を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-invalidnetworkconfigurationerrorcode-cluster-creation-fails
暗号化された HDInsight クラスターの Key Vault アクセスを復元する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-lost-key-vault-access
HDInsight サービスの起動時に発生するポート競合を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-port-conflict
HDInsight の「account does not support http」ストレージエラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-wasbs-storage-exception
YARN ログの読み取り時に発生する無効な BCFile エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-yarn-log-invalid-bcfile
HDInsight の BindException address-in-use を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-bindexception-address-use
HDInsight の HBase hbck 不整合エラーを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-hbase-hbck-inconsistencies
HBase リージョンサーバーの CPU 使用率が高い問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-pegged-cpu-region-server
HDInsight の Apache Phoenix 接続の問題を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-phoenix-connectivity
HDP のアップグレード後に Phoenix ビューでデータが欠落する問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-phoenix-no-data
HDInsight で HBase REST サービスが応答しない問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-rest-not-spending
HDInsight で HBase Master の起動に失敗する問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-start-fails
接続リセット後に発生するストレージ例外を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-storage-exception-reset
HDInsight の hbase hbck で発生するタイムアウトを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-timeouts-hbase-hbck
HDInsight の HBase リージョンサーバーの問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-unassigned-regions
HDInsight の HBase TTL データ保持の問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-data-retention-issues-expired-data
HDInsight の HBase REST API の問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-rest-api
HDInsight で YARN アプリケーションログにアクセスして内容を確認する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-access-yarn-app-logs-linux
HDInsight で Hadoop ヒープダンプを有効にして収集する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-collect-debug-heap-dump-linux
HDInsight の Hive メモリ不足エラーを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-hive-out-of-memory-error-oom
HDInsight の Hadoop スタックトレースエラーを検索して解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-stack-trace-error-messages
HDInsight の WebHCat エラーを理解して解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-templeton-webhcat-debug-errors
Azure HDInsight の既知の問題とトラブルシューティング	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues
証明書のローテーション後に発生する Ambari アクセス失敗を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ambari-access-certificate-issue
HDInsight 5.1 の Ambari ユーザー切り替えの問題を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ambari-users-cache
/tmp ディスク使用量のリークから HDInsight ヘッドノードを復旧する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-cluster-head-node-unresponsive
HDInsight 5.1 での conda バージョンのデグレードを緩和する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-conda-version-regression
ESP HDInsight クラスターでの Ranger 起動失敗を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ranger-cluster-create-failure
HDInsight クラスターで遅いジョブや失敗するジョブを診断する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-failed-cluster
HDInsight トラブルシューティングガイドのインデックス	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-guide
Azure HDInsight の HDFS の問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-hdfs
Azure HDInsight の一般的な Hive の問題と修正方法	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-hive
Azure HDInsight の YARN の問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-yarn
HDInsight の Ambari Hive View でエラーメッセージを復元する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-error-message-hive-view
HDInsight ヘッドノードでの Hive ログによるディスク容量不足を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-hive-logs-diskspace-full-headnodes
Zookeeper の問題による Hive View のアクセス不能を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-inaccessible-hive-view
Hive 結合で発生する OutOfMemory GC overhead エラーをトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-outofmemory-overhead-exceeded
Hive テーブルの作成時に発生するアクセス許可エラーを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-permission-error-create-table
HDInsight の Hive LLAP クエリのパフォーマンス低下を診断する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-query-performance
HDInsight で遅いリデューサーとデータ偏りを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-slow-reducer
HDInsight で Apache Tez アプリケーションがハングする問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-tez-hangs
HDInsight で遅い、または失敗する Ambari Tez View を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-tez-view-slow
HDInsight の Hive View クエリ結果のタイムアウトを修正する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-view-time-out
HDInsight の Zeppelin インタープリターで Hive JDBC URL を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-zookeeperhiveclientexception-hiveserver-configs
Ambari Hive View のゲートウェイタイムアウト例外を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/troubleshoot-gateway-timeout
Hive LLAP ワークロード管理の問題をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/troubleshoot-workload-management-issues
ディスク容量不足による Kafka ブローカーの起動失敗を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-troubleshoot-full-disk
HDInsight Kafka エラー「insufficient fault domains」を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-troubleshoot-insufficient-domains
HDInsight History Server 拡張機能を使用して Spark アプリをデバッグする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-azure-spark-history-server
IntelliJ Azure Toolkit を使用して Spark ジョブの失敗をデバッグする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-failure-debug
IntelliJ を使用して HDInsight の Apache Spark アプリをリモートデバッグする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-plugin-debug-jobs-remotely
YARN UI と Spark UI を使用して HDInsight Spark ジョブをデバッグする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-job-debugging
HDInsight Spark クラスターの既知の問題と回避策	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-known-issues
24 日後に停止する Spark Streaming アプリをトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-application-stops
HDInsight の Jupyter 404「Blocking Cross Origin API」を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-blocking-cross-origin
HDInsight Spark ストリーミングの RequestBodyTooLarge エラーを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-event-log-requestbodytoolarge
HDInsight Spark アクティビティの IllegalArgumentException を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-illegalargumentexception
HDInsight Spark の InvalidClassException バージョン不一致を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-fails-invalidclassexception
HDInsight の Spark-Kafka で発生する NoClassDefFoundError を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-fails-noclassdeffounderror
Azure Storage ファイルが多数ある場合の遅い Spark ジョブを改善する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-slowness-container
HDInsight Spark クラスターの OutOfMemoryError を解決する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-outofmemory
HDInsight の Spark Thrift で発生する RpcTimeoutException と 502 エラーを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-rpctimeoutexception
HDInsight で JDBC/ODBC と Thrift を介した大きな結果のダウンロードをトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-sparkexception-kryo-serialization-failed
Azure HDInsight の一般的な Spark の問題と修正方法	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-troubleshoot-spark
HDInsight ストレージの問題について WASB ファイル操作をデバッグする	https://learn.microsoft.com/en-us/azure/hdinsight/spark/troubleshoot-debug-wasb
HDInsight での Jupyter Notebook 作成の問題を修正する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/troubleshoot-jupyter-notebook-convert
HDInsight の Apache Oozie ワークフローをトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-oozie
Azure HDInsight リソースの作成時に発生する容量エラーを解決する	https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-resource-creation-fails
Azure HDInsight のスクリプトアクション失敗をトラブルシューティングする	https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-script-action
ESP HDInsight での Sqoop インポート／エクスポートの失敗を回避する	https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-sqoop

ベストプラクティス

トピック	URL
HDInsight の可用性に Azure Monitor ログを使用する	https://learn.microsoft.com/en-us/azure/hdinsight/cluster-availability-monitor-logs
HDInsight でクラスター管理のベストプラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/cluster-management-best-practices
HDInsight Enterprise Security の一般的なベストプラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/general-guidelines
Azure HDInsight へのデータ移行を計画して実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-data-migration
Azure HDInsight クラスターのインフラストラクチャに関するベストプラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-infrastructure
HDInsight の移行でストレージに関するベストプラクティスを実装する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-storage
Accelerated Writes で HDInsight HBase を最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-accelerated-writes
HDInsight で HBase パフォーマンスアドバイザーの推奨事項を適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-advisor
HDInsight で Apache Phoenix のパフォーマンスを調整する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-phoenix-performance
HDInsight で Apache HBase のパフォーマンスを調整する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-hbase-performance-issues
エッジノードを使用して HDInsight の HiveServer2 をスケーリングする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-install-hiveserver2
Apache Ambari で HDInsight の可用性を監視する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-cluster-availability
セキュリティで保護された転送が有効なストレージアカウントを使用して HDInsight クラスターを作成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-with-secure-transfer-storage
HDInsight 上の Hadoop で Linux 固有のヒントを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-linux-information
HDInsight で Apache Hive クエリのパフォーマンスを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-optimize-hive-query
HDInsight クラスターのパフォーマンスを監視して最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-key-scenarios-to-monitor
HDInsight クラスターの OS パッチをスケジュールして適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-os-patching
HDInsight クラスター作成前のベストプラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-overview-before-you-start
ワークロードのパターンに応じて HDInsight クラスターを手動でスケーリングする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-scaling-best-practices
HDInsight 上の Hive でゲートウェイのベストプラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/gateway-best-practices
HDInsight で LLAP のスケジュールベースの自動スケーリングを運用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/llap-schedule-based-autoscale-best-practices
高可用性を実現するために Kafka パーティションレプリカを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-high-availability
HDInsight クラスター間で Kafka トピックをミラーリングする	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-mirroring
最適なパフォーマンスを得られるよう HDInsight 上の Kafka を調整する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-performance-tuning
HDInsight 上の Kafka をスケーリングするためにマネージドディスクを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-scalability
HDInsight の Log Analytics データを新しいテーブルに移行する	https://learn.microsoft.com/en-us/azure/hdinsight/log-analytics-migration
HDInsight の既定のファイルシステムとして Azure Storage を効果的に使用する	https://learn.microsoft.com/en-us/azure/hdinsight/overview-azure-storage
HDInsight クラスターで Data Lake Storage Gen2 を活用する	https://learn.microsoft.com/en-us/azure/hdinsight/overview-data-lake-storage-gen2
HDInsight で Apache Spark ジョブのパフォーマンスを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-perf
HDInsight Spark の Jupyter 用 Python パッケージを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-python-package-installation
HDInsight で Spark Streaming を構成し、Exactly-once 処理を実現する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-streaming-exactly-once
HDInsight の Apache Spark クラスター構成を最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-cluster-configuration
HDInsight 上の Spark でデータ処理操作を最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-data-processing
HDInsight 上の Apache Spark のデータストレージを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-data-storage
HDInsight クラスターで Apache Spark のメモリ使用量を調整する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-memory-usage
HDInsight Spark で JAR 依存関係を安全に管理する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/safely-manage-jar-dependency
HDInsight で Apache Spark のパフォーマンスガイドラインを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/spark-best-practices
SparkCruise を使用して HDInsight 上の Spark クエリを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/spark-cruise

意思決定

トピック	URL
Azure HDInsight で大規模な ETL を計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-etl-at-scale
オンプレミスの Hadoop を Azure HDInsight に移行するメリットを評価する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-motivation
カスタム MapReduce ジョブに使用する HDInsight ツールを選択する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-run-custom-programs
HBase のバックアップとレプリケーションのオプションを選択する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-backup-replication
Apache HBase クラスターを HDInsight 5.1 に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-hdinsight-5-1
新しいストレージアカウントを使用して HBase を HDInsight 5.1 に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-hdinsight-5-1-new-storage-account
Apache HBase クラスターを新しい HDInsight バージョンに移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-new-version
HBase を新しい HDInsight バージョンとストレージアカウントに移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-new-version-new-storage-account
HDInsight クラスターの容量とパフォーマンスを計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-capacity-planning
廃止される HDInsight コンポーネントの移行を計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-component-retirements-and-action-required
Azure HDInsight クラスターのストレージサービスを比較する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-compare-storage-options
Azure HDInsight の仮想ネットワークへのデプロイを計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-plan-virtual-network-deployment
Azure HDInsight を Apache Ranger 2.3.0 にアップグレードする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-ranger-5-1-migration
廃止された HDInsight バージョンを評価して移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-retired-versions
HDInsight ノードに適切な VM サイズを選択する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-selecting-vm-size
新しい Azure HDInsight クラスター バージョンへの移行を計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-upgrade-cluster
HDInsight Interactive Query（LLAP）クラスターのサイズを決定する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-llap-sizing-guide
Kafka MirrorMaker 2.0 を移行とレプリケーションに使用する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-mirrormaker-2-0-guide
Apache Kafka ワークロードを HDInsight 4.0 から 5.1 に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/migrate-5-1-versions
Apache Kafka ワークロードを HDInsight 3.6 から 4.0 に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/migrate-versions
HDInsight クラスターを Basic Load Balancer から Standard Load Balancer に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/load-balancer-migration-guidelines
Ambari の構成を HDInsight 4.x から 5.x に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/migrate-ambari-recent-version-hdinsight

アーキテクチャと設計パターン

トピック	URL
HDInsight クラスター管理に Apache Ambari を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/apache-ambari-usage
Enterprise Security Package を使用した HDInsight のアーキテクチャを理解する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-architecture
オンプレミスの Hadoop を HDInsight に移行するためのアーキテクチャを設計する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-architecture
HDInsight の事業継続アーキテクチャを選択する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-business-continuity-architecture
HDInsight の高可用性と DR のケース設計を調べる	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-high-availability-case-study
HDInsight の高可用性アーキテクチャのコンポーネントを理解する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-high-availability-components
複数の HDInsight クラスターで 1 つの Data Lake Storage アカウントを共有する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-multiple-clusters-data-lake-store
Oozie を使用して HDInsight のデータパイプラインを運用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-operationalize-data-pipeline
HDInsight でスケーラブルなストリーミングアーキテクチャを設計する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-streaming-at-scale-overview
Azure HDInsight の仮想ネットワークアーキテクチャとリソース	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-virtual-network-architecture
HDInsight の YARN 上で高可用性の Spark Streaming ジョブを設計する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-streaming-high-availability

制限とクォータ

トピック	URL
Azure HDInsight サービスの制限と動作を確認する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-faq
HDInsight のログサイズと保持ポリシーを計画する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-log-management
HDInsight クラスターでサポートされているノード構成を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-supported-node-configuration
外部メタストアを使用し、HDInsight の既定のメタストア制限を理解する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-use-external-metadata-stores
HDInsight 上の Kafka の制限、構成、動作	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-faq
HDInsight の CPU コアクォータの引き上げを申請して管理する	https://learn.microsoft.com/en-us/azure/hdinsight/quota-increase-request

セキュリティ

トピック	URL
HDInsight で Blob ストレージへのマネージド ID アクセスを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/configure-azure-blob-storage
HDInsight の保存データに対する二重ディスク暗号化を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/disk-encryption
Entra Domain Services との統合を使用して HDInsight クラスターを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-configure-using-azure-adds
HDInsight Enterprise Security Package クラスターを作成して構成する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-create-configure-enterprise-security-cluster
HDInsight ESP クラスターのユーザー、ロール、セキュリティを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-manage
ESP を使用する HBase の Apache Ranger ポリシーを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-hbase
HDInsight ESP で Apache Ranger Hive ポリシーを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-hive
ESP を使用する Kafka の Apache Ranger ポリシーを設定する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-kafka
Azure HDInsight ノードの転送中の暗号化を実装する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/encryption-in-transit
Azure HDInsight のエンタープライズ セキュリティ オプションを計画する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/hdinsight-security-overview
HDInsight Enterprise Security で Oozie ワークフローを保護する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/hdinsight-use-oozie-domain-joined-clusters
OAuth と MFA 用に Azure HDInsight ID Broker を設定する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/identity-broker
HDInsight で Ranger と Ambari の LDAP 同期を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/ldap-sync
HDInsight 上の Entra ドメイン アカウントの SSH アクセスを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/ssh-domain-accounts
HDInsight Kafka REST Proxy の Private Link を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/enable-private-link-on-kafka-rest-proxy-hdi-cluster
HDInsight クラスター向け Enterprise Security Package を実装する	https://learn.microsoft.com/en-us/azure/hdinsight/enterprise-security-package
Azure HDInsight のセキュリティと DevOps のベスト プラクティスを適用する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-security-devops
ESP 対応 HDInsight クラスターで Ambari Views のアクセス許可を管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-authorize-users-to-ambari
HDInsight で非対話型 .NET 認証を実装する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-create-non-interactive-authentication-dotnet-applications
Azure HDInsight クラスターでマネージド ID を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-managed-identities
NSG とルートで HDInsight 管理 IP を許可する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-management-ip-addresses
HDInsight クラスター構成のきめ細かなロールベース アクセスに移行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-migrate-granular-access-cluster-configurations
HDInsight クラスターで Azure Private Link を有効にする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-private-link
Azure HDInsight クラスターのパブリック接続を制限する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-restrict-public-connectivity
HDInsight ストレージ アカウントのアクセス キーを安全にローテーションする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-rotate-storage-keys
管理トラフィックに HDInsight NSG サービス タグを使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-service-tags
SAS トークンを使用して HDInsight Blob データへのアクセスを制限する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-storage-sharedaccesssignature-permissions
Microsoft Entra ユーザーを HDInsight ESP クラスターに同期する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-sync-aad-users-to-cluster
Entra ID 認証済み HDInsight クラスターを作成して管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/create-clusters-with-entra
Entra ID 対応 HDInsight クラスター用の ARM テンプレートを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-entra-id-enabled-azure-hdinsight-clusters-with-arm-templates
REST API を使用して Entra ID 対応 HDInsight クラスターを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-entra-id-enabled-cluster-with-rest-api
HDInsight の Hive のセキュリティ オプションを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hdinsight-security-options-for-hive
ESP Kafka クラスターで TLS とクライアント認証を設定する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-esp-kafka-ssl-encryption-authentication
HDInsight Kafka の TLS 暗号化とクライアント認証を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-ssl-encryption-authentication
HDInsight で Spark–Kafka ストリーミング統合を保護する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/secure-spark-kafka-streaming-integration-scenario
Azure サービスにアクセスするため、HDInsight から OAuth トークンを取得する	https://learn.microsoft.com/en-us/azure/hdinsight/msi-support-to-access-azure-services
HDInsight 用の組み込み Azure Policy 定義を適用する	https://learn.microsoft.com/en-us/azure/hdinsight/policy-reference
HDInsight ESP の Spark SQL 用 Ranger ポリシーを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/ranger-policies-for-spark
Azure HDInsight ゲートウェイの TLS バージョンを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/transport-layer-security
SQL 認証用に HDInsight マネージド ID を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/use-managed-identity-for-sql-database-authentication-in-azure-hdinsight

構成

トピック	URL
HDInsight で Ambari Web UI の自動ログアウト タイムアウトを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/ambari-web-ui-auto-logout
VPN と DNS を使用して HDInsight クラスターをオンプレミス ネットワークに接続する	https://learn.microsoft.com/en-us/azure/hdinsight/connect-on-premises-network
Azure VNet で HBase クラスターのレプリケーションを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-replication
HBCK2 を使用して HDInsight 上の HBase を修復する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/how-to-use-hbck2-tool
HDInsight 4.0 のオープンソース コンポーネントのバージョンを確認する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-40-component-versioning
HDInsight 5.x のオープンソース コンポーネントのバージョンを確認する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-5x-component-versioning
Azure CLI コマンドを使用して HDInsight クラスターを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-command-line
PowerShell で HDInsight クラスター管理を自動化する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-powershell
HDInsight で空のエッジ ノードを構成して使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-use-edge-node
HDInsight Autoscale のポリシーと制限を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-autoscale-clusters
Ambari を使用して HDInsight クラスターの設定を調整する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-changing-configs-via-ambari
HDInsight にバンドルされているオープンソース コンポーネントとバージョンを確認する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-component-versioning
Azure HDInsight VS Code 拡張機能の設定を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-config-for-vscode
HDInsight 用に VNet、NSG、DNS を作成して構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-create-virtual-network
HDInsight クラスター用のカスタム Ambari データベースを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-custom-ambari-db
HDInsight クラスターの作成時に Apache Hive ライブラリを事前に読み込む	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-add-hive-libraries
既存の HDInsight クラスターに Azure Storage アカウントを追加する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-add-storage
ブートストラップを使用して HDInsight クラスター構成をプログラムでカスタマイズする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-customize-cluster-bootstrap
スクリプト アクションを使用して HDInsight クラスターをカスタマイズする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-customize-cluster-linux
SSH を使用して Azure HDInsight クラスターに接続する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-linux-use-ssh-unix
HDInsight クラスターの操作に対する Azure Monitor ログを有効にする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-oms-log-analytics-tutorial
HDInsight クラスター上の Hadoop サービスのポートを参照する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-port-settings-for-services
複数のツールで HDInsight クラスターを構成およびカスタマイズする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-provision-linux-clusters
Azure HDInsight クラスターを構成するスクリプト アクションを開発する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-script-actions-linux
HDInsight Web UI にアクセスするための SSH トンネリングを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-linux-ambari-ssh-tunnel
Azure Firewall を使用して HDInsight の送信トラフィックを保護する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-restrict-outbound-traffic
HDInsight Autoscale の詳細設定をカスタム調整する	https://learn.microsoft.com/en-us/azure/hdinsight/how-to-custom-configure-hdinsight-autoscale
HDInsight で Apache Hive レプリケーションを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-replication
HDInsight の Hive 既定メタストアを外部 SQL Database に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-default-metastore-export-import
HDInsight で Hive LLAP ワークロード管理プールを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-workload-management
HDInsight で Hive LLAP ワークロード管理コマンドを使用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/workload-management-commands
HDInsight Kafka でトピックの自動作成を有効にする	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-auto-create-topics
HDInsight Kafka への VPN および VNet アクセスを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-connect-vpn-gateway
HDInsight Kafka 用の Azure Monitor ログを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-log-analytics-operations-management
HDInsight Kafka への VNet 間接続を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/connect-kafka-cluster-with-vm-in-different-vnet
HDInsight Kafka への VNet 間クライアント接続を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/connect-kafka-with-vnet
Azure Monitor を使用して Azure HDInsight の監視とアラートを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/monitor-hdinsight
Azure HDInsight の監視データのリファレンス	https://learn.microsoft.com/en-us/azure/hdinsight/monitor-hdinsight-reference
HDInsight 用に Azure Firewall 以外のネットワーク仮想アプライアンスを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/network-virtual-appliance
Ambari 構成を使用して HBase のパフォーマンスを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/optimize-hbase-ambari
HDInsight で Ambari 設定を使用して Hive のパフォーマンスを最適化する	https://learn.microsoft.com/en-us/azure/hdinsight/optimize-hive-ambari
HDInsight で Ambari を使用して Pig プロパティを調整する	https://learn.microsoft.com/en-us/azure/hdinsight/optimize-pig-ambari
スクリプト アクションを使用して HDInsight の AMA 選択的ログ記録を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/selective-logging-analysis
スクリプト アクションを使用して HDInsight クラスターの選択的ログ記録を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/selective-logging-analysis-azure-logs
HDInsight 仮想ネットワーク用のサービス エンドポイント ポリシーを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/service-endpoint-policies
VS Code HDInsight Tools で PySpark 対話型環境をセットアップする	https://learn.microsoft.com/en-us/azure/hdinsight/set-up-pyspark-interactive-environment
HDInsight IO Cache を構成して Spark を高速化する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-improve-performance-iocache
HDInsight Spark Jupyter カーネルを効果的に使用する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-jupyter-notebook-kernels
Maven パッケージを使用するように HDInsight の Jupyter を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-jupyter-notebook-use-external-packages
HDInsight で Spark の依存関係を構成してスコープを設定する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-manage-dependencies
HDInsight クラスターで Spark リソース構成を調整する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-resource-manager
Azure HDInsight で Apache Spark の設定を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-settings
SCP を使用して Azure HDInsight にファイルを転送する	https://learn.microsoft.com/en-us/azure/hdinsight/use-scp

統合とコーディングパターン

トピック	URL
HDInsight で SendGrid を使用して Ambari のメールアラートを構成する	https://learn.microsoft.com/en-us/azure/hdinsight/apache-ambari-email
Kafka から Spark を使用して Azure Cosmos DB にストリーミングする	https://learn.microsoft.com/en-us/azure/hdinsight/apache-kafka-spark-structured-streaming-cosmosdb
Azure CLI のサンプルを使用して HDInsight の一般的なタスクを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/azure-cli-samples
Power Query を使用して Excel を HDInsight Hadoop に接続する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-excel-power-query
JDBC を使用して Java から HDInsight Hive にクエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-hive-jdbc-driver
ODBC を使用して Power BI で HDInsight Hive のデータを視覚化する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-hive-power-bi
C# UDF を HDInsight の Hive および Pig と統合する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-hive-pig-udf-dotnet-csharp
Curl で Hive の WebHCat REST API を呼び出す	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-curl
HDInsight .NET SDK を使用して Hive ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-dotnet-sdk
Azure PowerShell で HDInsight Hive クエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-powershell
Visual Studio Data Lake ツールを使用して HDInsight 上の Hive を操作する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-visual-studio
Curl と WebHCat を使用して HDInsight に MapReduce ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-curl
.NET SDK を使用して HDInsight に MapReduce ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-dotnet-sdk
Azure PowerShell を使用して HDInsight の MapReduce ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-powershell
SSH 経由で HDInsight 上の MapReduce ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-ssh
Curl と WebHCat を使用して HDInsight に Sqoop ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-curl
.NET SDK を使用して HDInsight 上で Sqoop ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-dotnet-sdk
HDInsight Linux ヘッドノードで Sqoop を使用して SQL と統合する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-mac-linux
PowerShell を使用して HDInsight に Sqoop ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-powershell
Visual Studio Data Lake Tools を HDInsight Hadoop で使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-visual-studio-tools-get-started
HDInsight HiveServer2 への Beeline 接続を構成する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/connect-install-beeline
HDInsight と Azure SQL Database 間で Sqoop ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-use-sqoop
HDInsight の Hive および Pig で Python UDF を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/python-udf-hdinsight
.NET、curl、PowerShell を使用して HDInsight に Hadoop ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/submit-apache-hadoop-jobs-programmatically
Maven を使用して Java HBase クライアントをビルドおよびデプロイする	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-build-java-maven-linux
Phoenix と Zeppelin で HBase SQL クエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-phoenix-zeppelin
HDInsight クラスターで HBase .NET SDK を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-rest-sdk
HDInsight で Phoenix Query Server REST SDK を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-using-phoenix-query-server-rest-sdk
HDInsight .NET SDK を使用してクラスター管理タスクを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-dotnet-sdk
HDInsight で Kafka と Spark DStreams を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apache-spark-with-kafka
Azure HDInsight にカスタム Hadoop アプリケーションをインストールする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-install-custom-applications
HDInsight で VS Code 用 Spark & Hive Tools を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-for-vscode
Hadoop クラスターで Azure HDInsight SDK for Go を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-go-sdk-overview
Azure HDInsight クラスターに Hue をインストールしてアクセスする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-hue-linux
Ambari REST API を使用して HDInsight Hadoop クラスターを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-manage-ambari-rest-api
Mono を使用して Linux ベースの HDInsight で .NET MapReduce ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-migrate-dotnet-to-linux
HDInsight で Oozie ワークフローを定義して実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-use-oozie-linux-mac
HDInsight Spark と HBase 間で Spark HBase Connector を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-using-spark-query-hbase
.NET SDK を使用して Entra 対応 HDInsight クラスターを管理する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-hadoop-cluster-dot-net-sdk
PowerShell を使用して Entra 対応 HDInsight で Hive クエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-apache-hive-queries-using-powershell-on-entra-enabled-hdinsight-cluster
REST API を使用して HDInsight で Hive クエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-apache-hive-queries-using-rest-api
.NET SDK を使用して Entra 対応 HDInsight で Hive クエリを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-hive-queries-using-dot-net-sdk
.NET SDK を使用して Entra 対応 HDInsight に MapReduce ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-jobs-dot-net-sdk
PowerShell を使用して Entra 対応 HDInsight で MapReduce ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-jobs-entra-id-enabled-using-powershell
REST API 経由で Entra 対応 HDInsight の MapReduce ジョブを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-rest-jobs
Livy REST API 経由で Entra 対応 HDInsight に Spark ジョブを送信する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-spark-jobs-using-rest-api
HDInsight Hive で Power BI DirectQuery を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hadoop-connect-hive-power-bi-directquery
Hive Warehouse Connector を使用して Spark と Hive を統合する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector
Hive Warehouse Connector 経由で Spark 操作を実行する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector-operations
Livy 経由で Zeppelin から Hive Warehouse Connector を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector-zeppelin
HDInsight で Hive Warehouse Connector API を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-warehouse-connector-apis
HDInsight で Hive Warehouse Connector 2.x API を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-warehouse-connector-v2-apis
HDInsight Kafka を Azure IoT Hub と統合する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-connector-iot-hub
HDInsight クラスターで Kafka REST Proxy を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/rest-proxy
Azure CLI 経由で HDInsight 上の Kafka REST Proxy を使用する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/tutorial-cli-rest-proxy
Synapse Spark プールを HDInsight 外部 Hive メタストアに接続する	https://learn.microsoft.com/en-us/azure/hdinsight/share-hive-metastore-with-synapse
HDInsight の Spark で Application Insights テレメトリを分析する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-analyze-application-insight-logs
HDInsight Spark を Azure SQL Database に接続する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-connect-to-sql-database
Eclipse から Scala Spark アプリを作成して HDInsight に送信する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-eclipse-tool-plugin
IntelliJ Azure Toolkit を使用して Spark アプリを開発および送信する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-plugin
Livy REST API を使用してリモート Spark ジョブを HDInsight に送信する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-livy-rest-interface
Microsoft Cognitive Toolkit を HDInsight の Spark と統合する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-microsoft-cognitive-toolkit
HDInsight Spark で Azure Machine Learning AutoML を実行する	https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-run-machine-learning-automl
HDInsight Hadoop で Apache Pig ワークロードを実行する	https://learn.microsoft.com/en-us/azure/hdinsight/use-pig

デプロイ

トピック	URL
HDInsight の監視を Azure Monitor Agent (AMA) に移行する	https://learn.microsoft.com/en-us/azure/hdinsight/azure-monitor-agent
Azure Virtual Networks に HBase クラスターをデプロイする	https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-provision-vnet
Azure HDInsight アプリケーションを Azure Marketplace に公開する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-publish-applications
Data Factory を使用してオンデマンドの HDInsight Hadoop クラスターを運用化する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-adf
ARM テンプレートを使用して HDInsight クラスターをデプロイする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-arm-templates
Azure CLI を使用して HDInsight 4.0 クラスターをプロビジョニングする	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-azure-cli
PowerShell スクリプトを使用して Linux HDInsight クラスターを作成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-azure-powershell
Azure REST と ARM テンプレートを使用して HDInsight クラスターを作成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-curl-rest
Azure portal を使用して Linux ベースの HDInsight クラスターを作成する	https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-portal
MirrorMaker 2 を使用して HDInsight Kafka クラスターを移行する	https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-mirror-maker-2
Automation Runbook を使用して HDInsight クラスターをプロビジョニングおよび削除する	https://learn.microsoft.com/en-us/azure/hdinsight/manage-clusters-runbooks