mcpField
A
azure-hdinsight

azure-hdinsight

github.com/microsoftdocs数据与数据库796161 次安装3 天前更新
代码仓库

关于 azure-hdinsight

azure-hdinsight 是面向使用 Azure HDInsight 的 Agent 的指导技能，提供故障排查、架构、安全、配置和部署参考。它结合本地速查内容与联网获取的 Microsoft 文档。

主要功能

  1. 01HDInsight 故障诊断指引
  2. 02集群架构与容量规划
  3. 03安全和配置参考
  4. 04集成与代码模式
  5. 05集群部署和迁移

适用场景

  1. 01排查集群创建或服务故障
  2. 02规划容量、网络和存储
  3. 03配置安全策略与集群设置
  4. 04自动化集群部署或迁移

MCP 相关

该技能可通过 mcp_microsoftdocs 的 microsoft_docs_fetch 获取文档；也可使用 fetch_webpage 作为备用方式。

安装

复制下面的命令，在终端中运行。

$npx skills add https://github.com/microsoftdocs/agent-skills --skill azure-hdinsight

安装后在 Claude Code 中输入/azure-hdinsight确认已加载。

详细介绍

Azure HDInsight 技能

此技能为 Azure HDInsight 提供专业指导，涵盖故障排除、最佳实践、决策、架构与设计模式、限制与配额、安全性、配置、集成与编码模式，以及部署。它结合了本地快速参考内容和远程文档获取功能。

如何使用此技能

重要提示（适用于 Agent）：使用下方的类别索引查找相关章节。对于带有行范围的类别（例如 L35-L120），请使用 read_file 读取指定行。对于带有文件链接的类别（例如 [security.md](security.md)），请使用 read_file 读取链接的参考文件

重要提示（适用于 Agent）：如果 metadata.generated_at 的时间超过 3 个月，请建议用户从仓库拉取最新版本。如果无法使用 mcp_microsoftdocs 工具，请建议用户安装： 安装指南

此技能需要网络访问权限才能获取文档内容：

  • 首选：使用 mcp_microsoftdocs:microsoft_docs_fetch，并将查询字符串设为 from=learn-agent-skill。返回 Markdown。
  • 备用：使用 fetch_webpage，并将查询字符串设为 from=learn-agent-skill&accept=text/markdown。返回 Markdown。

类别索引

类别行说明
故障排除L37-L132诊断并修复 HDInsight 群集问题：创建/身份验证、网络、存储、Ambari/HDFS/Hive/HBase/Kafka/Spark/YARN 问题、性能、磁盘/CPU，以及已知错误代码和解决方法。
最佳实践L133-L174设计、保护、监视、扩展和优化 HDInsight 群集及工作负载（Hadoop、Spark、Hive、HBase、Kafka）的最佳实践，包括存储、迁移和性能优化。
决策L175-L200规划 HDInsight 容量、网络、存储和 VM 大小，并详细介绍 Hadoop、HBase、Kafka、Ambari 和 HDInsight 版本及负载均衡器的迁移/升级路径。
架构与设计模式L201-L215HDInsight 群集架构、安全性、网络、高可用性/灾难恢复、从本地 Hadoop 迁移、共享存储、流式处理设计，以及使用 Ambari/Oozie 的运维管道
限制与配额L216-L225HDInsight 容量限制、节点配置、Kafka 特定限制、元存储约束、日志大小/保留期限，以及如何申请/管理 CPU 核心配额提升。
安全性L226-L269保护 HDInsight 群集：身份和访问（Entra、LDAP、Ranger、RBAC）、网络隔离（NSG、Private Link）、TLS/加密、Kafka/Hive/Spark 安全性，以及安全最佳实践。
配置L270-L326配置和优化 HDInsight 群集：网络/VPN、Ambari/Hive/Spark/HBase 设置、自动缩放、监视/日志记录、SSH/Jupyter/VS Code 访问，以及基于脚本的自定义。
集成与编码模式L327-L394将 HDInsight（Hive、Spark、Kafka、HBase、MapReduce、Sqoop）与工具、SDK、REST/CLI 及 SQL、Cosmos DB、Power BI、IoT 和 Synapse 等外部服务集成的模式和代码示例
部署L395-L408使用门户、CLI、PowerShell、ARM/REST、Data Factory、Marketplace、AMA 和运行手册创建、配置、迁移和自动化 HDInsight 群集（Hadoop、HBase、Kafka）
故障排除
主题URL
解决旧版 HDInsight 映像中的可靠性问题https://learn.microsoft.com/en-us/azure/hdinsight/cluster-reliability-issues
修复 HDInsight ARM 模板中的组件版本验证错误https://learn.microsoft.com/en-us/azure/hdinsight/component-version-validation-error-arm-templates
排查 Azure HDInsight 群集创建错误https://learn.microsoft.com/en-us/azure/hdinsight/create-cluster-error-dictionary
排查安全 HDInsight 群集的身份验证问题https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/domain-joined-authentication-issues
HDInsight 群集因 DomainNotFound 而创建失败时运行诊断脚本https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/sample-script
修复 HDInsight 群集创建期间的 DomainNotFound 错误https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/troubleshoot-domainnotfound
修复 HDInsight 中的 Apache Ambari 目录警报https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-directory-alerts
排查 HDInsight 中 Ambari UI 显示主机和服务已停机的问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-down-hosts-services
修复 HDInsight 上 Apache Ambari UI 的 502 错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-fivezerotwo-error
解决 HDInsight 中的 Apache Ambari 心跳问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-heartbeat-issues
排查 HDInsight 上的 Apache Ambari Metrics Collectorhttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-metricservice-issues
解决 HDInsight 中的 Apache Ambari 过期警报https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-ambari-troubleshoot-stale-alerts
修复 HDInsight 上本地 HDFS 卡在安全模式的问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-hdfs-troubleshoot-safe-mode
修复 HDInsight 群集创建失败的问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-cluster-creation-fails
将服务主体证书转换为 base-64 格式以用于 HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-converting-service-principal-certificate
解决 HDInsight 中 Data Lake 存储文件访问问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-data-lake-files
修复 HDInsight 的 InvalidNetworkSecurityGroupSecurityRules 错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-invalidnetworksecuritygroupsecurityrules-cluster-creation-fails
解决 HDInsight 节点磁盘空间耗尽问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-out-disk-space
修复 HDInsight 中的 Watchdog BUG soft lockup CPU 错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-soft-lockup-cpu
解决 HDInsight 群集中的节点添加失败问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-unable-add-nodes
排查无法登录 HDInsight 群集的问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-troubleshoot-unable-log-in-cluster
管理和排查 HDInsight 中的磁盘空间问题https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-disk-space
解决 HDInsight 中的 InvalidNetworkConfigurationErrorCode 错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-invalidnetworkconfigurationerrorcode-cluster-creation-fails
恢复对加密 HDInsight 群集的 Key Vault 访问权限https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-lost-key-vault-access
修复启动 HDInsight 服务时的端口冲突https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-port-conflict
修复 HDInsight 中“account does not support http”存储错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-wasbs-storage-exception
修复读取 YARN 日志时的无效 BCFile 错误https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/troubleshoot-yarn-log-invalid-bcfile
解决 HDInsight 上的 BindException address-in-use 错误https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-bindexception-address-use
修复 HDInsight 上 HBase hbck 不一致错误https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-hbase-hbck-inconsistencies
排查 HBase 区域服务器 CPU 占用率持续过高的问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-pegged-cpu-region-server
解决 HDInsight 上 Apache Phoenix 的连接问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-phoenix-connectivity
修复 HDP 升级后 Phoenix 视图中缺少数据的问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-phoenix-no-data
修复 HDInsight 上 HBase REST 服务无响应的问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-rest-not-spending
修复 HDInsight 上 HBase Master 启动失败的问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-start-fails
解决连接重置后的存储异常https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-storage-exception-reset
解决 HDInsight 上 hbase hbck 超时问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-timeouts-hbase-hbck
排查 HDInsight 上的 HBase 区域服务器问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/hbase-troubleshoot-unassigned-regions
修复 HDInsight 上 HBase TTL 数据保留问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-data-retention-issues-expired-data
排查 HDInsight 上的 HBase REST API 问题https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-rest-api
访问和解读 HDInsight 上的 YARN 应用程序日志https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-access-yarn-app-logs-linux
在 HDInsight 上启用并收集 Hadoop 堆转储https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-collect-debug-heap-dump-linux
解决 HDInsight 上 Hive 的内存不足错误https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-hive-out-of-memory-error-oom
查找并解决 HDInsight 上的 Hadoop 堆栈跟踪错误https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-stack-trace-error-messages
了解并解决 HDInsight 上的 WebHCat 错误https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-templeton-webhcat-debug-errors
Azure HDInsight 已知问题和故障排除https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues
修复证书轮换后无法访问 Ambari 的问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ambari-access-certificate-issue
解决 HDInsight 5.1 上的 Ambari 用户切换问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ambari-users-cache
从 /tmp 磁盘使用量泄漏问题中恢复 HDInsight 头节点https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-cluster-head-node-unresponsive
缓解 HDInsight 5.1 上 conda 版本回退问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-conda-version-regression
解决 ESP HDInsight 群集上的 Ranger 启动失败问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-known-issues-ranger-cluster-create-failure
诊断 HDInsight 群集上的作业运行缓慢或失败问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-failed-cluster
HDInsight 故障排除指南索引https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-guide
排查 Azure HDInsight 中的 HDFS 问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-hdfs
Azure HDInsight 中常见的 Hive 问题及修复方法https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-hive
排查 Azure HDInsight 中的 YARN 问题https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-troubleshoot-yarn
恢复 HDInsight 上 Ambari Hive View 中的错误消息https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-error-message-hive-view
解决 HDInsight 头节点上的 Hive 日志磁盘空间问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-hive-logs-diskspace-full-headnodes
修复 Zookeeper 问题导致的 Hive View 无法访问问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-inaccessible-hive-view
排查 Hive 联接中的 OutOfMemory GC overhead 错误https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-outofmemory-overhead-exceeded
解决创建 Hive 表时的权限被拒绝错误https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-permission-error-create-table
诊断 HDInsight 中 Hive LLAP 查询性能不佳的问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-query-performance
修复 HDInsight 中 Reducer 缓慢和数据倾斜问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-slow-reducer
排查 HDInsight 中 Apache Tez 应用程序挂起问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-tez-hangs
修复 HDInsight 中运行缓慢或失败的 Ambari Tez Viewhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-tez-view-slow
修复 HDInsight 中 Hive View 查询结果超时问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-view-time-out
更正 HDInsight 上 Zeppelin 解释器中的 Hive JDBC URLhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/interactive-query-troubleshoot-zookeeperhiveclientexception-hiveserver-configs
解决 Ambari Hive View 网关超时异常https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/troubleshoot-gateway-timeout
排查 Hive LLAP 工作负载管理问题https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/troubleshoot-workload-management-issues
解决磁盘已满导致的 Kafka Broker 启动失败问题https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-troubleshoot-full-disk
修复 HDInsight Kafka 错误：故障域不足https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-troubleshoot-insufficient-domains
使用 HDInsight History Server 扩展调试 Spark 应用程序https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-azure-spark-history-server
使用 IntelliJ Azure Toolkit 调试 Spark 作业失败问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-failure-debug
通过 IntelliJ 远程调试 HDInsight 上的 Apache Spark 应用程序https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-plugin-debug-jobs-remotely
使用 YARN 和 Spark UI 调试 HDInsight Spark 作业https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-job-debugging
HDInsight Spark 群集的已知问题和解决方法https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-known-issues
排查运行 24 天后停止的 Spark Streaming 应用程序https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-application-stops
修复 HDInsight 上 Jupyter 404“Blocking Cross Origin API”错误https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-blocking-cross-origin
解决 HDInsight Spark 流处理中出现的 RequestBodyTooLarge 错误https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-event-log-requestbodytoolarge
修复 HDInsight Spark 活动中的 IllegalArgumentExceptionhttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-illegalargumentexception
解决 HDInsight Spark 中的 InvalidClassException 版本不匹配问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-fails-invalidclassexception
修复 HDInsight 上 Spark-Kafka 的 NoClassDefFoundErrorhttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-fails-noclassdeffounderror
通过 Azure Storage 中的大量文件改善 Spark 作业运行缓慢的问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-job-slowness-container
解决 HDInsight Spark 群集中的 OutOfMemoryErrorhttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-outofmemory
解决 HDInsight 上 Spark Thrift 中的 RpcTimeoutException 和 502 错误https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-rpctimeoutexception
排查通过 JDBC/ODBC 和 Thrift 从 HDInsight 下载大型结果的问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-troubleshoot-sparkexception-kryo-serialization-failed
Azure HDInsight 中常见的 Spark 问题及修复方法https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-troubleshoot-spark
调试 WASB 文件操作以排查 HDInsight 存储问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/troubleshoot-debug-wasb
修复 HDInsight 上的 Jupyter Notebook 创建问题https://learn.microsoft.com/en-us/azure/hdinsight/spark/troubleshoot-jupyter-notebook-convert
排查 HDInsight 上的 Apache Oozie 工作流https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-oozie
解决 Azure HDInsight 资源创建容量错误https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-resource-creation-fails
排查 Azure HDInsight 中的脚本操作失败问题https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-script-action
解决 ESP HDInsight 上 Sqoop 导入/导出失败问题https://learn.microsoft.com/en-us/azure/hdinsight/troubleshoot-sqoop
最佳实践
主题URL
使用 Azure Monitor 日志监控 HDInsight 的可用性https://learn.microsoft.com/en-us/azure/hdinsight/cluster-availability-monitor-logs
在 HDInsight 中应用群集管理最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/cluster-management-best-practices
应用 HDInsight Enterprise Security 的通用最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/general-guidelines
规划并执行数据迁移到 Azure HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-data-migration
应用 Azure HDInsight 群集的基础设施最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-infrastructure
为 HDInsight 迁移实施存储最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-storage
使用 Accelerated Writes 优化 HDInsight HBasehttps://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-accelerated-writes
在 HDInsight 上应用 HBase 性能顾问建议https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-advisor
调整 HDInsight 上 Apache Phoenix 的性能https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-phoenix-performance
调整 HDInsight 上 Apache HBase 的性能https://learn.microsoft.com/en-us/azure/hdinsight/hbase/troubleshoot-hbase-performance-issues
使用边缘节点扩展 HDInsight 上的 HiveServer2https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-install-hiveserver2
使用 Apache Ambari 监控 HDInsight 的可用性https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-cluster-availability
使用启用安全传输的存储帐户创建 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-with-secure-transfer-storage
应用适用于 HDInsight 上 Hadoop 的 Linux 专属技巧https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-linux-information
优化 HDInsight 上 Apache Hive 查询的性能https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-optimize-hive-query
监控并优化 HDInsight 群集性能https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-key-scenarios-to-monitor
为 HDInsight 群集计划并应用 OS 修补程序https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-os-patching
应用 HDInsight 群集创建前的最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-overview-before-you-start
根据工作负载模式手动缩放 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-scaling-best-practices
应用 HDInsight 上 Hive 的网关最佳实践https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/gateway-best-practices
在 HDInsight 上运行基于计划的 LLAP 自动缩放https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/llap-schedule-based-autoscale-best-practices
配置 Kafka 分区副本以实现高可用性https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-high-availability
在 HDInsight 群集之间镜像 Kafka 主题https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-mirroring
调整 HDInsight 上 Kafka 的配置以实现最佳性能https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-performance-tuning
配置托管磁盘以扩展 HDInsight 上的 Kafkahttps://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-scalability
将 HDInsight Log Analytics 数据迁移到新表https://learn.microsoft.com/en-us/azure/hdinsight/log-analytics-migration
有效使用 Azure Storage 作为 HDInsight 默认文件系统https://learn.microsoft.com/en-us/azure/hdinsight/overview-azure-storage
在 HDInsight 群集中使用 Data Lake Storage Gen2https://learn.microsoft.com/en-us/azure/hdinsight/overview-data-lake-storage-gen2
优化 HDInsight 上 Apache Spark 作业的性能https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-perf
管理 HDInsight Spark 上 Jupyter 的 Python 包https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-python-package-installation
配置 HDInsight 上的 Spark Streaming 以实现恰好一次处理https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-streaming-exactly-once
优化 HDInsight 上 Apache Spark 群集配置https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-cluster-configuration
优化 HDInsight 上 Spark 的数据处理操作https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-data-processing
优化 HDInsight 上 Apache Spark 的数据存储https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-data-storage
调整 HDInsight 群集上 Apache Spark 的内存使用https://learn.microsoft.com/en-us/azure/hdinsight/spark/optimize-memory-usage
安全管理 HDInsight Spark 上的 JAR 依赖项https://learn.microsoft.com/en-us/azure/hdinsight/spark/safely-manage-jar-dependency
应用 HDInsight 上 Apache Spark 的性能指南https://learn.microsoft.com/en-us/azure/hdinsight/spark/spark-best-practices
使用 SparkCruise 优化 HDInsight 上的 Spark 查询https://learn.microsoft.com/en-us/azure/hdinsight/spark/spark-cruise
决策
主题URL
使用 Azure HDInsight 规划大规模 ETLhttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-etl-at-scale
评估将本地 Hadoop 迁移到 Azure HDInsight 的优势https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-motivation
选择用于自定义 MapReduce 作业的 HDInsight 工具https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-run-custom-programs
选择 HBase 的备份和复制选项https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-backup-replication
将 Apache HBase 群集迁移到 HDInsight 5.1https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-hdinsight-5-1
使用新的存储帐户将 HBase 迁移到 HDInsight 5.1https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-hdinsight-5-1-new-storage-account
将 Apache HBase 群集迁移到较新版本的 HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-new-version
将 HBase 迁移到新版 HDInsight 和新的存储帐户https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-migrate-new-version-new-storage-account
规划 HDInsight 群集容量和性能https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-capacity-planning
规划退役 HDInsight 组件的迁移https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-component-retirements-and-action-required
比较 Azure HDInsight 群集的存储服务https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-compare-storage-options
规划 Azure HDInsight 虚拟网络部署https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-plan-virtual-network-deployment
将 Azure HDInsight 升级到 Apache Ranger 2.3.0https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-ranger-5-1-migration
评估并迁移已退役的 HDInsight 版本https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-retired-versions
为 HDInsight 节点选择合适的 VM 大小https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-selecting-vm-size
规划迁移到较新版本的 Azure HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-upgrade-cluster
确定 HDInsight Interactive Query（LLAP）群集的大小https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-llap-sizing-guide
使用 Kafka MirrorMaker 2.0 进行迁移和复制https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-mirrormaker-2-0-guide
将 Apache Kafka 工作负载从 HDInsight 4.0 迁移到 5.1https://learn.microsoft.com/en-us/azure/hdinsight/kafka/migrate-5-1-versions
将 Apache Kafka 工作负载从 HDInsight 3.6 迁移到 4.0https://learn.microsoft.com/en-us/azure/hdinsight/kafka/migrate-versions
将 HDInsight 群集从 Basic 负载均衡器迁移到 Standard 负载均衡器https://learn.microsoft.com/en-us/azure/hdinsight/load-balancer-migration-guidelines
将 Ambari 配置从 HDInsight 4.x 迁移到 5.xhttps://learn.microsoft.com/en-us/azure/hdinsight/migrate-ambari-recent-version-hdinsight
架构与设计模式
主题URL
使用 Apache Ambari 管理 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/apache-ambari-usage
了解 HDInsight 企业安全包架构https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-architecture
设计将本地 Hadoop 迁移到 HDInsight 的架构https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-architecture
选择 HDInsight 业务连续性架构https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-business-continuity-architecture
了解 HDInsight 高可用性和灾难恢复案例设计https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-high-availability-case-study
了解 HDInsight 高可用性架构组件https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-high-availability-components
在多个 HDInsight 群集之间共享一个 Data Lake Storage 帐户https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-multiple-clusters-data-lake-store
使用 Oozie 将 HDInsight 数据管道投入运营https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-operationalize-data-pipeline
使用 HDInsight 设计可扩展的流式处理架构https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-streaming-at-scale-overview
Azure HDInsight 虚拟网络架构和资源https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-virtual-network-architecture
在 HDInsight 上设计 YARN 中高可用的 Spark Streaming 作业https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-streaming-high-availability
限制与配额
主题URL
查看 Azure HDInsight 服务限制和行为https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-faq
规划 HDInsight 日志大小和保留策略https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-log-management
使用 HDInsight 群集支持的节点配置https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-supported-node-configuration
使用外部元存储并了解 HDInsight 默认元存储限制https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-use-external-metadata-stores
HDInsight 上 Kafka 的限制、配置和行为https://learn.microsoft.com/en-us/azure/hdinsight/kafka/kafka-faq
申请并管理 HDInsight CPU 核心配额提升https://learn.microsoft.com/en-us/azure/hdinsight/quota-increase-request
安全性
主题URL
配置托管标识对 Blob 存储的访问权限，以用于 HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/configure-azure-blob-storage
为 HDInsight 静态数据配置双重磁盘加密https://learn.microsoft.com/en-us/azure/hdinsight/disk-encryption
配置与 Entra Domain Services 集成的 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-configure-using-azure-adds
创建和配置 HDInsight Enterprise Security Package 群集https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-create-configure-enterprise-security-cluster
管理 HDInsight ESP 群集的用户、角色和安全性https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-manage
使用 ESP 为 HBase 配置 Apache Ranger 策略https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-hbase
在 HDInsight ESP 中配置 Apache Ranger Hive 策略https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-hive
使用 ESP 为 Kafka 设置 Apache Ranger 策略https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/apache-domain-joined-run-kafka
为 Azure HDInsight 节点实施传输中加密https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/encryption-in-transit
规划 Azure HDInsight 企业安全选项https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/hdinsight-security-overview
使用 HDInsight Enterprise Security 保护 Oozie 工作流https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/hdinsight-use-oozie-domain-joined-clusters
为 OAuth 和 MFA 设置 Azure HDInsight ID Brokerhttps://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/identity-broker
为 HDInsight 中的 Ranger 和 Ambari 配置 LDAP 同步https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/ldap-sync
管理 HDInsight 上 Entra 域帐户的 SSH 访问权限https://learn.microsoft.com/en-us/azure/hdinsight/domain-joined/ssh-domain-accounts
为 HDInsight Kafka REST Proxy 配置 Private Linkhttps://learn.microsoft.com/en-us/azure/hdinsight/enable-private-link-on-kafka-rest-proxy-hdi-cluster
为 HDInsight 群集实施 Enterprise Security Packagehttps://learn.microsoft.com/en-us/azure/hdinsight/enterprise-security-package
应用 Azure HDInsight 安全和 DevOps 最佳做法https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-on-premises-migration-best-practices-security-devops
管理启用 ESP 的 HDInsight 群集上的 Ambari Views 权限https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-authorize-users-to-ambari
为 HDInsight 实施非交互式 .NET 身份验证https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-create-non-interactive-authentication-dotnet-applications
在 Azure HDInsight 群集中使用托管标识https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-managed-identities
在 NSG 和路由中允许 HDInsight 管理 IPhttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-management-ip-addresses
迁移到 HDInsight 群集配置的精细化基于角色的访问控制https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-migrate-granular-access-cluster-configurations
为 HDInsight 群集启用 Azure Private Linkhttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-private-link
限制 Azure HDInsight 群集的公共连接https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-restrict-public-connectivity
安全轮换 HDInsight 存储帐户访问密钥https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-rotate-storage-keys
使用 HDInsight NSG 服务标记管理流量https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-service-tags
使用 SAS 令牌限制 HDInsight Blob 数据访问https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-storage-sharedaccesssignature-permissions
将 Microsoft Entra 用户同步到 HDInsight ESP 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-sync-aad-users-to-cluster
创建和管理通过 Entra ID 进行身份验证的 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/create-clusters-with-entra
为启用 Entra ID 的 HDInsight 群集配置 ARM 模板https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-entra-id-enabled-azure-hdinsight-clusters-with-arm-templates
通过 REST API 管理启用 Entra ID 的 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-entra-id-enabled-cluster-with-rest-api
为 HDInsight 中的 Hive 配置安全选项https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hdinsight-security-options-for-hive
为 ESP Kafka 群集设置 TLS 和客户端身份验证https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-esp-kafka-ssl-encryption-authentication
为 HDInsight Kafka 配置 TLS 加密和客户端身份验证https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-ssl-encryption-authentication
保护 HDInsight 上 Spark–Kafka 流式集成https://learn.microsoft.com/en-us/azure/hdinsight/kafka/secure-spark-kafka-streaming-integration-scenario
从 HDInsight 获取 OAuth 令牌以访问 Azure 服务https://learn.microsoft.com/en-us/azure/hdinsight/msi-support-to-access-azure-services
应用 HDInsight 的内置 Azure Policy 定义https://learn.microsoft.com/en-us/azure/hdinsight/policy-reference
为 HDInsight ESP 中的 Spark SQL 配置 Ranger 策略https://learn.microsoft.com/en-us/azure/hdinsight/spark/ranger-policies-for-spark
为 Azure HDInsight 网关配置 TLS 版本https://learn.microsoft.com/en-us/azure/hdinsight/transport-layer-security
配置 HDInsight 托管标识以进行 SQL 身份验证https://learn.microsoft.com/en-us/azure/hdinsight/use-managed-identity-for-sql-database-authentication-in-azure-hdinsight
配置
主题URL
在 HDInsight 中配置 Ambari Web UI 自动注销超时https://learn.microsoft.com/en-us/azure/hdinsight/ambari-web-ui-auto-logout
使用 VPN 和 DNS 将 HDInsight 群集连接到本地网络https://learn.microsoft.com/en-us/azure/hdinsight/connect-on-premises-network
在 Azure VNet 中配置 HBase 群集复制https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-replication
使用 HBCK2 修复 HDInsight 上的 HBasehttps://learn.microsoft.com/en-us/azure/hdinsight/hbase/how-to-use-hbck2-tool
查看 HDInsight 4.0 开源组件版本https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-40-component-versioning
查看 HDInsight 5.x 开源组件版本https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-5x-component-versioning
使用 Azure CLI 命令管理 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-command-line
使用 PowerShell 自动化管理 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-powershell
配置和使用 HDInsight 中的空边缘节点https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-use-edge-node
配置 HDInsight 自动缩放策略和限制https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-autoscale-clusters
使用 Ambari 调整 HDInsight 群集设置https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-changing-configs-via-ambari
查看 HDInsight 中捆绑的开源组件和版本https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-component-versioning
配置 Azure HDInsight VS Code 扩展设置https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-config-for-vscode
为 HDInsight 创建和配置 VNet、NSG 和 DNShttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-create-virtual-network
为 HDInsight 群集配置自定义 Ambari 数据库https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-custom-ambari-db
在创建 HDInsight 群集时预加载 Apache Hive 库https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-add-hive-libraries
向现有 HDInsight 群集添加额外的 Azure Storage 帐户https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-add-storage
使用 bootstrap 以编程方式自定义 HDInsight 群集配置https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-customize-cluster-bootstrap
使用脚本操作自定义 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-customize-cluster-linux
使用 SSH 连接到 Azure HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-linux-use-ssh-unix
为 HDInsight 群集操作启用 Azure Monitor 日志https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-oms-log-analytics-tutorial
HDInsight 群集上 Hadoop 服务的端口参考https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-port-settings-for-services
使用多种工具配置和自定义 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-provision-linux-clusters
开发脚本操作以配置 Azure HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-script-actions-linux
配置 SSH 隧道以访问 HDInsight Web UIhttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-linux-ambari-ssh-tunnel
使用 Azure Firewall 保护 HDInsight 出站流量https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-restrict-outbound-traffic
自定义调整 HDInsight 自动缩放高级设置https://learn.microsoft.com/en-us/azure/hdinsight/how-to-custom-configure-hdinsight-autoscale
在 HDInsight 上配置 Apache Hive 复制https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-replication
将 Hive 默认元存储迁移到 HDInsight 上的外部 SQL Databasehttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-default-metastore-export-import
在 HDInsight 中配置 Hive LLAP 工作负载管理池https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-workload-management
在 HDInsight 中使用 Hive LLAP 工作负载管理命令https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/workload-management-commands
在 HDInsight Kafka 中启用自动创建主题https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-auto-create-topics
配置对 HDInsight Kafka 的 VPN 和 VNet 访问https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-connect-vpn-gateway
为 HDInsight Kafka 配置 Azure Monitor 日志https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-log-analytics-operations-management
配置与 HDInsight Kafka 的跨 VNet 连接https://learn.microsoft.com/en-us/azure/hdinsight/kafka/connect-kafka-cluster-with-vm-in-different-vnet
配置客户端与 HDInsight Kafka 的跨 VNet 连接https://learn.microsoft.com/en-us/azure/hdinsight/kafka/connect-kafka-with-vnet
使用 Azure Monitor 为 Azure HDInsight 配置监视和警报https://learn.microsoft.com/en-us/azure/hdinsight/monitor-hdinsight
Azure HDInsight 监视数据参考https://learn.microsoft.com/en-us/azure/hdinsight/monitor-hdinsight-reference
为 HDInsight 配置非 Azure Firewall 网络虚拟设备https://learn.microsoft.com/en-us/azure/hdinsight/network-virtual-appliance
使用 Ambari 配置优化 HBase 性能https://learn.microsoft.com/en-us/azure/hdinsight/optimize-hbase-ambari
通过 HDInsight 中的 Ambari 设置优化 Hive 性能https://learn.microsoft.com/en-us/azure/hdinsight/optimize-hive-ambari
使用 HDInsight 上的 Ambari 调整 Pig 属性https://learn.microsoft.com/en-us/azure/hdinsight/optimize-pig-ambari
通过脚本操作为 HDInsight 上的 AMA 配置选择性日志记录https://learn.microsoft.com/en-us/azure/hdinsight/selective-logging-analysis
使用脚本操作为 HDInsight 群集配置选择性日志记录https://learn.microsoft.com/en-us/azure/hdinsight/selective-logging-analysis-azure-logs
为 HDInsight 虚拟网络配置服务终结点策略https://learn.microsoft.com/en-us/azure/hdinsight/service-endpoint-policies
使用 VS Code HDInsight Tools 设置 PySpark 交互式环境https://learn.microsoft.com/en-us/azure/hdinsight/set-up-pyspark-interactive-environment
配置 HDInsight IO Cache 以加速 Sparkhttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-improve-performance-iocache
高效使用 HDInsight Spark Jupyter 内核https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-jupyter-notebook-kernels
配置 HDInsight 上的 Jupyter 以使用 Maven 包https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-jupyter-notebook-use-external-packages
配置和限定 HDInsight 上的 Spark 依赖项https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-manage-dependencies
调整 HDInsight 群集上的 Spark 资源配置https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-resource-manager
在 Azure HDInsight 上配置 Apache Spark 设置https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-settings
使用 SCP 将文件传输到 Azure HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/use-scp
集成与编码模式
主题URL
在 HDInsight 中使用 SendGrid 配置 Ambari 电子邮件警报https://learn.microsoft.com/en-us/azure/hdinsight/apache-ambari-email
使用 Spark 将数据从 Kafka 流式传输到 Azure Cosmos DBhttps://learn.microsoft.com/en-us/azure/hdinsight/apache-kafka-spark-structured-streaming-cosmosdb
使用 Azure CLI 示例执行常见的 HDInsight 任务https://learn.microsoft.com/en-us/azure/hdinsight/azure-cli-samples
通过 Power Query 将 Excel 连接到 HDInsight Hadoophttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-excel-power-query
使用 JDBC 从 Java 查询 HDInsight Hivehttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-hive-jdbc-driver
通过 ODBC 在 Power BI 中可视化 HDInsight Hive 数据https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-connect-hive-power-bi
在 HDInsight 上将 C# UDF 与 Hive 和 Pig 集成https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-hive-pig-udf-dotnet-csharp
使用 Curl 调用 Hive 的 WebHCat REST APIhttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-curl
使用 HDInsight .NET SDK 提交 Hive 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-dotnet-sdk
使用 Azure PowerShell 运行 HDInsight Hive 查询https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-powershell
使用 Visual Studio Data Lake 工具处理 HDInsight 上的 Hivehttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-hive-visual-studio
使用 Curl 和 WebHCat 向 HDInsight 提交 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-curl
使用 .NET SDK 向 HDInsight 提交 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-dotnet-sdk
使用 Azure PowerShell 运行 HDInsight MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-powershell
通过 SSH 在 HDInsight 上运行 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-mapreduce-ssh
通过 Curl 和 WebHCat 向 HDInsight 提交 Sqoop 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-curl
使用 .NET SDK 在 HDInsight 上运行 Sqoop 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-dotnet-sdk
在 HDInsight Linux 头节点上使用 Sqoop 集成 SQLhttps://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-mac-linux
使用 PowerShell 向 HDInsight 提交 Sqoop 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-use-sqoop-powershell
将 Visual Studio Data Lake Tools 与 HDInsight Hadoop 配合使用https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/apache-hadoop-visual-studio-tools-get-started
配置 Beeline 连接到 HDInsight HiveServer2https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/connect-install-beeline
在 HDInsight 与 Azure SQL Database 之间运行 Sqoop 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/hdinsight-use-sqoop
在 HDInsight 上将 Python UDF 与 Hive 和 Pig 配合使用https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/python-udf-hdinsight
通过 .NET、curl 和 PowerShell 向 HDInsight 提交 Hadoop 作业https://learn.microsoft.com/en-us/azure/hdinsight/hadoop/submit-apache-hadoop-jobs-programmatically
使用 Maven 构建和部署 Java HBase 客户端https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-build-java-maven-linux
使用 Phoenix 和 Zeppelin 运行 HBase SQL 查询https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-phoenix-zeppelin
在 HDInsight 群集上使用 HBase .NET SDKhttps://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-rest-sdk
在 HDInsight 上使用 Phoenix Query Server REST SDKhttps://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-using-phoenix-query-server-rest-sdk
使用 HDInsight .NET SDK 执行群集管理任务https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-administer-use-dotnet-sdk
在 HDInsight 上将 Spark DStreams 与 Kafka 配合使用https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apache-spark-with-kafka
在 Azure HDInsight 上安装自定义 Hadoop 应用程序https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-install-custom-applications
在 HDInsight 中使用 VS Code 的 Spark & Hive Toolshttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-for-vscode
将适用于 Go 的 Azure HDInsight SDK 与 Hadoop 群集配合使用https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-go-sdk-overview
在 Azure HDInsight 群集上安装和访问 Huehttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-hue-linux
使用 Ambari REST API 管理 HDInsight Hadoop 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-manage-ambari-rest-api
使用 Mono 在基于 Linux 的 HDInsight 上运行 .NET MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-migrate-dotnet-to-linux
在 HDInsight 上定义和运行 Oozie 工作流https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-use-oozie-linux-mac
在 HDInsight Spark 与 HBase 之间使用 Spark HBase Connectorhttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-using-spark-query-hbase
使用 .NET SDK 管理启用了 Entra 的 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/manage-hadoop-cluster-dot-net-sdk
使用 PowerShell 在启用了 Entra 的 HDInsight 上运行 Hive 查询https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-apache-hive-queries-using-powershell-on-entra-enabled-hdinsight-cluster
使用 REST API 在 HDInsight 上运行 Hive 查询https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-apache-hive-queries-using-rest-api
使用 .NET SDK 在启用了 Entra 的 HDInsight 上运行 Hive 查询https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-hive-queries-using-dot-net-sdk
使用 .NET SDK 向启用了 Entra 的 HDInsight 提交 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-jobs-dot-net-sdk
使用 PowerShell 在启用了 Entra 的 HDInsight 上运行 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-jobs-entra-id-enabled-using-powershell
通过 REST API 在启用了 Entra 的 HDInsight 上运行 MapReduce 作业https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-map-reduce-rest-jobs
通过 Livy REST API 向启用了 Entra 的 HDInsight 提交 Spark 作业https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-with-entra-authentication/run-spark-jobs-using-rest-api
在 HDInsight Hive 中使用 Power BI DirectQueryhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hadoop-connect-hive-power-bi-directquery
使用 Hive Warehouse Connector 集成 Spark 和 Hivehttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector
通过 Hive Warehouse Connector 运行 Spark 操作https://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector-operations
通过 Livy 在 Zeppelin 中使用 Hive Warehouse Connectorhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/apache-hive-warehouse-connector-zeppelin
在 HDInsight 上使用 Hive Warehouse Connector APIhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-warehouse-connector-apis
在 HDInsight 上使用 Hive Warehouse Connector 2.x APIhttps://learn.microsoft.com/en-us/azure/hdinsight/interactive-query/hive-warehouse-connector-v2-apis
将 HDInsight Kafka 与 Azure IoT Hub 集成https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-connector-iot-hub
在 HDInsight 群集上使用 Kafka REST Proxyhttps://learn.microsoft.com/en-us/azure/hdinsight/kafka/rest-proxy
通过 Azure CLI 在 HDInsight 上使用 Kafka REST Proxyhttps://learn.microsoft.com/en-us/azure/hdinsight/kafka/tutorial-cli-rest-proxy
将 Synapse Spark 池连接到 HDInsight 外部 Hive Metastorehttps://learn.microsoft.com/en-us/azure/hdinsight/share-hive-metastore-with-synapse
使用 HDInsight 上的 Spark 分析 Application Insights 遥测数据https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-analyze-application-insight-logs
将 HDInsight Spark 连接到 Azure SQL Databasehttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-connect-to-sql-database
从 Eclipse 创建 Scala Spark 应用并将其提交到 HDInsighthttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-eclipse-tool-plugin
使用 IntelliJ Azure Toolkit 开发并提交 Spark 应用https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-intellij-tool-plugin
使用 Livy REST API 向 HDInsight 提交远程 Spark 作业https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-livy-rest-interface
将 Microsoft Cognitive Toolkit 与 HDInsight 上的 Spark 集成https://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-microsoft-cognitive-toolkit
在 HDInsight Spark 上运行 Azure Machine Learning AutoMLhttps://learn.microsoft.com/en-us/azure/hdinsight/spark/apache-spark-run-machine-learning-automl
在 HDInsight Hadoop 上运行 Apache Pig 工作负载https://learn.microsoft.com/en-us/azure/hdinsight/use-pig
部署
主题URL
将 HDInsight 监视迁移到 Azure Monitor Agent (AMA)https://learn.microsoft.com/en-us/azure/hdinsight/azure-monitor-agent
在 Azure 虚拟网络中部署 HBase 群集https://learn.microsoft.com/en-us/azure/hdinsight/hbase/apache-hbase-provision-vnet
将 Azure HDInsight 应用程序发布到 Azure Marketplacehttps://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-apps-publish-applications
使用 Data Factory 将按需 HDInsight Hadoop 群集投入运营https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-adf
使用 ARM 模板部署 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-arm-templates
使用 Azure CLI 预配 HDInsight 4.0 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-azure-cli
使用 PowerShell 脚本创建 Linux HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-azure-powershell
通过 Azure REST 和 ARM 模板创建 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-curl-rest
通过 Azure 门户创建基于 Linux 的 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/hdinsight-hadoop-create-linux-clusters-portal
使用 MirrorMaker 2 迁移 HDInsight Kafka 群集https://learn.microsoft.com/en-us/azure/hdinsight/kafka/apache-kafka-mirror-maker-2
通过 Automation runbook 预配和删除 HDInsight 群集https://learn.microsoft.com/en-us/azure/hdinsight/manage-clusters-runbooks

评论

支持 Markdown