关于 spark-sql-optimizer
面向 Spark SQL 优化的数据流水线技能，提供指导建议、生成代码与配置，并依据常见标准验证输出。
主要功能
- 01分步优化指导
- 02数据流水线最佳实践
- 03生成代码与配置
- 04依据常见标准验证
适用场景
- 01优化 Spark SQL 任务
- 02生成流水线配置
- 03按标准检查输出
安装
复制下面的命令，在终端中运行。
$
npx skills add https:/安装后在 Claude Code 中输入/spark-sql-optimizer确认已加载。
详细介绍
Spark Sql Optimizer
概述
此技能可为 Data Pipelines 领域中的 spark sql optimizer 任务提供自动化协助。
适用场景
在以下情况下，此技能会自动启用：
- 在请求中提到“spark sql optimizer”
- 询问 spark sql optimizer 模式或最佳实践
- 需要数据管道技能方面的帮助，涵盖 etl、数据转换、工作流编排和流数据处理。
说明
- 提供有关 spark sql optimizer 的分步指导
- 遵循行业最佳实践和模式
- 生成可用于生产环境的代码和配置
- 根据通用标准验证输出
示例
示例：基本用法 请求：“帮我处理 spark sql optimizer” 结果：提供分步指导并生成适当的配置
前提条件
- 已配置相关开发环境
- 可访问所需工具和服务
- 对数据管道概念有基本了解
输出
- 生成的配置和代码
- 最佳实践建议
- 验证结果
错误处理
| 错误 | 原因 | 解决方案 |
|---|---|---|
| 配置无效 | 缺少必填字段 | 查阅文档，了解必需参数 |
| 未找到工具 | 未安装依赖项 | 按照前提条件安装所需工具 |
| 权限被拒绝 | 访问权限不足 | 验证凭据和权限 |
资源
- 相关工具的官方文档
- 最佳实践指南
- 社区示例和教程
相关技能
属于 Data Pipelines 技能类别。 标签：etl、airflow、spark、streaming、data-engineering
评论
支持 Markdown