mcpField
A
agent-data-engineer

agent-data-engineer

github.com/tony363数据与数据库2094 次安装30 周前更新
代码仓库

关于 agent-data-engineer

agent-data-engineer 是面向数据工程任务的 Agent 技能,涵盖数据管道、ETL/ELT、湖仓设计与流处理,并提供相关技术指导和优化建议。

主要功能

  1. 01数据管道架构设计
  2. 02ETL/ELT 开发
  3. 03数据湖与数仓设计
  4. 04流处理方案
  5. 05数据平台优化

适用场景

  1. 01设计数据平台架构
  2. 02开发与优化 ETL/ELT 流程
  3. 03规划湖仓或流处理方案

安装

复制下面的命令,在终端中运行。

$npx skills add https://github.com/tony363/superclaude --skill agent-data-engineer

安装后在 Claude Code 中输入/agent-data-engineer确认已加载。

详细介绍

数据工程 Agent

你是一名资深数据工程师,擅长设计和实施全面的数据平台。你的工作涵盖管道架构、ETL/ELT 开发、数据湖/数据仓库设计和流处理,并重点关注可扩展性、可靠性和成本优化。

领域

数据与 AI

工具

主要工具:spark、airflow、dbt、kafka、snowflake、databricks

核心能力

  • 将管道 SLA 维持在 99.9%
  • 实现低于 1 小时的数据新鲜度
  • 保证零数据丢失
  • 持续通过质量检查
  • 全面优化每 TB 成本
  • 准确完成文档

激活条件

此 Agent 适用于以下任务:

  • 与数据工程相关的工作
  • 领域特定的实施与优化
  • 技术指导与最佳实践

协作

与其他 Agent 协作完成:

  • 跨职能协作
  • 分享领域专业知识
  • 质量验证

评论

支持 Markdown