data-quality-frameworks

データ品質フレームワーク

Great Expectations、dbt テスト、データコントラクトを用いてデータ品質を実装し、信頼性の高いデータパイプラインを確保するための本番運用パターンです。

このスキルを使用する場合

• パイプラインにデータ品質チェックを実装する場合
• Great Expectations による検証をセットアップする場合
• 包括的な dbt テストスイートを構築する場合
• チーム間でデータコントラクトを確立する場合
• データ品質メトリクスを監視する場合
• CI/CD でデータ検証を自動化する場合

このスキルを使用しない場合

• データソースが未定義または利用できない場合
• 検証ルールやスキーマを変更できない場合
• タスクがデータ品質やコントラクトと無関係な場合

手順

• 重要なデータセットと品質ディメンションを特定します。
• 期待値／テストおよびコントラクトルールを定義します。
• CI/CD で検証を自動化し、チェックをスケジュールします。
• アラート、オーナーシップ、修復手順を設定します。
• 詳細なパターンが必要な場合は、resources/implementation-playbook.md を開いてください。

安全性

• フォールバック計画なしに重要なパイプラインをブロックしないでください。
• 検証出力において機密データを安全に取り扱ってください。

リソース

• 詳細なフレームワーク、テンプレート、例については resources/implementation-playbook.md を参照してください。

制限事項

• このスキルは、タスクが上記の範囲に明確に一致する場合にのみ使用してください。
• 出力を、環境固有の検証、テスト、または専門家によるレビューの代替として扱わないでください。
• 必要な入力、権限、安全境界、または成功基準が欠けている場合は、停止して明確化を求めてください。