Entity Identificationn

EntityIdentification

2 組のデータが同じ主体のものであるかを識別します

これは MCP（Model Context Protocol）サーバーです。

データ比較ツール

このツールは、2 組のデータを比較し、値の完全一致と意味的な一致の両方を評価する包括的な方法を提供します。テキストの正規化と言語モデルを活用して、データが同じ主体に由来するかどうかを判定します。

機能

• テキストの正規化：テキストを小文字に変換し、句読点を削除して、空白を正規化します。
• 値の比較：値を直接的および意味的に比較します（リストの場合は順序を無視します）。
• JSON の走査：JSON オブジェクト内の各キーを反復処理し、対応する値を比較します。
• 言語モデルとの統合：生成言語モデルを使用して意味的な類似性を評価し、データが同じ主体のものかどうかを最終判定します。

インストール

このツールを使用するには、必要な依存関係がインストールされていることを確認してください。pip を使用してインストールできます。

pip install genai

使用方法

関数

1. normalize_text(text)：

   • 入力テキストを小文字に変換し、句読点を削除して、空白を正規化します。

2. compare_values(val1, val2)：

   • 2 つの値を完全一致および意味的な観点から比較します。
   • 値がリストの場合、意味的な比較では要素の順序を無視します。

3. compare_json(json1, json2)：

   • 2 つの JSON オブジェクトをキーごとに比較します。
   • 各キーの値を評価するために compare_values を使用します。
   • 言語モデルを統合して意味的な類似性を評価し、最終判定を行います。

例

import json
import genai
import re

# Define your JSON objects
json1 = {
    "name": "John Doe",
    "address": "123 Main St, Anytown, USA",
    "hobbies": ["reading", "hiking", "coding"]
}

json2 = {
    "name": "john doe",
    "address": "123 Main Street, Anytown, USA",
    "hobbies": ["coding", "hiking", "reading"]
}

# Compare the JSON objects
comparison_results = compare_json(json1, json2)

# Generate final matching result
model1 = genai.GenerativeModel("gemini-2.0-flash-thinking-exp")
result_matching = model1.generate_content("综合这些信息，你认为可以判断两个数据来自同一主体吗？"+json.dumps(comparison_results, ensure_ascii=False, indent=4))
print(result_matching.text)

コントリビューション

コントリビューションを歓迎します！Issue を作成するか、プルリクエストを送信してください。

ライセンス

このプロジェクトは MIT ライセンスの下でライセンスされています。詳細については、LICENSE ファイルを参照してください。

お問い合わせ

ご質問やご提案がありましたら、以下までご連絡ください。

• メール：[email protected]
• GitHub：[email protected]。

WeChat