关于 Assessment Intelligence
Assessment Intelligence 为教育工作者和学习分析人员提供测评答题数据的心理测量分析。它涵盖题目质量、能力估计、信度、自适应选题和技能掌握情况分析。
主要功能
- 01IRT 题目难度、区分度和猜测参数
- 02估计学生能力
- 03Cronbach’s alpha 和题目总分相关性
- 04自适应选择下一题
- 05贝叶斯技能掌握追踪
- 06标记有失败风险的学习者
适用场景
- 01找出区分度较差的测评题目
- 02超越原始分数估计学生能力
- 03从题库选择下一道题
- 04追踪技能掌握并识别需要支持的学习者
MCP 相关
通过远程 Streamable HTTP 服务向 MCP 客户端提供测评分析工具。使用 OAuth 2.1 认证,支持 PKCE 和动态客户端注册。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
服务地址
https://assessment-intelligence-mcp.saifs.ai/mcp一键复制安装命令
Claude CodeTerminal
claude mcp add --transport http ai-saifs-assessment-intelligence https://assessment-intelligence-mcp.saifs.ai/mcpCursor.cursor/mcp.json
{"mcpServers":{"ai-saifs-assessment-intelligence":{"type":"http","url":"https://assessment-intelligence-mcp.saifs.ai/mcp"}}}在 Cursor 中打开VS Code.vscode/mcp.json
{"servers":{"ai-saifs-assessment-intelligence":{"type":"http","url":"https://assessment-intelligence-mcp.saifs.ai/mcp"}}}在 VS Code 中打开Claude Desktopclaude_desktop_config.json
{"mcpServers":{"ai-saifs-assessment-intelligence":{"type":"http","url":"https://assessment-intelligence-mcp.saifs.ai/mcp"}}}Windsurf~/.codeium/windsurf/mcp_config.json
{"mcpServers":{"ai-saifs-assessment-intelligence":{"serverUrl":"https://assessment-intelligence-mcp.saifs.ai/mcp"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
详细介绍
测评智能分析
对测评答题数据进行心理测量分析:使用项目反应理论分析题目难度、区分度和猜测参数;将真实能力(θ)与测试难度分开;计算 Cronbach’s alpha 信度;进行计算机自适应的下一题选择;并通过贝叶斯知识追踪评估技能掌握情况。标记测量目标错误的题目,以及根据学习轨迹预测可能不及格的学习者。
| 注册名称 | ai.saifs/assessment-intelligence |
| 端点 | https://assessment-intelligence-mcp.saifs.ai/mcp |
| 传输方式 | Streamable HTTP(远程,无需安装) |
| 身份验证 | OAuth 2.1 — PKCE(S256)和动态客户端注册;首次使用时,客户端会打开登录页面 |
| 发布者 | SAIFS AI |
安装
VS Code / GitHub Copilot
将以下内容添加到 .vscode/mcp.json(工作区)或用户级 mcp.json:
{
"servers": {
"saifs-assessment-intelligence": {
"type": "http",
"url": "https://assessment-intelligence-mcp.saifs.ai/mcp"
}
}
}
然后从 MCP 视图启动服务,并在出现提示时登录。
Claude(claude.ai、Desktop)
设置 → 连接器 → 添加自定义连接器,然后粘贴:
https://assessment-intelligence-mcp.saifs.ai/mcp
Claude Code
claude mcp add --transport http saifs-assessment-intelligence https://assessment-intelligence-mcp.saifs.ai/mcp
其他 MCP 客户端
使用 Streamable HTTP 传输方式连接到 https://assessment-intelligence-mcp.saifs.ai/mcp。服务会返回带有
WWW-Authenticate: Bearer … resource_metadata=… 挑战的 401,因此支持 OAuth 的客户端会自动登录。
工具
| 工具 | 功能 |
|---|---|
analyze_assessment | 按题目提供 IRT 参数(难度、区分度、猜测参数),并标记不佳题目。 |
estimate_ability | 估算每位学生的真实能力(θ),并与测试难度分开。 |
assessment_reliability | 计算 Cronbach’s alpha 和题目-总分相关性。 |
adaptive_next_item | 根据当前能力,从题库中选择最合适的下一道题(CAT)。 |
track_mastery | 贝叶斯知识追踪:根据学习记录计算每项技能的掌握概率。 |
flag_at_risk_learners | 标记根据掌握程度/能力轨迹预测可能不及格的学生——用于提供支持,而非排名。 |
explain_item | 说明题目好坏的原因,并提供拟合参数。 |
示例提示词
- “这是这次模拟测验的答题矩阵。哪些题目的区分度为负,应该删除?”
- “估算每位学生在这次测试中的真实能力,而不只是原始百分比。”
- “根据这份技能记录,哪些人有不及格风险?每个人实际掌握了哪些内容?”
支持
评论
支持 Markdown
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。