关于 aio
aio-standards 是 AIO 开放标准、基准测试和认证数据的机器可读镜像。它通过实时端点和无需认证的 MCP 服务提供标准、评估项目及证书验证。
主要功能
- 01浏览框架词汇和标准包
- 02获取评估与基准测试项目
- 03提交评估和基准测试运行
- 04签发并验证带签名的证书
- 05访问机器可读标准数据
适用场景
- 01查看标准包中的条款映射
- 02依据 Tier 0 项目评估模型
- 03验证认证记录及签名
- 04为 Agent 测试获取基准项目
MCP 相关
无状态、无需认证的 MCP 服务提供 13 种工具,涵盖标准、论文、基准测试、评估和认证。客户端可获取数据,也可提交评估或基准测试结果。
配置
远程服务无需本地安装。选择你使用的客户端,复制配置或使用一键安装。
https://aioq.org/mcpclaude mcp add --transport http org-aioq-aio https://aioq.org/mcp{"mcpServers":{"org-aioq-aio":{"type":"http","url":"https://aioq.org/mcp"}}}在 Cursor 中打开{"servers":{"org-aioq-aio":{"type":"http","url":"https://aioq.org/mcp"}}}在 VS Code 中打开{"mcpServers":{"org-aioq-aio":{"type":"http","url":"https://aioq.org/mcp"}}}{"mcpServers":{"org-aioq-aio":{"serverUrl":"https://aioq.org/mcp"}}}命令在终端中运行;JSON 粘贴到对应客户端的 MCP 配置后重启。需要授权的服务会在首次连接时提示登录。
工具
23| 参数 | 类型 | 必填 | 说明 |
|---|---|---|---|
| query | string | 是 | 自由文本搜索查询,至少 2 个字符。 |
| perPage | integer | 否 | 结果数量,最多 50 个。 |
详细介绍
aio-standards
由 AIO — AI Integrity Organization 发布的开放标准的机器可读镜像。AIO 是一个在瑞士日内瓦注册为协会的国际标准组织(UID CHE-469.997.903)。
这里的所有内容也都可从 https://aioq.org 实时获取。此仓库的存在,是为了让相同的文件可以被读取、比较差异、引用和纳入项目,而无需依赖 HTTP 端点持续可用。
许可证:CC BY 4.0。 署名格式:
AIO — AI Integrity Organization, https://aioq.org, CC BY 4.0
AIO 衡量的内容
在 AIO 的框架下,AI 完整性有三种不同的失效模式,而 AIO 致力于解决第一种:
- 妥协问题 — 在生成响应的阶段,为了追求特定结果而蓄意或结构性地妥协训练数据和判断标准。
- 使用问题 — 响应进入社会后遭到误解或被不负责任地应用。
- 错误问题 — 系统未能按预期运行。
AIO Framework 将一项判断编码为一行:
C:MED/IXi | V:Bec<Sda | E:Exp<Gui | S:Usr<Pro
上下文,以及该判断背后的价值(V)、**证据(E)和来源(S)**层级,其中 < 表示“优先级低于”。不携带任何用户内容——这行记录的是原因,而非内容。
目录
| 路径 | 内容 |
|---|---|
vocabulary/aio-00011.json | AIO 00011 通用词汇:39 个 V/E/S 代码、上下文轴,以及包含 JSON Schema 的 AIO 20002 记录语法。摘录自 GET https://aioq.org/api/framework/vocabulary。 |
standards-packs/*.json (×15 + EU) | 第 1–3 波正式化草案(draft-unverified — 单轮初稿,双重验证待完成):NIST AI RMF、韩国《AI 框架法》(当前合并版本 법률 제21311호)、CoE《框架公约》(尚未生效 — 仅 EU 批准)、中国《生成式 AI 暂行办法》、EU GPAI 行为准则、OECD AI 原则(2024 年合并版)、加州 TFAIA(SB 53)、中国 AI 内容标识办法、G7 广岛行为准则,以及 UNESCO《人工智能伦理问题建议书》(受许可限制:仅保留简短引文)。每个条目均附有逐字引用的来源引文,并经过机器核验。 |
standards-packs/eu-ai-act-v0.2.json | EU AI Act 的 AIO 正式化版本:按条款进行 V/E/S 映射,每个条目均附有官方文本的逐字引文、理由、检索日期和独立的验证状态。 |
standards-packs/schema.json | 标准包的 JSON Schema。新增规范是数据文件,而非代码。 |
standards-packs/FORMALIZATION_METHODOLOGY.md | 法律文本如何转化为标准包,以及状态等级的含义。 |
item-banks/eu-ai-act.public.json | Tier 0 公开题库 — 12 道题,包含预期答案。请参阅下方说明;这是有意为之。 |
item-banks/agent-track-v0.public.json | Agent 提交的基准测试赛道题库 v0.2 — 315 道二选一困境题(每层 105 道:L2 来源、L3 证据、L4 价值观)。按设计,本题库不提供答案键:每道题都是在两个变量之间二选一,测量结果就是选择分布。review 块记录了产出 v0.2 的六轮质量审查;其中一道题带有明确的 reviewNote。 |
item-banks/eu-ai-act.gateb-commitment.json | 私有 Tier 0 Gate B 题库(96 道题)的承诺哈希:包含每道题的 sha256,以及经 Ed25519 签名的快照哈希。按设计,题目本身保持私有(以随机种子选题的方式提供);任何人都可以借此事后验证,所提供的题目在测试前就已存在。随着题库轮换,已退役题目会在 aioq.org 的 /content/bench-items/eu-ai-act.gateb-retired.json 公开。 |
verify/verify-certificate.mjs | 用于验证已签发证书的独立 Ed25519 验证器。无需 npm 依赖。 |
为什么题库会附带答案键
Tier 0 是基于完全公开题集的自我评估。公布预期层级并非泄题 — 这正是设计初衷。Tier 0 分数只是一个下限,而非能抵抗刷分的测量结果:它记录模型能够按照自己声明的标准作答。隐藏答案键只会制造虚假的严谨感,同时让除 AIO 之外的任何人都无法复现测量结果。抵抗刷分正是更高级别、受监考且使用私有题库的测试所要实现的目标。
实时 API 提供相同题库,但会去除答案键,避免提交流程轻易读回答案:GET https://aioq.org/api/eval/items?pack=eu-ai-act。
“形式化”意味着什么,以及不意味着什么
标准包是 AIO 对外部参考规范进行的自有形式化——以 AIO 词汇表表述对法律文本的解读,使其可以被衡量。它不是该规范本身,不是对该规范的官方解读,也不是在发布该规范的机构参与下制作的。
每个包都带有一个 status,其状态按固定顺序排列:
draft-unverified → draft-verified → rfc → active
欧盟《AI 法案》包目前的状态为 draft-verified:每个映射条目都包含官方文本中的逐字引文和记录在案的检索日期,但该包尚未经过公开 RFC 流程。在状态不是 active 的包上颁发的证书会注明这一事实——字段 basisStatus 位于签名载荷内部,因此事后无法还原。
验证证书
AIO 颁发的证书使用 Ed25519 签名。公钥发布于 https://aioq.org/.well-known/aio-cert-key.json,因此,除获取记录本身之外,验证无需信任甚至无需连接 AIO 服务。
node verify/verify-certificate.mjs AIO-C0-XXXXXXXX
node verify/verify-certificate.mjs AIO-C0-XXXXXXXX --json
node verify/verify-certificate.mjs --file ./saved-response.json --key ./pinned-key.json
退出代码:0 已验证且当前有效 · 1 已验证但已过期或已撤销 ·
2 缺少签名或签名不匹配 · 3 用法或网络错误。
有一条规则至关重要:将 API 响应中的 verification.canonicalPayload 原样作为签名消息。不要重新序列化。它已经是规范形式——仅含已签名字段,键按代码点排序,没有空白——重新序列化通常会导致验证失败。
该脚本还会根据证书自身的字段重新构建该载荷并进行比较,以发现服务端展示一套内容、签署另一套内容的情况。
已验证的签名只能证明 AIO 颁发了这条确切记录。 它并不能说明该模型是否适合安全部署。
实时端点
无需身份验证,CORS 开放,JSON,全部采用 CC BY 4.0 许可。
| 端点 | |
|---|---|
| https://aioq.org/api/openapi.json | OpenAPI 3.1 描述,涵盖以下所有内容 |
GET /api/framework/vocabulary | 此仓库中的词汇表,实时获取 · ?layer=V|E|S · ?format=schema |
GET /api/standards-packs · /{id} | 标准包及其完整的逐条款映射 |
GET /api/eval/items?pack=eu-ai-act | Tier 0 项目,不含答案,并附评分方法 |
POST /api/eval/submit | 提交答案;确定性评分,通过后颁发签名证书 |
GET /api/certifications/registry | 已颁发的所有证书 |
GET /api/certifications/{certId} | 单个证书,附签名检查和离线说明 |
GET /api/certifications/{certId}/badge.svg | 徽章,实时绘制,因此不会失去准确性 |
GET /api/benchmarks/agent-track/items | 此仓库中的 Agent-track 项目库,实时获取 · ?layer=L2|L3|L4 |
POST /api/benchmarks/agent-track/submit | 提交一次运行(需要具有 bench:submit 范围的 Agent 密钥) |
GET /.well-known/aio-cert-key.json | Ed25519 公钥 |
GET /.well-known/mcp/server.json | MCP 服务元数据 |
MCP 服务 — https://aioq.org/mcp,Streamable HTTP,协议 2025-06-18,无状态,无需身份验证。
{ "mcpServers": { "aio": { "type": "http", "url": "https://aioq.org/mcp" } } }
13 个工具:search_atlas、list_papers、get_paper、get_benchmark_distribution、
get_framework_vocabulary、list_standards_packs、get_standards_pack、
register_for_certification、get_eval_items、submit_eval、verify_certification、
get_bench_items、submit_bench_run。
供爬虫和 Agent 使用的索引:https://aioq.org/llms.txt
相关仓库
| 仓库 | |
|---|---|
AI-Integrity/AIO20002 | AIO 20002(推理记录标准)的完整规范,包括说明、示例和测试。此处 vocabulary/aio-00011.json 中的机器可读语法实现了该规范。 |
AI-Integrity/aio-prism-benchmark | PRISM 基准测试——各前沿模型的多层胜率排名。 |
命名约定:AIO<number> 仓库保存单个编号标准的规范;
kebab-case 仓库存放数据、工具和基准测试。
更正
标准、映射或基准测试结果中的错误通过公开 RFC 流程处理,而非私下更正:https://aioq.org/en/rfc。这正是随每个映射条目一同发布溯源信息的意义所在——出现分歧时,应依据引文和日期展开讨论,而不是针对某项断言争论。
欢迎在此提交 Issue 和 Pull Request,以改进镜像本身(修复损坏的文件、过时的快照或验证器错误)。对标准的实质性更改应通过 RFC 流程进行。
法律声明
AIO 认证的是对参考规范的 AIO 自身形式化定义的符合性。证书并不代表颁布该规范的机构予以认可(欧盟不认可、不审查也不参与 EU AI Act 套件),不属于法律符合性评估,也不会据此推定符合任何法规。
联系方式:[email protected] · 网站:https://aioq.org
评论
一个开放协议,规定了 AI 应用如何以统一方式连接外部工具与数据源。客户端负责与模型对话,MCP 服务负责提供工具、资源和提示模板,两者通过标准消息通信,同一个服务可以被不同客户端复用。