本节摘要:标准把「应当公平安全」翻译成过程、术语、测试与管理体系。ISO/IEC 的人工智能管理体系与风险管理、IEEE 的伦理相关标准、Partnership on AI 等联盟的最佳实践,通常是自愿的,但会通过认证、保险、供应链合同变成硬约束。最佳实践包括影响评估、红队、模型卡与数据说明书、事件响应。标准的陷阱是认证化:文件齐了,闸还是按不下去。
阅读完本节,你应当能够:
采购官无法把 UNESCO 全文写进验收。他们需要:你是否有风险管理过程、是否做了公平切片、日志留多久、事故几小时内通报。ISO/IEC 42001 类管理体系要求组织建立方针、角色、风险评估、持续改进——它管的是「你们有没有一套活的系统」,不是某一个模型的 AUC。23894 把 AI 风险过程说清楚。产品侧还需要针对鲁棒、质量、透明的测试方法,否则管理体系会空转。
IEEE 等机构在伦理设计、透明、偏见方面有系列工作。Partnership on AI 在 2016 年后把公司与公民社会拉到最佳实践对话。它们不代替法律,但给「同行认为像样」提供参照。FATML 社区则把公平问责透明做成可发表的技术问题,使标准有文献可引。
模型卡:预期用途、限制、切片指标、评估数据。数据说明书:来源、授权、已知偏、敏感字段。影响评估:对人的权利与安全的合理可预见伤害。红队报告:滥用与对抗的尝试结果(不含可复制利用细节的对外版)。事件手册:谁关停、谁通知用户与监管。
| 文件 | 读者 | 失败的写法 |
|---|---|---|
| 模型卡 | 部署者与审计 | 只写亮点指标 |
| 数据说明书 | 训练与法务 | 来源写成「公开收集」四字 |
| 影响评估 | 伦理委员会 | 复制原则清单无场景 |
| 红队摘要 | 安全与产品 | 全是通过,没有发现 |
| 事件手册 | 值班 | 只有公关口径 |
⚠️ 常见坑:把认证当盾。审核员看抽样文件,看不到你有没有否决过业务。内部必须另有「否决记录」指标。
💡 关键直觉:标准的价值是让不同公司的评估能互相对照。没有度量的「负责任 AI」无法进入供应链。
合同可验证条款示例 须提供按敏感群体切片的错误率 须保留决策日志不少于约定期限 须具备经演练的关停与回滚 高风险用途变更须重新评估 发现系统性偏见须暂停扩张直至修复
标准滞后技术是常态。生成式爆发后,水印、版权、提示注入一度没有成熟标准。这时最佳实践与临时指引要上场,并明确「临时」的复审日期,避免临时措施变成永久漏洞。参与标准制定也是能力:大公司若只把对自己有利的测量写进标准,独立研究者与中小企业要发出声音,否则标准会被捕获。
按风险裁剪:低风险产品用模型卡与最小日志;高风险要么别做,要么把评估做成开源清单的子集。监管与采购应允许分级证据,避免只有巨头买得起门票。这是政策问题,也是大厂供应链该不该转嫁全部成本的问题。
模型卡要写预期用途、限制、切片、评估数据,失败写法是只报亮点。数据说明书要写来源授权、已知偏、敏感字段,失败写法是「公开收集」四字。影响评估要针对场景伤害,失败写法是复制原则清单。红队对外版不写利用细节,但必须有发现,全是通过的红队不可信。事件手册要有关停命令而不只是公关口径。这些文件是标准连接法律与工程的中间件。
认证化陷阱:文件齐了,闸按不下去。内部要用「否决记录」检验治理是活的。标准滞后时,水印、提示注入、版权一度没有成熟条款,临时指引必须写复审日。中小团队按风险裁剪:低风险用模型卡与最小日志;高风险要么别做,要么用开源清单的子集。采购应允许分级证据,避免只有巨头买得起门票。参与标准制定时警惕测量被写成只对最大玩家有利。IEEE 伦理设计系列与 Partnership on AI 的实践对话,提供「同行认为像样」的参照,仍须落到可验证条款:切片错误率、日志期限、关停演练、用途变更重评。
管理体系标准管过程是否存在,产品测试标准管这一版本是否过线。两者缺一,投标书会露馅。把 42001 当内控骨架,把公平与鲁棒测试当版本成绩单,再把成绩单钉进合同,标准才开始工作。
标准在原则与合同中间:采购官要的是可验证条款,不是 UNESCO 全文。先分清两类标准——管理体系管「有没有活的过程」,产品测试管「这一版本过不过线」。缺测试,42001 会空转;缺过程,一次过线的切片表明年会烂。然后按风险裁剪交付物:低风险至少模型卡与最小日志;高风险加上数据说明书、影响评估、红队摘要、经演练的事件手册。中小团队做不起全套认证时,用开源清单子集,不要假装巨头流程,也不要在高风险场景用「我们很小」当豁免。
| 空洞档 | 文件还在 | 闸门状态 | 纠偏 |
|---|---|---|---|
| 认证盾 | 证书齐 | 从未否决过功能 | 否决记录列为认证陪绑指标 |
| 亮点卡 | 模型卡有准确率 | 无限制、无切片 | 验收拒收无切片卡 |
| 四字来源 | 数据说明书存在 | 「公开收集」 | 写授权、已知偏、敏感字段 |
| 原则评估 | 影响评估很长 | 无本场景伤害 | 按图钉重写 |
| 全通过红队 | 报告很厚 | 零发现 | 视为不可信,重做 |
| 公关手册 | 有事件文档 | 无关停命令 | 值班演练关停 |
治理检查项:合同是否写成切片错误率、日志留存期限、关停演练、用途变更重评;临时指引(水印、提示注入、版权)是否写复审日;供应商是否被要求同样交付物;标准制定场合是否发出过与巨头不同的测量主张。反例:把认证当盾而内部无否决;临时措施变成永久漏洞;采购只认巨头买得起的门票。IEEE 伦理设计与业界联盟实践是「同行认为像样」的参照,仍须落到可验证条款才进入供应链。
标准采用决策树 要过采购 ──► 合同写度量,不写形容词 要建内控 ──► 管理体系 + 版本测试两张成绩单 标准滞后 ──► 临时指引 + 复审日 高风险但团队小 ──► 清单子集,否则别做 认证已拿 ──► 检查否决记录,无则空洞
下一节进入公司内部:委员会、红队与否决权如何对抗 KPI。
模型卡失败写法是只报亮点准确率,合格写法含预期用途、限制、切片、评估数据来源。数据说明书失败写法是「公开收集」四字,合格写法含授权、已知偏、敏感字段。影响评估失败写法是复制原则清单,合格写法针对本场景图钉。红队对外版不写利用细节,但必须有发现,全是通过视为不可信。事件手册必须有关停命令与演练记录,只有公关口径不合格。五份钉进合同的可验证条款:按敏感群体切片的错误率、日志留存期限、关停与回滚演练、高风险用途变更重评、发现系统性偏见须暂停扩张。
管理体系与产品测试两张成绩单都要。认证陪绑否决记录,防止文件齐闸门死。标准滞后时临时指引写复审日,避免水印或提示注入的临时措施变成永久漏洞。中小团队:低风险用模型卡与最小日志;高风险要么别做,要么用开源清单子集。采购应允许分级证据,避免只有巨头买得起门票。供应商被要求同样交付物,否则供应链把形容词又传回来。参与标准制定时警惕测量只对最大玩家有利。IEEE 与业界联盟提供参照,仍须落到度量才进入供应链。把形容词从验收条款里删掉。
空洞合规的最快自检:上一个被标准挡住的发布是哪一次。没有,认证就是盾。把 42001 当内控骨架,把公平与鲁棒测试当版本成绩单,再把成绩单钉进合同,标准才开始工作。
合同验收现场只认四类数字:切片错误率、日志留存天数、关停演练日期、用途变更后的重评日期。缺数字的条款视为形容词,评标不得给分。生成式临时指引(标识、提示注入、版权)必须写复审日,过期未审视为控制失效。中小供应商若被要求与巨头同一套认证门票,采购方应允许分级证据,否则标准本身在制造向下竞争的另一种形态:只有买得起合规工业的人能进场。把这三条写进招标文件,标准才从书架走进验收室。
工作纸:模型卡、数据说明书、影响评估、红队摘要、事件手册五份是否存在,各用失败写法对照一遍。合同条款是否写成可验证度量。认证有无「否决记录」陪绑,防止文件齐闸门死。临时指引复审日写在日历。中小团队按风险裁剪而不是假装巨头流程。管理体系与版本测试两张成绩单是否齐全。供应商是否被要求同样交付物。把形容词从验收条款里删掉,换成切片错误率、日志期限、关停演练、用途变更重评。
下一节进入公司内部:委员会、红队与否决权如何对抗 KPI。