Loading this page
本页目前为英文。
沉默的日志看起来与良好行为一模一样
自动化决策出现问题时,有人会索要日志。拿到手的是一份来自被审查组织所控制数据库的行列表,任何一行在交付前都可能已被编辑或删除。
没有人会为了说点别的而改写一项令人难堪的决定。他们会直接删掉它。而缺了两周的日志,对于日后打开它的人来说,读起来与代理表现良好的那两周毫无二致。
对导出文件签名无法解决这个问题。签名只能证明您看到的那些行没有被改动,对于您查看之前就被移除的行,它什么也说明不了。
试着破坏它
记录几项决定,改写其中一项,看看会发生什么。这完全在您的浏览器中运行,使用平台所用的同一套公开算法——不会向任何地方发送任何内容,此处的一切也都不是预先准备的。
- 还没有任何决定。按 记录一项决定 开始一条链条。
三个运作部分
本产品不使用机器学习,也不进行任何推断。它按您的代理告知的内容进行记录,并以事后无法被悄然修改的形式保存。
- 01
您的代理进行报告
只需几行 Python 或 TypeScript。SDK 从不阻塞您的代理,也从不悄悄丢弃任何决定——无法送达的内容会作为错误显现,您可以为其设置告警,因为悄无声息的丢失正是本产品存在要防止的故障。
- 02
记录形成链条
每项决定都会与同一代理前一项决定的哈希一起计算哈希。记录在数据库中只能追加,由触发器而非应用代码强制执行——因此对“有人能篡改这个吗?”的回答是“不能”,而不是“我们不这样做”。
- 03
任何人都可以核查
导出决定,并用您自己大约三十行代码重新推导哈希。算法已公开,我们自己的验证器在您的浏览器中运行,因此我们永远看不到您在核查什么。
它拒绝做的事
正是这些决定让记录有了价值。每一项都意味着放弃一项竞争对手乐于卖给您的功能。
- 它不会给您合规评分
- 百分比需要以全部义务为分母,而大多数义务根本无法被日志平台观察到。欧盟《人工智能法》第 14 条要求人类能够对系统进行有效监督。我们能统计有多少决定经过了复核,但无法告诉您复核人员是否理解了他们批准的内容,或他们是否本可以叫停。在那里打上一个绿色对勾,只会给您一种对从未被审计过的控制的文件层面的安慰。
- 它不会为您的系统分类
- 根据《人工智能法》,一个系统是否属于高风险取决于其预期用途和部署环境。我们两者都看不到。自动分配的风险等级将是记录中一个凭空捏造的合规制品,而您日后可能会依赖它,因此该字段在您填写之前会保持未声明状态,并作为一项活跃的缺口被报告。
- 您的卡过期后它不会停止记录
- 数据摄取不受套餐等级限制,也永远不会受限。如果记录因计费失败而停止,您最终会得到一份缺了两周的日志,而这一缺口读起来与您的代理运行正常的那两周毫无二致。在自己造成这种失败的同时,又出售对它的预防,这是站不住脚的。
- 它不会拒绝未注册的代理
- 未知的代理引用会被当场注册,而不是被拒绝,因为被拒绝的决定就是丢失的决定。它会被标记为未声明,并在每次响应中加以提示,直到有人指定所有者和风险等级。
依据您的审计人员将会询问的内容进行评估
每项义务都按照实际能够回答它的人进行分组。我们无法评估的数量与我们能够评估的数量以相同大小显示——这些正是审计人员首先提出的问题,也正是其他每一个仪表板都会隐藏的问题。
EU AI Act
第 12、14、19、26(6) 和 73 条——记录保存、人类监督、日志留存以及严重事件。条例 (EU) 2024/1689。
UK ATRS
算法透明度记录标准(Algorithmic Transparency Recording Standard),第 1 级和第 2 级——指定的所有者、技术规范,以及事件审查所依赖的变更控制。
UK GDPR
第 22 条(关于完全自动化决策)和第 30 条(关于处理活动记录)。我们提供数量;第 22 条是否适用,是对您使用场景的法律判断,我们不作此判断。
ISO/IEC 42001
指向 AI 系统事件日志控制领域的证据。认证由评估管理体系的认可机构授予,绝不由我们授予。
NIST AI RMF
MEASURE 和 MANAGE 功能。该框架是自愿性的、不可认证,因此这证明的是测量而非合规——并不存在可以声称的合规。
您自己的政策
每项决定都可以附带当时生效的政策或提示词版本,从而使行为变化能够与导致它的变更相关联。这正是每次事件后都会提出的问题。
对于以上任何内容,请不要轻信我们的说法
由保存记录的公司运行的验证工具证明力很弱。将任意 AgentAudit 导出文件粘贴到验证器中,改动一个字符,看看它如何准确告诉您哪一项决定在哪个序号上发生了变化。它在您的浏览器中运行;不会向我们发送任何内容。
打开验证器