全部文章

我们如何检验 Stabileo 的结果,以及检验止步于何处

求解器、形式化验证与 AI:我们如何查找 Stabileo 所给数值中的错误,证书证明了什么,以及哪些事情是任何验证都无法保证的。

结构分析程序可能在没有任何明显迹象的情况下给出错误的数值。过去几周,我们用若干种相互独立的方式测试了 Stabileo 的每一个部分,发现了几十个真实存在的缺陷,其中许多偏于不保守,并已修复了大部分。每个缺陷都经过分级处理;如果可能影响了已被采用的结果,就会作为公告发布,并说明在此期间应采取的措施;还有一些仍在分级处理中。本文说明我们如何查找这些缺陷,随结果附带的证书证明了什么,以及同样坦率地说明,哪些事情不在任何验证的范围之内。

一个计算引擎

求解器用 Rust 编写并编译为 WebAssembly:它运行在用户自己的计算机上,无需安装,也不会把模型发送到任何服务器。它与持续集成中运行的是同一份代码。2026 年 10 月,我们移除了那些在引擎不可用时悄悄取而代之的并行 TypeScript 计算:现在应用会如实告知,而不是用未经验证的副本继续计算。

查找错误的五种方式

没有任何单一测试能找出所有错误,因此我们采用几种失效方式各不相同的测试:

  • 与其他程序对比。同样的模型,包括固定的模型和每晚随机生成的模型,分别用 OpenSees、Code_Aster、Frame3DD、PyNite、MYSTRAN、Kratos 和 CalculiX 求解。每一处差异都要追查,直到弄清是我们的错误,还是两个程序对该情形的建模方式不同。
  • 已发表的参考解。一套验收算例,其结果由作者本人发表,而不是出自另一个商业程序,容差由原文所印的精度确定。设计验算与已发表的算例进行对比(INTI-CIRSOC、AISC 等)。
  • 物理不变量。对模型进行旋转、镜像或重新编号,或者改变其单位,答案必须恰如物理规律所要求的那样变化;叠加原理、互等定理和能量平衡必须成立。这些测试完全不需要参考数值。
  • 推导。框架单元矩阵从基本原理出发进行符号推导,并与代码中的逐项比较;对于其他单元,则有书面推导供另一位工程师审阅。
  • 模糊测试和变异测试。数以百万计的生成输入用于查找崩溃和非有限结果,同时有意在代码中引入错误,以检查测试能否发现。
项目数量
对比中使用的独立有限元程序7
有已发表结果的验收算例12
这些算例中已发表的参考数值105
其公理由持续集成检查的 Lean 定理37
验证工作的一些数据,来自代码仓库中的文档。

证书:附带误差界限的结果

对于支持的结果,Stabileo 还会在后台尝试生成证书:用区间算术计算出的界限,其中包含它所求解的方程组的精确解。无法生成时,结果会被标记为未经认证,并说明原因。该界限针对的是数值误差,而不是网格或时间步的离散误差。对于线性分析、组合、模态分析和塑性倒塌,该界限的核心数学已在 Lean 中得到证明,Lean 是一种由计算机检查每一步的证明助手;有些步骤(约束、模态检查的一个条件)尚未形式化。P-Delta、谱分析、谐波分析和时程分析也有证书,但其数学尚未在 Lean 中形式化。持续集成会拒绝任何不完整的证明或新增的公理,而对于某些类型的证书,实际运行的检查器正是这些证明所针对的 Lean 代码本身。

Stabileo 基础模式,门式刚架示例已求解。结果面板显示节点位移,并在“结果检查”下显示“已认证:位移误差 ≤ 3.41e-16”及证书下载链接,以及“已端到端检查:对模型的独立重新装配与之一致”。
一个已求解的框架:证书给出的位移误差界限,以及“结果检查”下的端到端检查。

证书没有说明的事情

  • 证书限定的是按已装配的方程组求解时的误差。它并不证明这个方程组代表了模型:刚度矩阵和荷载的装配以上述方式进行测试,但并未认证。当缺少扭转屈曲时(SA-2026-007),证书认证的是错误的问题。自 0.3.0 起,端到端证书会对框架和桁架独立地重新装配方程组,并对照模型本身检查结果;壳、实体和连接件尚未覆盖。
  • Lean 证明的是数学;Rust 代码是否精确实现了该算法并未得到证明,只有本身就是 Lean 代码的检查器除外。
  • 经认证的设计验算用区间算术计算其公式,但公式本身并未形式化:凡有已发表算例的,就与之对比,各规范的覆盖范围(哪些条文、哪些算例)见成熟度矩阵。砌体、连接、基础和正常使用极限状态尚未认证。
  • 对程序的任何验证都不能验证模型。荷载、支座和理想化是工程师的决定;模型审查会就常见错误发出警告,但不能取代判断。
  • 目前尚未经过持证结构工程师的独立审查。CIRSOC 301 的结果仍标注为实验性。

AI 起草和审查,但不做计算

AI 助手根据描述起草模型,并审查现有模型,但它不计算结果:数值来自求解器和应用的设计验算模块。它的解释是语言模型生成的文本,可能出错;有意义的是结果中的数值。在应用某项修改之前,它会显示将要修改的内容,并且可以一步撤销。AI 功能会把描述和模型发送到查询语言模型的服务器;求解器、结果和检查则不需要它,可以离线工作。

出现故障时

可能已影响到已被采用结果的缺陷,会作为安全公告发布,说明如何识别受影响的模型以及在此期间该怎么做;其他安全缺陷正在分级处理,达到标准时再补充发布。待处理的公告在修复上线 stabileo.com 之后关闭。

全部文章

继续阅读