萨姆兰德·哈桑Samrand Hassan

研究 · 2025 – 2026

依赖升级下的静默排序变化

一项受控研究:NumPy、SciPy、pandas 和 PyTorch 升级会对推荐结果产生什么影响——201 个案例、四种机制、无质量损失。

在完全不变的 ALS 推荐器下(相同数据、种子、初始因子与参数),将 NumPy 从 2.0.2 升级到 2.1.3,使一台机器上 8.5% 测试用户的 top-10 列表发生了变化,而系统没有任何报错。在另外两种处理器上,同样的升级得到了完全相同的模型。

发现

201 个案例中:164 个检查点完全一致,14 个发生静默变化(其中 9 个改变了 top-10 列表),16 个出现可见的运行时失败,质量退化或契约违规为 0。每一个静默变化都可以追溯到经干预实验确认的四种机制之一;数值差异的大小并不能预测列表是否改变。

联系我

合作研究、学术报告,或一个棘手的工程难题——欢迎来信。