使用了大语言模型的 AI...

使用了大语言模型的 AI 应用其实更需要建立较广泛的自动化回归测试集。因为大模型本身有相当的随机性和不确定性，即使把温度设为 0。同时不同版本之间的行为细节也容易有较大差异，不同厂商的模型之间的差异就更大了。时不时会抽风。当然，也正因为随机性，会让这样的测试集较难构建，需要在检查期望结果时有一定的弹性。不少人喜欢用大模型来回归和检查大模型的结果。大语言模型 自动化测试 AI创造营