如何在新数据到来时重新训练 pyspark 中保存的线性回归 ML 模型

Posted 2023-04-15

【中文标题】如何在新数据到来时重新训练 pyspark 中保存的线性回归 ML 模型

【英文标题】：how to re-train Saved linear regression ML model in pyspark when new data is coming

【发布时间】：2017-07-12 07:15:01

【问题描述】：

我使用 pyspark ml 训练了一个 线性回归 模型并保存它。现在我想在新的基础上 重新训练数据批处理..可以吗？？

【参考方案1】：

我不这么认为，你使用 pyspark.ml.regression.GeneralizedLinearRegression 来训练，然后你得到一个 pyspark.ml.regression.GeneralizedLinearRegressionModel，这就是你保存的。 AFIK，模型无法重新拟合，您必须再次使用回归拟合才能获得新模型。