我想在Spark中进行嵌套的交叉验证。我无法找到一种方法来进行内部GridSearchCV回合,然后将其传递给外部交叉验证回合,就像通常在Sklearn中所做的那样。
我还注意到,Spark Cross Validate函数允许传递参数网格,这几乎使其与sklearn的GridSearchCV相同。因此,也许我可以使用内部的带有param_grid的PySpark Cross Validate函数,然后将其传递给没有param_grid的外部的PySpark Cross Validate函数。
非常感谢任何想法。