xgboost.cv 给出 TypeError: 'StratifiedKFold' object is not iterable

Posted

技术标签:

【中文标题】xgboost.cv 给出 TypeError: \'StratifiedKFold\' object is not iterable【英文标题】:xgboost.cv gives TypeError: 'StratifiedKFold' object is not iterablexgboost.cv 给出 TypeError: 'StratifiedKFold' object is not iterable 【发布时间】:2018-02-01 14:43:35 【问题描述】:

我一直在尝试在 python 2.7 中实现此代码。它给了我这个错误。我会很感激帮助。 我有最新版本的 sklearn(0.18.1) 和 xgboost(0.6)

import xgboost as xgb
from sklearn.model_selection import StratifiedKFold
from sklearn.metrics import f1_score, roc_auc_score, confusion_matrix

nfold = 3
kf = StratifiedKFold(nfold, shuffle=True)

dtrain = xgb.DMatrix(x_train, label=y_train)
dtest = xgb.DMatrix(x_test)

params = 
    'objective' : 'binary:logistic',
    'eval_metric': 'auc',
    'min_child_weight':10,
    'scale_pos_weight':scale,

hist = xgb.cv(params, dtrain, num_boost_round=10000, folds=kf, early_stopping_rounds=50, as_pandas=True, verbose_eval=100, show_stdv=True, seed=0)

我收到此错误:

TypeErrorTraceback (most recent call last)
<ipython-input-52-41c415e116d7> in <module>()
      5     'scale_pos_weight':scale,
      6 
----> 7 hist = xgb.cv(params, dtrain, num_boost_round=10000, folds=kf, early_stopping_rounds=50, as_pandas=True, verbose_eval=100, show_stdv=True, seed=0)
      8 
      9 

/opt/conda/lib/python2.7/site-packages/xgboost/training.pyc in cv(params, dtrain, num_boost_round, nfold, stratified, folds, metrics, obj, feval, maximize, early_stopping_rounds, fpreproc, as_pandas, verbose_eval, show_stdv, seed, callbacks)
    369 
    370     results = 
--> 371     cvfolds = mknfold(dtrain, nfold, params, seed, metrics, fpreproc, stratified, folds)
    372 
    373     # setup callbacks

/opt/conda/lib/python2.7/site-packages/xgboost/training.pyc in mknfold(dall, nfold, param, seed, evals, fpreproc, stratified, folds)
    236         idset = [randidx[(i * kstep): min(len(randidx), (i + 1) * kstep)] for i in range(nfold)]
    237     elif folds is not None:
--> 238         idset = [x[1] for x in folds]
    239         nfold = len(idset)
    240     else:

TypeError: 'StratifiedKFold' object is not iterable

【问题讨论】:

【参考方案1】:

xgb.cv函数内部,尝试替换

folds=kf

folds=list(kf.split(x_train,y_train))

应用split method 是为了将其拆分为训练和验证。然后我们将其转换为list,使其成为可迭代对象。

如果这不起作用,请尝试不使用 list。那就是:

folds=kf.split(x_train,y_train)

【讨论】:

【参考方案2】:

正如错误提示,kf 是一个“StratifiedKFold”对象。

该对象有一个 .split() 方法,该方法将为您提供一个包含不同训练/有效元素索引的生成器。

folds_generator = kf.split(x_train, y_train)

但是,阅读xgb.cv doc,

folds :列表,提供使用预定义 CV 折叠列表的可能性(每个元素必须是测试折叠索引的向量)。当提供折叠时,nfold 和分层参数将被忽略。

folds 需要一个“列表”类型的参数。您可以使用以下代码将生成器转换为列表

folds_list = list(folds_generator)

【讨论】:

以上是关于xgboost.cv 给出 TypeError: 'StratifiedKFold' object is not iterable的主要内容,如果未能解决你的问题,请参考以下文章

为啥 xgboost.cv 和 sklearn.cross_val_score 给出不同的结果?

XGBoost CV 和提前停止

如何使用 lightgbm.cv 进行回归?

Angular给出TypeError:“无法读取未定义的属性'id'”

TypeError:函数中参数的数据位置必须是“内存”,但没有给出

TypeError:convertDocument()采用1个位置参数,但给出了2个[重复]