XGBoost

该插件可以调用 XGBoost 库函数,对 DolphinDB 的表执行训练、预测、模型保存和加载。

注意:目前提供两个 xgboost 版本的支持,分别为 1.2 和 2.0,两个版本由于默认参数设置存在差别,计算结果也会有一定差别。

在插件市场安装插件

安装要求

  • DolphinDB Server: 2.00.10 及更高版本

  • 选择与 xgboost 版本相应的 DolphinDB Server。插件对应的 xgboost 版本与 DolphinDB Server 版本的关系对照如下:

    • xgboost 1.2:Linux-X86/Windows-X86-JIT
    • xgboost 2.0:Linux-X86-ABI=1

安装步骤

  1. 在 DolphinDB 客户端中使用 listRemotePlugins 命令查看插件仓库中的插件信息。

    login("admin", "123456")
    listRemotePlugins()
  2. 使用 installPlugin 命令完成插件安装。

    installPlugin("xgboost")
  3. 使用 loadPlugin 命令加载插件。

    loadPlugin("xgboost")

接口说明

xgboost::train

语法

xgboost::train(Y, X, [params], [numBoostRound=10], [xgbModel])

参数

  • Y: 一个向量,表示因变量。
  • X: 一个矩阵或一个表,表示自变量。
  • params: 一个字典,表示 XGBoost 训练所用的参数,详情参考官方文档
  • numBoostRound: 一个正整数,表示 boosting 的迭代次数。
  • xgbModel: 一个 XGBoost 模型,允许继续训练。可以通过 xgboost::train 训练得到模型,或通过 xgboost::loadModel 加载已有模型。

详情

对给定的表调用 XGBoost 库函数进行训练。返回值是训练得到的模型,可以用于继续训练或预测。

xgboost::predict(xgboost 1.2 版本)

语法

xgboost::predict(model, X, [outputMargin=false], [ntreeLimit=0], [predLeaf=false], [predContribs=false], [training=false])

参数

  • model: 用于预测的 XGBoost 模型。可以通过 xgboost::trainxgboost::loadModel 函数得到模型。
  • X: 一个矩阵或一个表,表示用于预测的数据。
  • outputMargin: 一个布尔值,表示是否输出原始的未经转换的边际值(raw untransformed margin value)。
  • ntreeLimit: 一个非负整数,表示预测时使用的树的数量限制(默认值0表示使用所有树)。
  • predLeaf: 一个布尔值。如果为 true,将返回一个形状为(样本数, 树的个数)的矩阵,每一条记录表示每一个样本在每一棵树中的预测的叶节点的序号。
  • predContribs: 一个布尔值。如果为 true,将返回一个形状为(样本数, 特征数+1)的矩阵,每一条记录表示特征对预测的贡献(SHAP values)。所有特征贡献的总和等于未经转换的边际值(raw untransformed margin value)。
  • training: 一个布尔值。表示预测值是否用于训练。

关于以上参数的具体用途说明,参考:官方文档

详情

对给定的表调用 XGBoost 库函数进行预测。

xgboost::predict(xgboost 2.0 版本)

语法

xgboost::predict(model, X, [type=0], [iterationPair], [strictShape=false], [training=false])

参数

  • model: 用于预测的 XGBoost 模型。可以通过 xgboost::train 或 xgboost::loadModel 函数得到模型。
  • X: 一个矩阵或一个表,表示用于预测的数据。
  • type: 一个整型,可以为 0-6。具体含义为 0:normal prediction,1:output margin,2:predict - contribution,3:predict approximated contribution,4:predict feature interaction,5:predict approximated feature interaction,6:predict leaf "training"。
  • iterationPair: 一个整型数据对,第一个数字为开始的迭代次数,第二个数字为结束的迭代次数。
  • strictShape: 一个布尔值,指示是否要以严格规则输出结果。
  • training: 一个布尔值。表示预测值是否用于训练。

关于以上参数的具体用途说明,参考:官方文档

详情

对给定的表调用 XGBoost 库函数进行预测。

xgboost::saveModel

语法

xgboost::saveModel(model, fname)

参数

  • model: 用于保存的 XGBoost 模型。
  • fname: 一个字符串,表示保存的路径。

详情

将训练得到的 XGBoost 模型保存到磁盘。

xgboost::loadModel

语法

xgboost::loadModel(fname)

参数

  • fname: 一个字符串,表示模型所在的路径。

详情

从磁盘上加载 XGBoost 模型。

使用范例

loadPlugin("xgboost")

// 创建训练表
t = table(1..5 as c1, 1..5 * 2 as c2, 1..5 * 3 as c3)
label = 1 2 9 28 65

// 设置模型参数
params = {objective: "reg:linear", max_depth: 5, eta: 0.1, min_child_weight: 1, subsample: 0.5, colsample_bytree: 1, num_parallel_tree: 1}

// 训练模型
model = xgboost::train(label, t, params, 100)

// 用模型预测
xgboost::predict(model, t)

// 保存模型
xgboost::saveModel(model, "001.model")

// 加载模型
model = xgboost::loadModel("001.model")

// 在已有模型的基础上继续训练
model = xgboost::train(label, t, params, 100, model)