実際にランダムフォレストを使って、品質検査にかかる時間予測モデルを作成していきます。
フロー
参考:
https://www.kaggle.com/wti200/xgboost-with-one-hot-encoding-r
https://www.kaggle.com/rsakata/xgboost-private-lb-0-55290
# ライブラリの読み込み
library(data.table)
library(dplyr)
library(ggplot2)
library(randomForest)
# データの読み込み
data <- fread("./data/case09_train.csv", showProgress = FALSE, data.table = FALSE)
# IDは除外
data <- select(data, -ID)
# カテゴリデータをダミー変数に置き換え
feature.names <- names(data)[2:ncol(data)]
for (f in feature.names) {
if (class(data[[f]])=="character") {
levels <- unique(c(data[[f]]))
data[[f]] <- as.integer(factor(data[[f]], levels=levels))
}
}
model.dat <- data
# トレーニング用にサンプルをランダムに抽出
train.index <- sort(sample(1:nrow(model.dat), size = 3500))
# モデリング用と検証用にデータセットを分離
train <- model.dat[train.index,]
test <- model.dat[-train.index,]
ランダムフォレストでモデリング
# この処理は時間がかかります
# チューニング
train.tune <- tuneRF(train[,feature.names], train$y, doBest = T)
## mtry = 125 OOB error = 82.9232
## Searching left ...
## mtry = 63 OOB error = 80.02744
## 0.03492105 0.05
## Searching right ...
## mtry = 250 OOB error = 85.75405
## -0.03413814 0.05
# モデリング
train.rf <- randomForest(y ~., data = train, mtry = train.tune$mtry )
# 検証用データにモデルを適用
test$pred <- predict(train.rf, test)
ggplot(test, aes(x = pred, y = y)) +
geom_point(alpha = 0.6)
「データから価値を創造する」一般社団法人データマーケティングラボラトリー
Copyright© DML All Rights Reserved.