python实现K折交叉验证

作者:Jepson2017 时间:2023-06-08 18:49:01 

本文实例为大家分享了python实现K折交叉验证的具体代码,供大家参考,具体内容如下

用KNN算法训练iris数据,并使用K折交叉验证方法找出最优的K值


import numpy as np
from sklearn import datasets
from sklearn.neighbors import KNeighborsClassifier
from sklearn.model_selection import KFold # 主要用于K折交叉验证

# 导入iris数据集
iris = datasets.load_iris()
X = iris.data
y = iris.target
print(X.shape,y.shape)

# 定义想要搜索的K值,这里定义8个不同的值
ks = [1,3,5,7,9,11,13,15]

# 进行5折交叉验证,KFold返回的是每一折中训练数据和验证数据的index
# 假设数据样本为:[1,3,5,6,11,12,43,12,44,2],总共10个样本
# 则返回的kf的格式为(前面的是训练数据,后面的验证集):
# [0,1,3,5,6,7,8,9],[2,4]
# [0,1,2,4,6,7,8,9],[3,5]
# [1,2,3,4,5,6,7,8],[0,9]
# [0,1,2,3,4,5,7,9],[6,8]
# [0,2,3,4,5,6,8,9],[1,7]
kf = KFold(n_splits = 5, random_state=2001, shuffle=True)

# 保存当前最好的k值和对应的准确率
best_k = ks[0]
best_score = 0

# 循环每一个k值
for k in ks:
   curr_score = 0
   for train_index,valid_index in kf.split(X):
       # 每一折的训练以及计算准确率
       clf = KNeighborsClassifier(n_neighbors=k)
       clf.fit(X[train_index],y[train_index])
       curr_score = curr_score + clf.score(X[valid_index],y[valid_index])

# 求一下5折的平均准确率
   avg_score = curr_score/5
   if avg_score > best_score:
       best_k = k
       best_score = avg_score
   print("current best score is :%.2f" % best_score,"best k:%d" %best_k)

print("after cross validation, the final best k is :%d" %best_k)

python实现K折交叉验证

来源:https://blog.csdn.net/d1240673769/article/details/103483845

标签:python,交叉验证
0
投稿

猜你喜欢

  • Python使用enumerate获取迭代元素下标

    2023-03-05 01:46:31
  • Python验证码识别的方法

    2023-05-30 10:22:39
  • python3.X 抓取火车票信息【修正版】

    2022-01-26 01:24:53
  • mysql到oracle的移植

    2011-01-29 16:23:00
  • centos7中如何利用crontab进行mysql定时备份

    2024-01-28 00:50:34
  • vue中的路由传值与重调本路由改变参数

    2024-04-27 16:10:12
  • SQL Server数据库实用小技巧集合

    2008-11-25 11:35:00
  • Pygame Surface创建图像的实现

    2023-07-10 13:44:26
  • Java基于redis和mysql实现简单的秒杀(附demo)

    2024-01-16 16:55:13
  • Javascript——浅析注册事件

    2008-08-19 12:44:00
  • PHP生成sitemap.xml地图函数

    2024-06-05 09:23:16
  • 用vuex写了一个购物车H5页面的示例代码

    2024-05-08 10:43:09
  • 基于Go语言实现选择排序算法及优化

    2024-04-26 17:36:34
  • DD_belatedPNG,解决IE6不支持PNG绝佳方案

    2009-04-27 16:30:00
  • MySQL中进行跨库查询的方法示例

    2024-01-26 10:27:39
  • javascript实现tab响应式切换特效

    2024-02-25 00:13:12
  • asp两组字符串数据比较合并相同数据

    2011-04-14 11:08:00
  • 我们用什么来衡量设计3:定量研究的风险

    2009-07-19 14:14:00
  • 在python中计算ssim的方法(与Matlab结果一致)

    2023-08-19 03:33:21
  • python爬虫之scrapy框架详解

    2023-08-23 13:16:52
  • asp之家 网络编程 m.aspxhome.com