我正在使用sklearn
中的分类器处理SVC
奇怪的性能。我决定在皮马印第安人数据集中使用kfold cross validation
。由于我想尝试 SVC 分类器,因此我使用 MinMaxScaler(feature_range=(0, 1))
对数据进行了规范化,以获取 0 到 1 之间的特征值。但是当我运行模型时,我在每折中获得 100% 的准确性,这显然是不可能的。我在代码中寻找任何错误,但没有遇到奇怪的东西。这是我的代码。对这种行为有任何建议吗?
PD:我显然加载了所有需要的库。我从这里下载数据集 https://gist.github.com/ktisha/c21e73a1bd1700294ef790c56c8aec1f 并对其进行解析,以便以后更容易。我错过了一步吗?
col_names = ['pregnant', 'glucose', 'bp', 'skin', 'insulin', 'bmi', 'pedigree', 'age', 'label']
pima = pd.read_csv("pima dataset.txt",names = col_names)
X = pima[col_names].as_matrix()
y = pima.label.as_matrix()
scaler = MinMaxScaler(feature_range=(0, 1))
rescaledX = scaler.fit_transform(X)
# summarize transformed data
np.set_printoptions(precision=3)
#check transformations
print(rescaledX[0:5,:])
X_train, X_test, y_train, y_test = train_test_split(rescaledX,y, test_size = 0.2, random_state =42)
from sklearn.svm import SVC
import random
clf_1 = SVC(random_state = 42) #create a default model
clf_1.fit(X_train, y_train) #fitting the model
r_svc = [random.randrange(1,1000) for i in range(3)] #create a random seed for the 3 simulations.
scores_matrix_clf_1 = []
for i in r_svc:
kf = KFold(n_splits=10, shuffle = True, random_state = i)
kf.get_n_splits(X)
scores = cross_val_score(clf_1, X_train, y_train, cv=kf, n_jobs=-1, scoring = "accuracy")
print(' SCORES FOR EACH RANDOM THREE SEEDS',i)
print('-----------------------------SCORES----------------------------------------')
print(scores, scores.mean())
scores_matrix_clf_1.append(scores)
我得到的输出是这样的:
SCORES FOR EACH RANDOM THREE SEEDS 617
-----------------------------SCORES----------------------------------------
[ 1. 1. 1. 1. 1. 1. 1. 1. 1. 1.] 1.0
SCORES FOR EACH RANDOM THREE SEEDS 764
-----------------------------SCORES----------------------------------------
[ 1. 1. 1. 1. 1. 1. 1. 1. 1. 1.] 1.0
SCORES FOR EACH RANDOM THREE SEEDS 395
-----------------------------SCORES----------------------------------------
[ 1. 1. 1. 1. 1. 1. 1. 1. 1. 1.] 1.0
您的X
(输入数据集(包含您尝试预测的label
列。这称为数据泄漏,几乎总是导致 100% 的准确性,因为您在一列(功能(中为估计器提供了您想要预测的答案。
例:
假设您有一个包含以下特征的数据集:
- 人类身高
- 人体重量
- 人类脚的大小
你想预测sex
.
因此,如果你将height
、weight
、foot size
和sex
作为输入数据集提供给你的模型,并sex
(再次(作为输出向量,它将识别最后一个特征sex
具有最高的系数(权重(,因为它总是"预测"正确的性别。