我正在尝试以下代码,发现StandardScaler(or MinMaxScaler)
和Normalizer
从sklearn
处理数据的方式非常不同。这个问题使管道建设更加困难。我想知道这种设计差异是否是有意的。
from sklearn.preprocessing import StandardScaler, Normalizer, MinMaxScaler
对于Normalizer
,数据是"水平"读取的。
Normalizer(norm = 'max').fit_transform([[ 1., 1., 2., 10],
[ 2., 0., 0., 100],
[ 0., -1., -1., 1000]])
#array([[ 0.1 , 0.1 , 0.2 , 1. ],
# [ 0.02 , 0. , 0. , 1. ],
# [ 0. , -0.001, -0.001, 1. ]])
对于StandardScaler
和MinMaxScaler
,数据是"垂直"读取的。
StandardScaler().fit_transform([[ 1., 1., 2., 10],
[ 2., 0., 0., 100],
[ 0., -1., -1., 1000]])
#array([[ 0. , 1.22474487, 1.33630621, -0.80538727],
# [ 1.22474487, 0. , -0.26726124, -0.60404045],
# [-1.22474487, -1.22474487, -1.06904497, 1.40942772]])
MinMaxScaler().fit_transform([[ 1., 1., 2., 10],
[ 2., 0., 0., 100],
[ 0., -1., -1., 1000]])
#array([[0.5 , 1. , 1. , 0. ],
# [1. , 0.5 , 0.33333333, 0.09090909],
# [0. , 0. , 0. , 1. ]])
预期行为,因为StandardScaler
和Normalizer
有不同的用途。StandardScaler
"垂直"工作,因为它...
通过移除均值并缩放到单位方差来标准化特征
[...] 通过计算训练集中样本的相关统计数据,对每个特征进行居中和缩放独立进行。然后存储平均值和标准偏差,以便使用变换方法用于以后的数据。
虽然Normalizer
"水平"工作,因为它...
将样本单独归一化为单位标准。
具有至少一个非零分量的每个样本(即数据矩阵的每一行)独立于其他样本重新缩放,使其范数(l1 或 l2)等于 1。
请查看scikit-learn文档(上面的链接),以获得更多见解,从而更好地满足您的目的。