P9 归一化以及标准化对比

时间：2021-01-04 10:53:33 阅读：0 评论：0 收藏：0 [点我收藏+]

http://bilibili.com/video/BV184411Q7Ng?p=9

技术图片

Python程序举例：

"""
对数据进行归一化处理
"""
from sklearn.preprocessing import MinMaxScaler






def mMinMaxScaler():
    """
    对数据进行归一化处理
    :return:
    """
    mMinMaxScaler=MinMaxScaler()
    data=mMinMaxScaler.fit_transform([[90,2,10,40],[60,4,15,45],[75,3,13,46],])
    print(data)
    return None

if __name__=="__main__":
    mMinMaxScaler()

运行结果：

技术图片

C:\Users\TJ\AppData\Local\Programs\Python\Python37\python.exe D:/qcc/python/mnist/data_guiyihua.py
[[1. 0. 0. 0. ]
[0. 1. 1. 0.83333333]
[0.5 0.5 0.6 1. ]]

Process finished with exit code 0

注解：

对于每一列特征都要处理。

"""
对数据进行归一化处理
"""
from sklearn.preprocessing import MinMaxScaler






def mMinMaxScaler():
    """
    对数据进行归一化处理
    :return:
    """
    mMinMaxScaler=MinMaxScaler(feature_range=(2,3))
    data=mMinMaxScaler.fit_transform([[90,2,10,40],[60,4,15,45],[75,3,13,46],])
    print(data)
    return None

if __name__=="__main__":
    mMinMaxScaler()

运行结果：

技术图片

注解:

归一化到一个指定的区间。
默认是归一化到[0, 1]的。

技术图片

注解：

飞行里程数多的话，可能这个人是个商务人士，但同时陪伴家人的时间可能很少。
觉得3个特征同等重要的时候，就要对数据进行归一化处理。

技术图片

注解：

如果不进行归一化，小值将淹没在大值中，小值的参考作用将失去。

技术图片

注解：

在做归一化的时候，如果有异常点，会怎样？
归一化对异常点无法抵抗，会造成数据归一化错误。

技术图片

"""
对数据进行归一化处理
"""
from sklearn.preprocessing import MinMaxScaler






def mMinMaxScaler():
    """
    对数据进行归一化处理
    :return:
    """
    mMinMaxScaler=MinMaxScaler(feature_range=(0,1))
    data=mMinMaxScaler.fit_transform([[90,2,10,40],[60,4,15,45],[75,3,13,46],])
    print(data)
    return None

if __name__=="__main__":
    mMinMaxScaler()

无异常数据的归一化结果：

技术图片

"""
对数据进行归一化处理
"""
from sklearn.preprocessing import MinMaxScaler






def mMinMaxScaler():
    """
    对数据进行归一化处理
    :return:
    """
    mMinMaxScaler=MinMaxScaler(feature_range=(0,1))
    data=mMinMaxScaler.fit_transform([[90,2,10,1040],[60,4,15,45],[75,3,13,46],])
    print(data)
    return None

if __name__=="__main__":
    mMinMaxScaler()

有异常数据之后的归一化结果：

技术图片

解决办法：标准化。

技术图片

数据标准化示例代码:

"""
对数据进行标准化处理
"""
from sklearn.preprocessing import MinMaxScaler, StandardScaler






def stdardScaler():
    """
    对数据进行标准化处理,即处理成均值为0，标准差为1的数据
    :return:
    """
    std=StandardScaler()
    data=std.fit_transform([[1.,-1.,3.],[2.,4.,2.],[4.,6.,-1.]])
    print(data)
    return None

if __name__=="__main__":
    stdardScaler()