10、数据归一化处理的两种方式

东方耀

10、数据归一化处理的两种方式




量纲不同 单位度量不一样


将所有的数据映射到同一尺度
最值归一化：把所有数据映射到0-1之间
均值方差归一化：不会形成有偏的数据


ipynb文件在附件，可提供下载！






视频教程请参考：http://www.ai111.vip/thread-349-1-1.html
东方老师微信：dfy_88888

东方耀

学员问题：比如有些数据，前面全是x，最后一个是y（比较大的值），对y不处理的话，训练的模型参数就会比较大，对么?  
用前面这些X，预测最后一个值，因为前面X都归一化处理了，Y没做归一化，是不是出来的模型参数w都会比较大呢。。因为y=w0x0+w1x1...+w5x5

东方耀

东方耀 发表于 2019-10-13 10:25
学员问题：比如有些数据，前面全是x，最后一个是y（比较大的值），对y不处理的话，训练的模型参数就会比较 ...

如果也对y归一化  那么训练的模型参数w都会比较小  应该也是可以训练的  麻烦在预测的时候 预测出来的结果要 乘以方差 加上均值 就是最后的结果  
应该来说 对y进行何种转换操作都不会影响模型的训练 预测的时候进行相应的逆操作即可得到结果

比如：可以对y同时除以一个数  将y变小点，预测的时候 再乘以同一个数 即可得到结果

东方耀

东方耀 发表于 2019-10-13 10:25
学员问题：比如有些数据，前面全是x，最后一个是y（比较大的值），对y不处理的话，训练的模型参数就会比较 ...

对X进行归一化（要么极值归一要么均值方差归一）只是将X的不同特征归一到同样数据级别，不至于某个X特征的数据级特别大，那么其前面的参数theta就会非常敏感，不利于模型的训练

fglbee

this is good idea

kiko

学习中，支持