大多时候，处理数据时都是先对数值变量做标准化，再将分类变量one-hot编码。但有时出现这种情况：
对于某些连续特征，我需要将其二元化（如：大于0时，值指派为1；等于0时，值指派为0）。做了二元化后，无需one-hot编码，但是在标准化时，因为其属于数值类型，也会被一并标准化。那么，这样的标准化是否可行？在标准化时，我是否应该把这部分值为0/1的二元离散变量排除在外？
2个回答
我个人的习惯是把已经二元化的变量跳过，只对非二元的数值特征进行标准化。
如果你有时间富余，可以两者方式都试试，交叉验证一下，看哪个效果好。我的经验是通常两种方法效果差不多。所以本质上没差别。
SofaSofa数据科学社区DS面试题库 DS面经
雷猴
2020-04-16 23:28
以神经网络为例说明为什么要标准化输入输出。假如输入输出variance比例为1000，有10层网络，那每层网络就需要缩小信号的variance2倍。但是我们一般把网络参数初始化为N(0,1),反而会增加variance。(假设xy独立，var(x+y)=var(x)+var(y) =var(x)+1)。此时初始化参数和收敛参数相差太远，会增加收敛时间。如果标准化会，初始化参数会里收敛值近一点。最好是用He Kaiming initialization, 这样收敛会更快。
0,1的onehot编码，variance离1差距不大，嫌麻烦可以不做标准化。如果输入variance比1大很多，需要标准化。
SofaSofa数据科学社区DS面试题库 DS面经
Zealing
2020-04-17 04:56
相关主题
特征归一化后的多项式回归拟合结果
2回答
数据的标准化（Z-score标准化）是否会改变训练得到的超平面系数向量？
1回答
线性回归的变量归一化的问题
1回答
用uci的crimes做了一个线性回归，test很差
2回答
python里怎么做分位数回归(quantile regression)？
1回答
python 读json 错误 ValueError: Unexpected character found when decoding array value (2)
0回答
一个数据预处理的问题
1回答
我们谢绝在回答前讲“生动”的故事。
我们谢绝“这么简单，你自己想”、“书上有的，你认真看”这类的回答；如果你认为对方的提问方式或者内容不妥，你可以直接忽略该问题，不用进行任何作答，甚至可以对该问题投反对票。
我们谢绝答非所问。
我们谢绝自己不会、硬要回答。
我们感激每一个用户在编写答案时的努力与付出！