本文共 3643 字，大约阅读时间需要 12 分钟。

���������������������������������������������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

���������������������������

���������������������������������������������������������������������������������������������������

���������������������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

������������������������������

���������������������������������������������������������������������������L1������������������������������������������L2������������������������ossiplying������������������������������������������������������������������������������������������������������������������������������������������������������

���������������������������������

������������������������������������������������������������������������������������������������������������������������������������������������

���������������������������������

���������������������������������������������������������������������������������������������������������������������������������������������������������������������

���������������������������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

������������������������

��������������������������������������� [ w^* = \arg \min_w \sum_i L(y_i, f(x_i; w)) + \lambda \Omega(w) ] ���������$\lambda$���������������������������$\Omega(w)$���������������������������������������������������L1���������L2������������

���������������������������������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

���������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������

������������������������

���������������������������������������������������������������������������L1������������������������������������������������������������������������������������������������������������������������

������������������

���������������������������������������������������������$w$������:\ [ w^* = \arg \min_w \sum_i L(y_i, f(x_i; w)) + \lambda \Omega(w) ] L1������������������������������������������������������������������������������������������

������������������������

������

������������������������������������������������������������������������������������������������������������������������������������

������������

������������������������������L1���������L2���������������������������������������������������

• L1���������(\Omega(w) = |w|_1)������������������������
• L2���������(\Omega(w) = |w|_2^2)���������������������������

���������������������

������������������������������������������������������������������������������������������������������������������������������������������������������������������

������

������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������������