神经网络几何直观:在二维平面上画曲线
只回答一个问题:为什么两层线性分类器画不出曲线,而 ReLU 网络能。线性层把二维输入平放成十六维里的一个仿射平面,ReLU 按 z_i=0 的十六条直线切分输入平面并把像折出原平面,分类边界是输出层超平面在输入空间中的原像。附一维到二维的数值最小例、七个常见误区与维数账本。
阅读全文分类
1 篇文章
只回答一个问题:为什么两层线性分类器画不出曲线,而 ReLU 网络能。线性层把二维输入平放成十六维里的一个仿射平面,ReLU 按 z_i=0 的十六条直线切分输入平面并把像折出原平面,分类边界是输出层超平面在输入空间中的原像。附一维到二维的数值最小例、七个常见误区与维数账本。
阅读全文