【官方双语】深度学习之神经网络的结构 Part 1 ver 2.0

1基本原理

假设：

• 第一层每个元是784行中的某一行

一二层关系：

784个元连接某个第二层元，代表根据观

察到的特征，图像中有第二层某元的可能

性，可能性越大，权重越大

激活值越大，下层激活值越大

• 第二层的每个元代表某个笔画

二三层关系：

与一二层关系同理

• 第三层的每个元代表某个几何图形

2基本原理的数学形式

i层与i+1层网络的数学描述

a(1)代表i层各元激活值组成的向量

wjk代表第i层第j个元联到第i+1层第k个元的权重

b 是阈值

σ 把计算值缩放至0到1范围内