weight 개수 구하기

한장의 이미지의 크기는 10x10, 즉 100개의 피처로 이루어져 있는 흑백이미지. 라벨은 총 신발, 셔츠, 바지 3종류다 은닉층의 노드는 100개로 총 2층짜리 다층 퍼셉트론이다. 총 weight의 개수를 계산해보자

1) bias 제외

10300 = 100*100 + 100*3

2) bias 포함

10300 + (100 + 3) = 10403

 

             |           ->         |         ->      |

           100                  100                3 

                     ----               -----

weight:     100 * 100            100 * 3

bias:                    100                     3

 

weight는 모델의 구조에 대해서 모르고 있는지에 대해 알 수 있다.