728x90

참고답안:

 

양자모두 연속값을 {0,1}상에 투영하려고 하지만 계단 함수는 매끄럽지 못한 불연속성 성질을 갖고 있기 때문에 시그모이드 함수를 투영 함수로 선택합니다. 다른 점은 신경망에서는 반드시 활성화 함수로 시그모이드를 사용하지 않아도 된다는 점입니다. 비선형성을 가진 미분가능한 함수라면 뭐든 가능합니다.

 

시그모이드 함수를 활성화 함수로 사용하면 각 뉴런은 로지스틱 회귀와 같아집니다.  단지 로지스틱 회귀에서는 sigmoid(x) > 0.5일때 1을 출력하지만 뉴런은 바로 sigmoid(x)를 출력할 뿐입니다.

 

+ Recent posts