Learning Effect of Artificial Neural Network Using Bell-Shaped Activation Function

Abstract

인공 신경망의 학습 효과는 기본적으로 은닉층의 뉴런에 사용된 활성 함수에 따라 달라질 수 있다. 본 논문에서는 은닉층의 뉴런에 종형의 활성 함수를 사용한 인공 신경망의 학습 효과를 분석하고자 한다. 이러한 목적을 위하여, 종형의 활성 함수를 사용한 간단한 신경망을 제시하고, 오차역전달 학습 과정을 통하여 동적 시스템의 특성 모델링을 시도한다. 시뮬레이션을 통하여, 시그모이드 함수를 고려한 경우와 비교하여 종형 함수를 사용한 신경망의 학습효과를 제시한다. 결과적으로, 종형의 활성 함수를 사용한 신경망의 학습이 상대적으로 빠르고 안정적이어서 이러한 신경망이 보다 적절한 동적 시스템의 모델링을 위하여 유용하게 적용될 수 있음을 보인다.