<역전파(Back Propagation) 알고리즘의 단점>
1) 수렴에 종종 실패, local minimum에 빠짐
2) Nonlocality, Synchrony(동시성), Long Training Time등 생물학적 신경망과 차이가있음
3) 초기값에 따라서 진동하거나 chaotic wandering 하기도 함
4) Gradient Vanishing, Gradient Explosion 문제 발생
'AI > 딥러닝 기초(Deep learning)' 카테고리의 다른 글
| [딥러닝][기초] 과적합(Overfitting)과 규제(Regularization) (0) | 2021.04.25 |
|---|---|
| [딥러닝][기초] Loss Curve, Accuracy Curve (2) | 2021.04.25 |
| [딥러닝기초] 역전파 알고리즘(Back Propagation)_2 Delta Rule 일반화 (0) | 2021.04.25 |
| [딥러닝기초] CNN(Convolutional Neural Networks) (0) | 2021.04.23 |
| [딥러닝기초] 역전파 알고리즘(Back Propagation)1_ Delta Rule (3) | 2021.04.16 |
댓글