Ladder 네트워크를 이용한 준지도 학습

우리는 감독 학습과 비감독 학습을 깊은 신경망에서 결합합니다. 제안된 모델은 역전파를 통해 감독 학습과 비감督 학습의 비용 함수 합을 동시에 최소화하도록 훈련됩니다. 이는 계층별 사전 훈련의 필요성을 피할 수 있습니다. 우리의 연구는 Valpola(2015)가 제안한 Ladder 네트워크를 기반으로 하며, 이를 감독 학습과 결합하여 확장합니다. 우리는 이로 인해 생성된 모델이 모든 라벨을 사용하는 순열 불변 MNIST 분류뿐만 아니라 반감독 MNIST와 CIFAR-10 분류에서 최신 수준의 성능을 달성함을 보여줍니다.