메타러닝
메타러닝머신 러닝 실험의 메타데이터에 자동화된 학습 알고리즘을 적용하는 머신 러닝의 하위 분야입니다.
메타 학습의 핵심은 "학습(훈련)" 과정으로, 뉴런이 오래된 지식을 잘 활용하여 새로운 작업에 맞게 스스로를 조정할 수 있도록 하는 방법을 연구하는 것입니다. 개략도는 다음과 같습니다.
- 신경망의 초기 매개변수(파란색 ■)
- 최적화 매개변수(분홍색 ★).
그래프에는 훈련이 필요한 두 가지 주요 부분이 있습니다.
- 우리는 이전의 신경망을 지칭하기 위해 "모델(M)"이라는 단어를 사용했는데, 이는 이제 저수준 네트워크로도 이해될 수 있습니다. 그림에서 모델의 가중치는 ■로 표현됩니다.
- 저희는 저수준 네트워크의 가중치를 업데이트하는 데 사용되는 고수준 모델을 지칭하기 위해 "최적화기(O)" 또는 "메타 학습기"라는 용어를 사용합니다. 그림에서 최적화기의 가중치는 ★로 표시됩니다.