편향-분산 딜레마

편향-분산 딜레마는 편향과 분산을 동시에 줄이는 것이 불가능하며, 둘 사이의 균형을 이루는 것만이 가능하다는 것을 의미합니다.

모델에서 편차를 줄이려면 과소적합을 방지하기 위해 모델의 복잡성을 높여야 합니다. 하지만 동시에 모델을 너무 복잡하게 만들어 분산을 증가시키고 과적합을 일으킬 수는 없습니다. 따라서 우리는 모델의 복잡성에서 균형점을 찾아야 하는데, 이는 다음 그림으로 표현될 수 있습니다.