부스팅
-
AdaBoost란 무엇인가?Machine Learning 2020. 8. 12. 15:35
@ 목차 AdaBoost의 개념과 특징 AdaBoost의 작동원리 참고자료 1. AdaBoost의 개념과 특징 우리는 저번 시간에 Boosting에 대한 개념을 짚어봤다. 오늘은 AdaBoost에 대해서 더 자세히 설명하는 시간을 갖도록 하겠다. 저번 시간에 AdaBoost는 stump라는 개념을 사용한다고 했다. Stump는 Decision tree 개념에서 하나의 node와 두개의 leaf를 가지는 모양을 의미한다(Image 1). Stumps는 하나의 노드를 가지기 때문에 오직 하나의 변수만을 사용한다. 그래서 weak learners라고도 부른다. 여기서 stump는 Random forest와 비교하면 더 의미가 정확해진다. Random forest는 각 트리의 모양은 다르지만 각각 vote 할 ..