부스팅모델1 부스팅 모델의 발전 트리모델의 진화과정배깅배깅은 부트스트랩(bootstrap) 훈련셋을 사용하는 트리 모델입니다. 부트스트랩은 데이터의 일부분을 무작위로 반복 추출하는 방법입니다. 추출한 데이터의 여러 부분집합을 사용해 여러 트리를 만들어 오버피팅을 방지합니다. 랜덤 포레스트는 배깅에서 한단계 더 발전된 모델입니다.부스팅과 에이다부스트부스팅은 랜덤 포레스트에서 한단계 더 발전한 방법으로 역시 여러 트리를 만드는 모델입니다.가장 큰 차이점은 랜덤 포레스트에서 각 트리는 독립적이나 부스팅에서는 그렇지 않다는 것입니다.다시 말해 랜덤 포레스트에서는 각 트리를 만들 때 이전에 만든 트리와 상관없이 새로운 데이터 부분집합과 변수 부분집합을 이용합니다.반면 부스팅은 각 트리를 순차적으로 만들면서 이전 트리의 정보를 이용합니다. 부분집.. 2024. 11. 13. 이전 1 다음