결정 포레스트는 여러 결정 트리로 구성된 모델을 설명하는 일반적인 용어입니다. 결정 포레스트의 예측은 결정 트리의 예측을 집계한 것입니다. 이 집계의 구현은 결정 포레스트 학습에 사용되는 알고리즘에 따라 달라집니다. 예를 들어 다중 클래스 분류 랜덤 포레스트 (결정 포레스트의 한 유형)에서 각 트리는 단일 클래스에 참여하고 랜덤 포레스트 예측은 가장 표현된 클래스입니다. 바이너리 분류 경사 부스팅 트리 (GBT)(다른 유형의 결정 포레스트)에서 각 트리는 로지트 (부동 소수점 값)를 출력하고, 그래디언트 부스티드 트리 예측은 해당 값의 합계에 이어 활성화 함수 (예: 시그모이드)가 나옵니다.
다음 두 장에서는 두 결정 포레스트 알고리즘을 자세히 설명합니다.