random forests

• "öznitelikler düğüme, düğümler dallara, dallar ağaca, ağaçlar ormana, dönmeli algoritmamda" türküsüyle özdeşleşmiş, sınıflandırma ve regresyon algoritmasıdır. bir karar ağacına göre esas avantajı, overfitting problemini aşabilmesidir.
  kısaca betimlemeye geçmeden önce: (bkz: karar ağacı)
  eldeki eğitim kümesi üzerinden n tane karar ağacı oluşturur. her ağaç için eğitim kümesini yerine koymalı olarak rastgele örnekler. bu yüzden her ağaç diğerlerinden farklıdır. aynı şekilde, ağacı oluşturmak için seçilen öznitelikleri de baştan l adet rastgele seçer ve onların arasından infromation gain uygulayarak ağacı inşa eder. baştan belirlenen sayıda ağaç elde edilence, ki buna orman diyoruz, sınıflandırma sırasında, oylama uygular. basit ve oldukça etkilidir.