Arama motoru botlarının bir web sitesinin sahip olduğu sayfaların ne kadarını tarayabildiğini ifaden eden kavram crawl depth olarak adlandırılır. Bir web sitesi yüzlerce, binlerce hatta milyonlarca sayfaya sahip olabilir. Bu sayfaların hiyerarşisinin doğru şekilde kurgulanması oldukça önemlidir. Doğru şekilde kurgulanan sayfa hiyerarşisi arama motoru botlarının tüm sayfalara kolayca ulaşabilmesine, tarayabilmesine ve dizine ekleyebilmesine yardımcı olur. Doğru hiyerarşi kurgusunun oluşturulduğu web sitelerinin crawl depth, yani tarama derinliği konusunda oldukça başarılı olduğunu söyleyebiliriz.