Arama dizinini oluşturmak için Google tarafından geliştirilen ve web üzerinde tarama işlemlerini gerçekleştiren yazılım Googlebot olarak adlandırılır. Googlebot web üzerinde gezerek yeni ve güncellenmiş içeriklerin tümünü tarayarak dizine ekler. Bu arama motoru botları kesintisiz bir şekilde milyonlarca web sayfasını tarayabilir ve tüm bilgileri kayıt altına alabilir.
