Google hakkında hep merak ettiklerimiz mutlaka vardır ama Google şimdi ki konumuna getiren örümceklerinden pek bahsedilmez. Bu yazımda sizlere bu örümcekler hakkında bilgiler vereceğim. Örümcekler sitemizin arama motoru Google veritabanına kayıt olmamızı sağlarlar. Bu işleme indexleme işlemi denir.

Google’ ın geliştirdiği 3 çeşit örümcek tipi vardır.AdSense Bot:
AdSense Google ‘ın reklam yayınlama servisidir. Ürün yada hizmet üreticileri Google da reklamar vererek daha çok müşteriye hitap etmeye çalışırlar. AdSense botları bu reklamları yayınlayan web siteleri için çalışırlar. Sitenin içeriği değiştikçe her değişiklikten sonra AdSense botları sitenin içeriğini indexler ve bu içeriğe uygun reklamları siteye gönderir.Fresh Bot:
Fres bot web sitenizde bulunan en popüler içerikler ile ilgilenir. İçeriğin ne kadar çok olduğunun önemi yoktur. Siteniz çok hit çeken bir site ise bu bot sitenize 10 dakika gibi aralıklar ile uğrayabilir. Eğer değil iseniz sitenizin trafiğine göre bu işlem 10 yada 15 günde bir gerçekleştirilir. Bu bot sitenizin tüm bağlantılarını inceler ve sizi veritabanına bu bağlantılar ile kayıt eder. Bu işlem diğer bir Google botu olan Deep Crawl ‘ın işine yarar.Deep Crawl:
Deep Crawl Fressh botun veritabanına kayıt ettiği bağlantıların yardımı ile sitenizin içeriğini bulur ve ayda bir kez sitenize gelip sitenizde ki bütün içeriği indexler. Bu nedenle sitenize eklediğiniz yeni bilgiler Google sonuçlarında bir ay sonra çıkmaya başlayabilir.