İlk olarak ne hakkında bahsettiğimizi bir tanımlayalım. Bir “bot” arama motorunun bir yazlım parçasıdır, sitenizin her sayfasına girer, onu kategorilendirir ve son olarak da veritabanına kaydeder.
Google’ın iyi bilinen 3 tane “bot” u vardır. Bunlar: Adsense botu, Freshbot ve DeepCrawl…
Adsense botu, sizinde tahmin edebileceğiniz gibi Adsense yayınlayan siteler içindir. Yeni bir sayfa açılınca, adsense içindeki javascript kodları adsense botuna bir mesaj yollar ve adsense botu 15 dakika içinde gelip sitenizi indexler ki içeriğinizle ilgili reklamlar yayınlanabilsin…
Fakat bu yazıda bizi asılo ilgilendirenler DeepCrawl ve Freshbot’tur…
Freshbot sitenizdeki en popüler ve son sayfalar ile ilgilenir. Bunun bir veya binlerce olması önemli değildir. Amazon.com veya CNN.com gibi sitelerin sık sık güncellendiği ve yüksek talep aldığı Google tarafından farkedildiğinden beri bunun gibi siteleri her 10 dakikada bir ziyaret edip kaydeder. Tipik sitelere bu botun uğrama sıkılığı sitenin ve sayfaların popülerliği ile orantılı olarak 1 ile 14 gün arasında değişmektedir…
Bir freshbot sitenizi ziyaret ettiğinde sitenizdeki linkleri tek tek gezer ve onları bir veritabanına kaydeder. Bu sayede DeepCrawl sitenize geldiği zaman bu linker ona yol gösterir ve işini yapmasına yardımcı olur.
Ayda bir, DeepCrawl sitenize uğrar ve Freshbot tarafından kaydedilmiş linkleri tamamı ile gezip siteyi indexler.Bu sizin sitenize girdiğiniz yeni bilgilerin neden Google’da bir ay sonra çıktığının göstergesidir hatta Google Sitemap dahi olsa…
bi teşekkür
Google’ın iyi bilinen 3 tane “bot” u vardır. Bunlar: Adsense botu, Freshbot ve DeepCrawl…
Adsense botu, sizinde tahmin edebileceğiniz gibi Adsense yayınlayan siteler içindir. Yeni bir sayfa açılınca, adsense içindeki javascript kodları adsense botuna bir mesaj yollar ve adsense botu 15 dakika içinde gelip sitenizi indexler ki içeriğinizle ilgili reklamlar yayınlanabilsin…
Fakat bu yazıda bizi asılo ilgilendirenler DeepCrawl ve Freshbot’tur…
Freshbot sitenizdeki en popüler ve son sayfalar ile ilgilenir. Bunun bir veya binlerce olması önemli değildir. Amazon.com veya CNN.com gibi sitelerin sık sık güncellendiği ve yüksek talep aldığı Google tarafından farkedildiğinden beri bunun gibi siteleri her 10 dakikada bir ziyaret edip kaydeder. Tipik sitelere bu botun uğrama sıkılığı sitenin ve sayfaların popülerliği ile orantılı olarak 1 ile 14 gün arasında değişmektedir…
Bir freshbot sitenizi ziyaret ettiğinde sitenizdeki linkleri tek tek gezer ve onları bir veritabanına kaydeder. Bu sayede DeepCrawl sitenize geldiği zaman bu linker ona yol gösterir ve işini yapmasına yardımcı olur.
Ayda bir, DeepCrawl sitenize uğrar ve Freshbot tarafından kaydedilmiş linkleri tamamı ile gezip siteyi indexler.Bu sizin sitenize girdiğiniz yeni bilgilerin neden Google’da bir ay sonra çıktığının göstergesidir hatta Google Sitemap dahi olsa…
bi teşekkür
