googlebot web sitemin arama motorunu neden ve nasıl kullanıyor?

Question

Arama günlüklerimi zaman zaman aradığımda, arama motorumun en büyük kullanıcısı google-bot'dur. Ne verir? Navigasyon yoluyla doğrudan erişilemeyen içerik mi arıyorsunuz? Eğer öyleyse, hangi kelime ve kelime öbeklerinin aranacağını nasıl biliyor (şaşırtıcı derecede alakalı). Sitede en popüler anahtar kelimeleri kontrol ediyor mu? Burada kendi sorumu yanıtladığımı biliyorum, ama bu sadece ilk prensiplerden yola çıkıyor. Ne hakkında konuştuklarını bilen birinden duymak isterim (yani ben değil).

Answer 1

Google o aksi olamaz sayfaları bulmak için denemek için arama kutularına Sitenizde gerçekleşen kelimeleri kullanacaktır.

tarihinde son birkaç aydır, geri bilgi almak için "kaliteli" web sitelerinin bir "az sayıda" formlara doldurarak olduğu belirtildi. Bu formlara hangi kelimeler giriyor? Sitede meydana gelen otomatik olarak seçilen sözcükleri, onay kutuları ve açılan menüler de seçilidir. http://searchengineland.com/google-now-fills-out-forms-crawls-results-13760

Answer 2

Arama formunuzun yöntemi gönderi yerine ulaşırsa, her aramanın kendi URL'si vardır ve insanlar bu URL'leri başka bir yere gönderebilir. Veya, bu URL'leri listeleyen bir (muhtemelen yanlışlıkla) genel olarak erişilebilen webstats sayfanız varsa, bu, arama motorlarının dahili arama URL'lerinizi yanmasına başka bir yaygın yoldur. Gördüğüm üçüncü bir yol, sayfalarında son aramaları listeleyen sitelerdir, ancak bu daha kasıtlıdır. "MySQL Performans Blogu" bunu sinir bozucu bir düzeye kadar yapıyor, bu yüzden sitelerinin google'dan herhangi bir araması, aradıkları şeyi bulmasa bile, benzer aramalardan yüzlerce sayfa içeriyor.

Düzenleme: o vesileyle yaptığı gibi görünüyor, ama sadece formları GET: http://googlewebmastercentral.blogspot.com/2008/04/crawling-through-html-forms.html