Nodejs ekspres sunucusunu geliştirdim ve tarayıcı trafiğiyle ilgili endişelerim var .... demek istediğim birileri sunucumu istemeye göndermek için istek göndermeye başlarsa, sonra nasıl tespit edilir veya Bunu önlemek.Nodejs sunucumda gezinme trafiği nasıl algılanır?
şimdiden teşekkürler.
Gerçekten burada ne sorduğunuzu söylemek zor.
Gerçekten ne soruyorsanız, sitenizden bir istekte bulunulduğunda tarayıcıyı nasıl tanımlayabileceğinizi öğrenmek istiyorsanız, tüm iyi niyetli tarayıcılar (Google’dakiler gibi) istekte kendilerini tanıtıyor. Google tarayıcılarının bunu nasıl yaptığını görebilirsiniz here.
Gerçekten ne soruyorsanız, sunucunuzu bir seferde çok fazla trafik aldığınız ve bu trafiğin bir kısmının tarayıcılardan geldiği bir duruma karşı nasıl koruyabileceğinizi öğrenebilirsiniz, o zaman bu çok geniş bir sorudur ve ton gerektirecektir. özel sunucu örneğiniz, şu anda desteklediği ölçek hakkında bilgi, vb ... Genel konuyla ilgili bir makale: Web Crawlers: Love the Good, but Kill the Bad and the Ugly.
Google'da, aslında sitenizde maksimum tarama oranının ne olması gerektiğini anlayabilirsiniz. Talimatlar için "Change Googlebot crawl rate" başlıklı bu Google sayfasına bakın, ancak bu ayar yalnızca 90 gün boyunca yürürlükte kalmasına rağmen, sitenize bir tarayıcının görmek isteyeceği bir ton yeni içerik eklediğinizde en faydalıdır.
Not: Ayrıca, tarayıcılara, sitenizin hangi bölümlerinin önlenmesi gerektiğini bildiren bir robots.txt dosyasını da uygulamanız gerekir.