SEO tarayıcılarının etkinliklerini bildirmek için rollbar nasıl engellenir?

Question

Raylarım uygulamasında kurulum rollbarım var. Bu silinmiş posta ararken SEO scrawlers (i.e Google bot, Baidu, findxbot vb ..) sonucu olan recordnotfound raporlama tutar.

Toplayıcı, SEO scrawler etkinliklerini bildirmekten nasıl sakınır. Eğer rollbar-gem kullandığınız gibi

Answer 1

görünüyor, bu nedenle bir örümcek neden olduğunu hatalarını görmezden rollbar anlatmak için Rollbar::Ignore kullanmak isterdim hataya neden isteği ise is_crawler_error algılar

handler = proc do |options| 
    raise Rollbar::Ignore if is_crawler_error(options) 
end 

Rollbar.configure do |config| 
    config.before_process << handler 
end 

bir paletli.

istemci tarafında JavaScript hataları tespit etmek için rollbar.js kullanıyorsanız, o zaman botlara neden istemci tarafı hataları filtrelemek için checkIgnore seçeneğini kullanabilirsiniz: Burada

_rollbarConfig = { 
    // current config... 
    checkIgnore: function(isUncaught, args, payload) { 
    if (window.navigator.userAgent && window.navigator.userAgent.indexOf('Baiduspider') !== -1) { 
     // ignore baidu spider 
     return true; 
    } 
    // no other ignores 
    return false; 
    } 
} 

Answer 2

ne yaptım:

is_crawler_error = Proc.new do |options| 
    return true if options[:scope][:request]['From'] == 'bingbot(at)microsoft.com' 
    return true if options[:scope][:request]['From'] == 'googlebot(at)googlebot.com' 
    return true if options[:scope][:request]['User-Agent'] =~ /Facebot Twitterbot/ 
end 

handler = proc do |options| 
    raise Rollbar::Ignore if is_crawler_error.call(options) 
end 

config.before_process << handler 

these docs.