0
Bugün robots.txt standardını destekleyen benim web tarayıcısının iyileştirilmesi iken, ben http://www.w3schools.com/robots.txtBoş bir "Disallow:" ile bu robots.txt sözdizimi doğru mu?
User-agent: Mediapartners-Google
Disallow:
aşağıdaki kodu rastladım bu sözdizimi doğru mu? Kullanım amacına göre Disallow: / veya Allow: / olmalıdır?
Teşekkür ederim, bu şimdi her şeyi çok daha net hale getiriyor :) –
UYARI: 'Kullanıcı aracısı: * Disallow: 'içeren bir robots.txt ekledim ve daha sonra 2 hafta sonra Google Search konsolunu kontrol ettim. Aynı gün robots.txt oluşturulduğu gün, Google siteyi dizininden çıkardı. Bir arama motoruna izin vermedikçe bu dosya neredeyse yararsızdır. Bazı SEO aracını mutlu etmek için bunu eklemeyin! –