Çok eski bir web tarayıcısı kullanıyorsunuz. Bu veya diğer siteleri görüntülemekte sorunlar yaşayabilirsiniz.. Tarayıcınızı güncellemeli veya alternatif bir tarayıcı kullanmalısınız.
Arama motorlarının sitenizi nasıl tarayacağını kontrol etmek için robots.txt ve noindex direktifleri kullanılır.
robots.txt kullanımı:
- Tüm botları engelle: User-agent: * / Disallow: /
- Belirli dizini engelle: Disallow: /admin/
- Sitemapı belirt: Sitemap: /sitemap.xml
noindex kullanımı:
-...