Web sitenizin arama motoru görünürlüğünü optimize etmek, indeksleme ayarlarını doğru şekilde yönetmekle başlar. Bu amaçla önemli bir dosya robots.txt dosyasıdır ve arama motorlarına hangi sayfaların taranacağını veya göz ardı edileceğini bildirir.
Bu kılavuz, Ciriks Site Builder kullanarak bir robots.txt dosyası oluşturma ve yapılandırma sürecini adım adım açıklar.
Başlamak için, Ciriks Site Builder kontrol panelinde Statik Sayfalar bölümüne gitmek için şu adımları izleyin:
Şimdi, robots.txt dosyasını barındıracak yeni bir statik sayfa oluşturalım:
robots.txt sayfa ayarlarında aşağıdaki ayrıntıları yapılandırın:
"robots.txt"
yazın.https://yourdomain.com/robots.txt
Önemli: CSS ve JavaScript bölümlerine herhangi bir şey eklemeyin.
İşte temel bir robots.txt kurallar örneği:
User-agent: Googlebot Disallow: /nogooglebot/ User-agent: * Allow: / Sitemap: https://www.example.com/sitemap.xml
Robots.txt kuralları hakkında daha fazla bilgi için Google'ın resmi kılavuzunu inceleyebilirsiniz.
Her şey hazır olduğunda, Kaydet düğmesine tıklayarak robots.txt sayfa ayarlarınızı kaydedin.
Doğru yapılandırılmış bir robots.txt dosyası, arama motorlarının hangi sayfaları taraması veya dışlaması gerektiğini anlamasına yardımcı olarak sitenizin SEO'sunu iyileştirir. Ciriks Site Builder ile bu dosyayı yönetmek oldukça kolaydır ve web sitenizin indeksleme tercihlerinde tam kontrol sahibi olmanızı sağlar.