Blogger Robots.txt Nasıl Oluşturulur ?

Robots.txt Dosyası Nedir ?

Blogger alt yapısını kullanan site sahiplerinin adını birçok yerde duyduğu ama düzenlemekten korktuğu aslında doğru kullanım ile bizim çok işimize yarayacak olan bir takım kodlardan oluşmaktadır.Uygulaması da oldukça basittir.Dediğim Gibi doğru kullanım ile işimize yarayacak bu kodları gelin nasıl uygulayabiliriz onu görelim.

Ne İşe Yarar ??

Robots.txt dosyası sitemizin arama motorları tarafından indexlenip yada indexlenmemesini bizim tafafımızdan belirlendiği kodlar'dır aslında.Sitem neden indexlenmesin ki ? diyorsanız yazının devamını okumanızı tavsiye ederim.

Seo açısından sitemizdeki bazı sayfaların indexlenmemesi önemlidir.Çünkü aynı sayfanın veya içeriğin iki kere indexlenmesi demek google veya diğer arama motorları tarafından eksi puan almanız demektir.Bu yüzdendir ki etiketlerinizin veya navigasyon gibi sayfalarımızın indexlenmemesi gerekir.

Nasıl Yapılır ??

Aşağıda vereceğim kodlar standarttır.Ve tüm siteler için gereklidir.Bu yüzden gönül rahatlığı ile kullanabilirsiniz.

         User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search?q=* Disallow: /*?updated-max=* Allow: / Sitemap: http://www.blogisminiz.com/feeds/posts/default?orderby=updated

• Ayarlar >> Arama Tercihleri Bölümünden  
• Sayfanın Alt Kısmındaki  Özel  Robots.txt bölümünden düzenle seçeneğine tıklayarak yukarıda vermiş olduğum kodları kopyalayın.
• Yukarıdaki kodlarda blogisminiz yazan yere blog adresinizi yazıp kaydet butonuna basın.
• Artık Robots.txt dosyanız hazır.

Kodların Açıkması:

• User-agent:Mediapartners-Google:Bu kod google adsense kullanıcıları için.eğer sitenizde adsense kullanmıyorsanız kodu eklemeyebilirsiniz.
• User-agent:* :Bu kod google,yahoo gibi tüm arama motorlarını sitenize indexlemesini sağlar.
• Disallow:Bu kod arama motorlarına ilgili kısmı indexlememesini söylüyor.Bu kodla başlayan ilk satırda arama sonuçlarını ve sonraki satırda da etiket ve navigasyon sayfalarını indexlememesini söylemiş oluyoruz.
• Allow:Anasayfanızı ve yazı sayfalarını indexlemesine izin vermiş olduk.
• Sitemap:Buradaki blogisminiz yazan kısma kendi blogunuzun adını yazın.

İşte bu kadar yapamadığınız bölümleri yorum bölümünde belirtebilirsiniz.