Merhaba arkadaşlar. Bugün blogger ve robots.txt ilişkisini inceleyeceğiz. Eğer .blogger uzantılı bir sitenin sonuna /robots.txt yazarsanız o sitenin robots.txt’sini görebilirsiniz.(Örneğin : http://iyifikir.blogspot.com/robots.txt)

Robots.txt içeriğine baktığımızda Disallow: /search i görüyorsunuz. Ne demek bu ?, şu demek arkadaşlar. Blogger’da etiketlerimiz hiç bir işe yaramıyor demek. Çünkü blogger’da etiket linki search/label/xx şeklinde.

Şimdi soruyorum google’a madem işe yaramayacak ve botların etiketlerimizi indexlemicek neden etiket bölümü koyuyorsun? : )

Tabii ki bununda mantıklı bir açıklaması var, google etiketleri indexlemiyor çünkü istemediği “duplicate” aramaların önüne geçmek istiyor.