Sitemize Hoşgeldiniz...

SecilmisWeb | Kişisel ßlog

Robot.Txt



















Robots.txt nedir?


Robot.txt kısaca özetlemem gerekirse botların sitenizi craw lamak geldiğinde neleri indexlemeleri gerektiğini aynı zamanda neleride indexlememeleri gerektiğini gösterir
Buna bir örnek: Botları turist olarak farzedin günü birlik olur sezonluk olur orasını ben bilemem neyse konumuza dönelim sitenize yerleştireceğiniz robots.txt dosyasınıda rehber sitenizide tarihi bir mekan farzedin olayın mantığı budur.

Robots.txt nasıl oluşturulur?

Robot.txt dosyasını oluşturmak için basit basit yazı editörlerinden faydalanabiliriz ( Notpad Wordpad vb..) oluşturacağımız robots.txt dosyasını sitemizin ana dizinine atmamız gerklidir (Genelde httpdocs yada www klasörleridir) Eğer yanlış bir yere atarsanız siteniz craw'lanamaz.
Robots.txt dosyanızın içerisindeki kodları küçük harflerler ile yazamanızı öneriyorum. Şimdi Robot.txt dosyamızı oluşturalım

PHP- Kodu:
Alıntı:
User-Agent: *
Allow: /
Yukardaki bir örnektir kodların anlamlarını ve nasıl kullanılacağını anlatalım şimdi

User-Agent: İstediğiniz bir botu belirlemeniz için kullanılır yukarıdaki örnekte * yaptım geneldede kullanılan bududur tüm botlar anlamına gelir ama siz sadece Googlebot olsun diyorsanı User-agent: Googlebot kodunu kullanabilirsiniz.

Allow: Botların hangi sayfaları indexlemesini ve ya indexlemesi gerektiğini gösterir genelde Allow: / şekilinde kullanılır örnektede yaptığım gibi tüm sayfalar anlamına gelir

Disallow: Bir dizini ve o dizinin içinde bulunan tüm öğeleri engellemek için dizin adının sonuna bir düz eğik çizgi koyun. Disallow: /engelenecek_klasor/

 
Bugün 29455 ziyaretçi (92284 klik) Kişi Burdaydı !



Bu Tasarım Osman Talay
Tarafından Yapılmıştır.

Sitemizin Yeni Css Tasarımı. Tasarımın Sahibi (osmantalay.tr.gg)





Sitemizde Top List ,Anket Falan Vardır... Sitemizdeki Kategorilere Yorum Yaparsanız İyi Olur :)





Secilmis Web Sizinle .. Sizin İçin Var.. Admin: İsmail Secilmis





Bu web sitesi ücretsiz olarak Bedava-Sitem.com ile oluşturulmuştur. Siz de kendi web sitenizi kurmak ister misiniz?
Ücretsiz kaydol