Domain Araçları - Alan Adı Araçları

Bugünki makalemizde sizlere Domain Araçlarını. Türkçe adıyla Alan adı araçlarımızı tanıtacağız.



Domain Araçlarımız ise şunlardır;

Domain Whois - Alan Adı Kimlik Biglisi

Whois sorgulama aracımız ile domainlerin yani alan adlarının kimlik bilgilerini kolayca sorgulayarak size öğrenmenizi sağlayan araçtır.

  Whois nedir? 

Whois (Alan Adı Sorgulama), domain'in (alan adının örn: domainadi.com ya da IP numaranın ait olduğu kişi ve/veya kuruluşun (firmanın) bilgilerini içerir. Domain'in kayıt ve süresinin bitiş tarihi, host edildiği firmanın name server bilgileri de yer alır.

Bu linkteki Whois Sorgulama aracımız ile hemen, istediğiniz domain whois, alan adı kimlik bilgisine kolayca sorgulayarak öğrenebilirsiniz.

Domain Yaşı Sorgulama

Bu araç ile domaininizin yani alan adınızın kaç yaşında olduğunu kolayca sizin için hesaplayan araçtır.. Bu linkten Domain Yaşı Sorgulama aracı ile hemen domaininizin kaç yaşında olduğunu öğrenebilirsiniz.
Domain nedir? Alan Adı Nedir? Ne İşe Yarar?

Alan adı, bir Web sitesinin İnternet'teki adı ve adresidir. Bu adres olmadan bir İnternet kullanıcısı Web sitesine sadece IP adresiyle ulaşabilir. Örneğin şu anda gezmekte olduğunuz sitenin alan adı websitekaydet.com dur. Alan adları IP adresi denilen, bilgisayarların (sunucuların/serverların) birbirini tanımasını sağlayan numara sisteminin daha basitleştirilmiş ve akılda kalması için kelimelerle ifade edilmiş halidir.

Örneğin fpajans.com alan adı adres barına yazıldığında tarayıcı bu alan adını önce IP adresine çevirir, daha sonra kullanıcıyı bu IP adresine sahip bilgisayara yönlendirir. Dolayısıyla Web sitesinin ziyaret edilebilmesi için kullanıcıların IP adresini bilemeyecekleri göz önünde bulundurulmalı ve siteye daha kolay ve akılda kalıcı bir alan adı alınmalıdır. Alan adı almak için bir İnternet servis sağlayıcısına gidilebilir veya Web hosting (barındırma) firmasından müşteri için bir alan adı kaydetmesi istenebilir.

Aslında alan adı satın aldığınız değil kiraladığınız bir hizmettir, bu yüzdendir ki en fazla on yıl olmak üzere alan adınızın süresini yenilemelisiniz, normal olarak en az bir yıl olarak kayıt edilen alan adları, On yıla kadar tescil edilebilir

Türkiye'nin ülke alan adı olan .tr uzantılı alan adları (.com.tr, .net.tr ve daha fazlası) ODTÜ tarafından yönetilmekte ve tahsis edilmektedir, en fazla beş yıl olarak tahsis edilebilir.

 

Domain İP Sorgulama

Bu araç ile domainlerin yani alan adlarının, hangi sunucu barındıldığı ve ip adresi nedir, kolayca öğrenebilirsiniz. Bu linkteki; Domain İp Sorgulama aracıyla, sitelerin hangi ip adresi bağlandığını kolayca sorgulayarak öğrenin.

Domain Hosting Sorgulama

Bu araç ile sitelerin hosting barındırma hizmetlerini nereden aldığını, doğru ne şekilde size bilgilerini sunan araçtır. Bu araca bu linkten ulaşabilirsiniz. Domain Hosting Sorgulama

Reverse IP Domain Sorgulama

Bu araç domaininizin yani alan adınızın barındırıldığı ip adresinde kaç tane site daha bulunduğunu listeler. Bu sayede sitenizle birlikte kaç site daha aynı sunucuda barındırılıyor, kolayca öğrenmiş olursunuz. Bu araca bu linkten; Reverse IP Domain Sorgulama ulaşabilirsiniz.

 

Zamanla domain araçları, alan adı araçları geliştirilerek daha fazla araç eklenecektir. Bizi takipte kalın...

Kaynak - Resouce : http://websitekaydet.com/domain-araclari-alan-adi-araclari.html

Kelime Yoğunluğu Analiz Aracı

Bu makalemizde sizlere Kelime Yoğunluğu Analiz Aracımızı ve Anahtar Kelime Yoğunluğu nedir hakkında bilgiler vermeye çalışacağız.

Hemen bu linkteki; Kelime Yoğunluğu Analiz Aracı ile sitenizde yayınladığınız, makalenin ve sitenizin ana sayfasındaki anahtar kelime yoğunluğunu analiz edebilir ve detaylı bilgi edinebilirsiniz.

Kelime Yoğunluğu (Keyword Density) makale içerisinde kullanılan anahtar kelimelerin bütünlük oranıdır. 500 Kelime barındıran bir makale yazdığınızı düşünün ve anahtar kelimeleriniz, örnek; site ekle ve site kaydet. Bu anahtar kelimeleri, makalenin için de 5 kez geçirirseniz, büyük ihtimalle anahtar kelime yoğunluğu analiz sonucunuz, %1 olacaktır.

Anahtar kelime yoğunlu nasıl olmalıdır?

Yazdığınız makale de, kullanacağınız anahtar kelimeleri, 15 kez yazabilirsiniz fakat yazdığınız makaleye göre, kelimenin varyasyonlarına dikkat etmeniz gerekmektedir. Kullanacağınız anahtar kelimeler, makale içinde akıcı ve anlatım bozukluğu oluşturacak şekilde kullandığında %10 gibi sonuç gösterir. Kelime yoğunluğunuz, %2 ile %6 arasında olmalıdır ki, makaleniz özgünlüğü açısından ve arama motorları botları tarafından kolayca algılanmalıdır. Bu sayede arama motorlarında yazdığınız makale, kullandığınız anahtar kelimelerde üst sıralarda çıkmanızı sağlayacaktır.

Araç sayfasında bunu detaylıca sizlere anlattık.

Bir online yazı metni, arama motorlarında optimal bulunabilir olmalı, bazı kriterleri yerine getirmeli: Metnin kolay anlaşılır olmasının yanı sıra, içeriğinin şirkete ve sunulan ürünlere uygun olması gerekmektedir. Aynı zamanda özellikle arama motorları için önemli sayılan faktörlerin dikkate alınması gerekir. Bu şekilde Google & Co. da ilk sıralarda yer alma şansını yakalayabilir. Keyword Density Tool (Kelime Yoğunluğu Aracı), bir metnin içindeki anahtar kelimelerin sayısını tespit etmeye yardımcı olan, faydalı bir araçtır.

Seo’da anahtar kelime kullanım oranı son derece önemlidir. Bir anahtar kelimenin çok sayıda ve az sayıda kullanılması sıralamanıza doğrudan etki edebilecek bir faktördür. Ancak hiçbir site için anahtar kelime yoğunluk oranı net bir anlam ifade etmemektedir. Daha önceki birçok yazımızda ortalama %5- 6 örneğini vererek bu konuda bir limit belirlesek de, her anahtar kelime için bu değer farklılık göstermektedir.

Bir kelimenin hangi yoğunluk oranıyla kullanılacağı tamamiyle o anahtar kelimenin rekabet düzeyine bağlıdır. Örneğin bir “haber” kelimesi ile “immobilizer otomobil anahtarı” kelimeleri arasında bir uçurum bulunmaktadır. Bu sebeple her iki kelime için kullanılan sitelerde kelime kullanım yoğunlukları farklı olmalıdır. Bu yoğunluğu da aşağıdaki bilgiler ışığında ayarlamalısınız.

Bir sitenin anahtar kelimesine ait rekabet ne kadar yüksekse, o kelime için yapılan seo çalışmaları da o kadar yavaş ve hassas ilerlemelidir. Aksi halde filtreye girmeniz kaçınılmazdır. Bu sebeple rekabeti yüksek kelimelerde kullanım oranları %2 – 3 aralarına çekilmelidir. Rekabeti olmayan kelimelerde ise %7 – 8 oranların kelime yoğunluğu kullanmanız spam olarak algılanmayacak dolayısıyla sitenizi olumsuz yönde etkilemeyeceği gibi faydası bile olacaktır. Ancak aynı düzeyde yüksek rekabetli bir kelimeyi kullanırsanız sonu kaçınılmaz bir şekilde filtredir.

Tabi ki anahtar kelime yoğunluk oranı tespiti çok esnek bir durumdur. Sitenin yaşı ve backlink kalitesi fazlaysa, Google site içi birçok hatayı görmezden gelebileceği için yoğun kullanımı spam saymayacaktır.

!! Unutulmaması gereken nokta : Örneğin yeni bir oyun sitesi yaptınız, ilk 3 sıradaki sitelerin anahtar kelime yoğunluklarını inceleyip aynı oranları kullanmak istiyorsanız, bu büyük bir hata olacaktır. Bu siteler uzun geçmişi ve sağlam backlink alt yapısı sayesinde yüksek yoğunlukları kaldırabilmektedir. Yalnız aynı durum yeni siteler için söz konusu dahi olmaz.

Kısaca, bir sitenin anahtar kelime yoğunluğu genel itibariyle aşağıdaki kriterlere bağlıdır.

Kaynak - Resouce : http://websitekaydet.com/kelime-yogunlugu-analiz-araci.html

Link Analiz Sorgulama - Link Analizi Nedir?

Bu makalemizde sizlere, link analiz sorgulama aracımızı ve link analizi nedir hakkında bilgiler vermek istiyoruz.

Link Analiz Sorgulama aracımız ile sitenizin, sitelerinizin veya başka sitelerin linkini analiz edebilir. Bu sayede, toplamda sitenin içeriğinde kaç link var. Bunların kaç tanesi iç bağlantılar, kaç tanesi dış bağlantılar ve kaç adet dofollow link yada nofollow link bulunmaktadır, kolayca ve hızlı şekilde öğrenebilirsiniz.

Hemen bu linkteki; Link Analiz aracı ile sitelerinizin link analizi sorgulayayabilirsiniz.



Peki, Link Analizi Nedir?

Link analizi, seo kriterlerine göre şöyle diyebiliriz. Sitenizin ana sayfasında toplamda 100 adet link veya 100'den fazla link bulunması, google, yahoo, yandex, bing. vb arama motorlarının sevmediği bir şeydir ve iç bağlantılarınızın dışında ne kadar çok dış bağlantı bulundurmanız, kendi sitenize değil, yönlendirdiğiniz sitelerin değerini arttırmakta ve arama motorlarında yükselişe geçirmektedir.

İç Bağlantılar; Google ve diğer arama botlarına site içerisinde yol gösterip, tüm sitenizin daha hızlı, daha kolay bir şekilde indexlenmesi için en önemli araç iç bağlantılardır. Düzenli olarak, sitenizde iç bağlantılar kullanmanız, size çok yararlı ve faydalı olacaktır.

Dış Bağlantılar; Siteniz içerinde önerdiğiniz başka sitelerin url (Link) adresleridir. Ne kadar çok dış bağlantı kullanırsanız, siteniz için o kadar kötü olacaktır. Kullandığınız bağlantılar gerek Metin veya Resim üzerinden yapabilmektesiniz.  Dış bağlantı kullanmak yerine iç bağlantı kullanmanızı tercih etmekteyiz.

DoFollow; Sitenizden başka bir siteyi önerecek iseniz, ve bu siteye kefil oluyorsanız. Doğru bilgi içermektedir ve aradığınız şey budur, biz örneksite olarak bu siteyi bilgiyi öneriyoruz, diyorsanız. Dofollow bağlansını kullanırsınız.

Örnek; <a href=”http://websitekaydet.com” rel=”dofollow”>Web Site Kaydet</a>

NoFollow; Sitenizden başka bir siteyi önerecek iseniz, ve bu siteye kefil olmuyorsanız. Doğru bilgi olabilir veya olmayabilir aradığınız şey budur, diyemeyiz fakat şuanda biz örneksite olarak bu siteyi öneriyoruz, diyorsanız. NoFollow bağlansını kullanırsınız.

Örnek; <a href=”http://websitekaydet.com” rel=”nofollow”>Web Site Kaydet</a>

 

 

Kaynak - Resouce : http://websitekaydet.com/link-analiz-sorgulama-link-analizi-nedir.html

Kelime Sayacı - Karakter Sayacı

Kelime Sayacı aracımızı sizlere tanıtalım. Hepimiz gün geçtikçe bir şeyler yazmaktayız. Twitter vb. sosyal ağ platformlarında karakter sınırlaması bulunmaktadır. Çoğu internet sayfasında kelime ve karakter kısıtlaması yaşanmaktadır. Makale yazan editörler ve yazarlar, firmalara belirli karakter uzunluğunda anlaşma yapmakta. Seo uyumlu makale yazarken de, karakter ve kelime oranı çok önemlidir. Yazdığımız makaleleri, metinlerin, kaç kelime ve kaç karakterden oluştuğunu öğrenebilmeniz adına, bu aracı faaliyete geçirdik.

Bu aracı kullanmak bir o kadar basit.
Öncelikle bu linkteki; Kelime Sayacı aracına giriniz.
Yazdığınız makaleyi veya metini (Buraya Metin/Paragraf giriniz) alanına yazabilir veya kopyala yapıştır yaparak da, ekleyebilirsiniz. Son bir işlem olarak Kelime Sayısı butonuna tıklamanız. Aşağıda örnek görsel de gördüğünüz gibi, hızlı bir şekilde size hesaplayacaktır.



Kaynak - Resouce : http://websitekaydet.com/kelime-sayaci-karakter-sayaci.html

Makele Kontrol - Makale Düzeltme - Makale Nedir?

Bugünün ilk makalesinden sizlere; "Makale Kontrol, Makale Düzeltme ve Makale nedir?"  hakkında detaylı bilgi vermeye çalışacağız fakat bir makaleniz var ise kontrol ve yazı imla hatalarınızı düzeltmek için vakit kaybetmek istemiyorsanız.
Hemen bu linkten; MAKALE KONTROL aracımız ile makalenizi kontrol edebilir ve düzenleyebilirsiniz.



Öncelikle; Makale nedir?

Makale alanında uzman bir kimsece yazılan, herhangi bir konuda bilgi vermek amacını güden, bir görüşü desteklemek, bir savı öne sürüp bunu kanıtlamak ereğinde olan ve bir gazete ya da dergide yayımlanan ve başka bir mecralarda, internet sitelerinde belli uzunlukta, başlıklı ve genellikle imzalı y azıdır.
Eğer bir makale yazacak iseniz, bunun belli başlı kuralları vardır. Yayınlayacağınız yere göre dikkat etmeniz gereken yazım, imla, belirtme gibi.
İnternet ortamında, sitenizde veya başka sitelerde yayınlamak için yazacağınız makale, seo uyumlu olması kuralı gibi. Bu arama motorları için gereken, seo kriterlerinden biridir.

Peki; Seo Uyumlu Makale, nasıl yazılır?

Seo uyumlu makale yazmak, yazacağınız makalenin, özgün içerikten oluşması yani özgün kelimelerden üretilmesi, metin içeriğinin seo uyumlu olması kadar, bir o kadar anlamlı, anlamı ifade etmesi ve sitenin içerik optimizasyonu iyi yapılmış olması gerekmektedir.

İlk olarak makalenizin içeriğini yazmadan önce, Oluşturacağınız başlık, makalenin kısa açıklaması, makalenin linki bir birinle uyumlu olması gerekmektedir. Daha sonra yazacağınız makaleyi'de bu temeller üzerinden özgün kelimelerden üretmelisiniz.

1. Meta data İçeriği.
   Meta Data içeriği "Meta Etiketlerini" arama motorlarının içeriğinizi daha iyi anlaması için düzenlenebilir ilgili açıklama ve anahtar kelimeleri barındıran bir yapıdan oluşmalıdır.


2. İçerik Bağlığı ve Açıklaması
   Başlığınız en fazla 66 karakterdenve en az 3 kelimeden oluşmalıdır.Oluşturacağınız başlık anahtar kelimenin tamamını veya bir kısmını içermelidir. Açıklamanız ise 260 karakterden oluşturmalıdır. Aynı şekilde sitenizin meta etiketleriyle ve başlığıyla uyumlu olmalıdır.


3. Makale İçi Başlıklar
   Makale içeriğinde kullanacağınız başlıklardar. H (Heading) etikleri H1,H2,H3,H4,H5,H6 kullanılmalıdır.

Seo Uyumlu makale yazarken dikkat etmeniz ve kaçınmanız gereken kurallara gelecek olursak.

İçeriğinizin anlamsız ve düzensiz olması, sadece bulunabilirlik için yazılmış bir içerik olmaması gerekmektedir. Kullandığınız anahtar kelimelerinin birden fazla altının çizilmesi, kalın veya italik olarak kullanılmamasına gayret gösterin. İçeriğin başka sitelerden kopyalanarak içeriğinde ufak değişiklikler yapmamanızı öneririz. Çünkü Google Bot ve diğer arama motorları botları çok zeki, bunu anlıyorlar.
Özgün olmayan ve optimize edilmeyen görselleri makalenize eklemeniz sizin için yararlı olmayacaktır.

Gelelim, Makale Kontrol - Makale Düzenleme Aracımıza.

Bu araç sayesinde makalelerinizin kontrolünü yapabilir ve yazım hatalarınızı kolayca düzenleyebilirsiniz, zaman kaybetmeden makalenizin profesyonel görünmesini sağlayabilirsiniz.

Makale Kontrol Aracınız Hangi Dillerde Hizmet Vermektedir?
Şuanda aktif olan makale aracımız 7 dil de hizmet vermektedir.

• İngilizce


• Hollandaca


• Fransızca


• Almanca


• İspanyolca


• Endonezya


• Türkçe

Peki, Makale Kontrol - Makale Düzenleme aracı ne işe yarar?

Makalenizin net, anlaşılır ve doğru olmasını;

• Utanç verici hatalar içermemesini;


• Zaman kaybettirmemesini;


• Ciddiye alınmasını;


• Profesyonel görünmesini

sağlar.

Makelinizi kontrol ve düzenleme yaptırdıktan sonra TXT Formatı ve HTML Formatında bilgisayarınıza indirebilirsiniz.

Kaynak - Resouce : http://websitekaydet.com/makele-kontrol-makale-duzeltme-makale-nedir.html

Backlink Sorgulama Aracı - Backlink Nedir?

Bu makalemizde sizlere Backlink Sorgulama Aracımızdan ve backlink nedir, backlink ne işe yarar, backlink çeşitleri nelerdir, nerelerden backlink kazanılır, gibi konuları ele alacağız.

Öncelikle sitenizin kaç backlink'e sahip, kaç site sizi öneriyor öğrenmek istiyorsanız.
Backlink Sorgulama linkinden aracımıza ulaşabilirsiniz.

Backlink Nedir? Backlink Ne Demek?

Backlink, bir sitenin başka bir siteye vermiş olduğu, ön sayfasından veya herhangi bir içerik sayfasından reklam görseli veya text (yazı) linkinin bulunması durumunda arama motoru sonuçlarındaki sıralamasının yükselmesi için önemli olan bir link sistemidir. Backlink önemli Seo kriterlerinden biridir. Yani kısa bir deyişle, kaliteli (yüksek pagerank) değerine ve trustrank'a sitelerin, sitenizin bağlantısını (Linkini) sitelerinde paylaşmalarıdır.

Backlink Ne İşe Yarar?

Backlink aldığınız siteler sayesinde google, bing, yandex, yahoo vb. tüm arama motorlarında backlink aldığınız kelime üzerinde ve farklı varyasyonlarla üst sıralarda çıkmanızı sağlar. Ne kadar kaliteli, değeri yüksek sitelerden alırsanız, sizin için daha yararlı olur.
Mesela, Dizin Rehberi servisimizden, sitelerinizi ekleyerek, websitekaydet.com üzerinden kaliteli backlink sahip olabilirsiniz. Dizin rehberimize yukarıdaki menüden yada bu linkten Site Ekle ulaşabilirsiniz.

Backlink Çeşitleri Nelerdir?

Birden fazla backlink çeşidi vardır. Yani bir çok şekilde backlink kazanabilirsiniz. Backlink oluşturma aracımızla ilgili makalemizi ve ücretsiz backlink kazanabileceğiniz site ve sistemleri sizinle paylaşacağız. Şimdi alt alt sizlere backlink çeşitlerini sıralayalım.

Sosyal İmleme

Pligg ve Dugg gibi web sitelerine yapılan link paylaşımlarının tümüne verilen çalışmalardır.

Dizin

Bazı sitelerin sıralanması ve amaçlarına göre kategoriler oluşturan web siteleridir.

Forum Tanıtımı

Forum sitelerine, web sitelerinin makale tanıtımı şeklinde yayımlanmasıdır. Günümüzde forumlardaki profil alanlarında imza veya site adresi olduğundan bazı kişiler imzasına site adresini ekliyor ve birkaç yorum ile backlink kazanıyor. Bu sebeple günümüzde forumlarda çok sayıda link çıkışı olduğundan forumlardan gelen backlinklerin değeri azalmıştır.

Wikipedia Tanıtım

Wiki tabanlı genelde Media Wiki alt yapısı kullanan web sitelerine yapılan makale paylaşımıdır.

İwebtool Backlink

Google‘ ın çok sevdiği Dizinlerden bir tanesidir ve en eski dizin projelerindendir. Belirli ücret karşılığından yapılmaktadır.

Dmoz Backlink

Google'ın belki de en çok önem verdiği backlink sitesidir. Sitenizi eklemek pek kolay değildir genelde belirli bir kategoride yoğunlaşmış ve o kategoride lider siteler eklenir. Sitenizi eklemek için dmoz.org adresinden başvuru yapabilirsiniz. Başvurular gönüllü editörler tarafından değerlendirilmekte ve yeterli bulunursa söz konusu kategoriye eklenmektedir. Sitenizi eklemek için başvuru yapabileceğiniz gibi editör olmak için de başvuru yapabilirsiniz. Ayrıca şunu da eklemek gerek ki günümüzde ücretli %100 garantili dmoz backlink satılmakta ve alakasız kategorilere site linkleri eklenmektedir.

Footer Link Çıkışı

Sitenin en alt bölümünden link alma şeklidir. Footer bölümünden link alınma durumunda yüksek ihtimalle linkler tüm sayfalarda gözükecektir. Footer link bir anda çok sayıda link sahibi olmanızı sağlar, ancak alakasız sayfalardan linklere sahip olabilirsiniz, bu optimizasyon açısından negatif bir etki olabilir. Aynı şekilde Footer link çıkışı sonucunda linklerin silinmesi negatif bir etki yapacaktır. Backlink için en çok kullanılan bölge olmasına rağmen son dönemde en riskli bölgedir.

Nerelerden backlink kazanılır? Nasıl Backlink Alınır?

Genellikle ücretsiz firma rehberi servislerinden ve ücretsiz toplistlerden backlink kazanabilirsiniz ayriyeten bazı forumlara üye olarak, yeni site tanıtımları alanına sitenizi tanıtan makalenizi ekleyerek, tabi ki makalenizin içeriğinde linklemek istediğiniz anahtar kelimeyi linkleyerek paylaşarak, backlink kazanabilirsiniz.

İlerleyen zamanlarda geniş detaylı olarak, yukarıda bahsettiğimiz gibi, backlink oluşturma aracımızdan sizlere bahsedeceğiz ve ücretsiz backlink oluşturabileceğiniz, siteleri, programları vb. servisleri detaylı olarak sizlere yayınlayacağız.

Kaynak - Resouce : http://websitekaydet.com/backlink-sorgulama-araci-backlink-nedir.html

Robots.txt Oluşturucu - Robots.txt Nedir?

Bu makalemizde sizlere Robots.txt Oluşturucu aracımızı ve robots.txt nedir, robots.txt ne işe yarar, robots.txt örnek kullanım kodlarını anlatmaya çalışacağız.

Robot.txt hakkında bilgiye sahip olan kişiler hemen Robots.txt Oluşturucu Linkinden robots dosyasını oluşturabilir.

Bilmeyenler için robots.txt nedir açıklayım.

Robots.txt dosyası, arama motoru tarayıcılarının sitenizde erişmesini istemediğiniz linkleri ve dizinleri gösteren ve sitenizin kök dizininde bulunan bir dosyadır. Dosya, küçük bir komut setine sahip bir protokol olan Robotları Engelleme Standardı'nı kullanır. Web böceği (ingilizce: web spawler) veya web örümceği (ingilizce: web spider) gibi botların ereşmesini veya indexlenmesini istemediğiniz dizinlerin engelleme standart'ıdır.

Robots.txt ne işe yarar?

Robots.txt, bot'lar sitenize crawl için geldiği zaman, sizlerin belirlediği yerleri crawl edip, etmemek konusunda Robots.txt ihtiyaç duyarlar. Robots.txt içerisinde sizlerin belirlediği komutları algılayarak crawl'lama işlemine başlarlarlar. Eğer Robots.txt'nizde bir sorun varsa, bu sorun crawl'lama işlemine yansıyacaktır ve siteniz crawl edilmeyecektir. Robots.txt dosyası oluşturuluktan sonra alanınızın kök dizinine kayıt edilmesi gerekmektedir (Genellikle httpdocs yada www klasörüdür). Yanlış bir yere kayıt ederseniz bot'lar bulamayacaktır.

Robots.txt nasıl oluşturulur?

Robots.txt dosyasını oluşturmak oldukça kolaydır ancak gerekli komutların ve düzgün yazılması mutlaktır. Yapacağınız en ufak bir yazım yanlışı dosyanızın çalışmamasına neden olacaktır. Robots.txt oluşturmak için basit bir editör (Notepad, Wordpad, Word v.b) kullanabilirsiniz. Örnek olarak Notepad'i ele alacak olursak, Notepad'i açtıktan sonra içerisinde yazmak istediğimiz komutları sıralamamamız gereklidir.

Örnek Kullanımlar

Bütün robotların, site üzerindeki bütün dosyaları tarayabileceğine izin veren örnek; " * " yıldız işareti istisnasız tüm robotları indeksleme yapabileceğini gösterir.

User-agent: *
Disallow:

Bütün robotların, site üzerindeki hiçbir dosyayı taramamasının istendiği örnek;


User-agent: *
Disallow: /

Bütün robotlar, site üzerindeki aşağıdaki 4 klasörün içeriğini indekslememeli;


User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /tmp/
Disallow: /private/

İsmi verilen robot, site üzerindeki ismi verilen klasörün içeriğini indekslememeli;


User-agent: BadBot # 'BadBot' kelimesi ilgili botun adı ile değiştirilir.
Disallow: /private/

Bütün robotlar, site üzerindeki aşağıdaki dosyayı indekslememeli; O klasördeki diğer bütün dosyalar ve sayfalar taratılır.


User-agent: *
Disallow: /directory/file.html

a harfi ile başlayan içerikleri engelleme


User-agent: *
Disallow: /a
#Bu kullanımda siteadi.com/a içeriğinin yanısıra a harfi ile başlayan siteadi.com/about içeriği de engellenmiş olur. Bu yüzden engellemeyi kullanırken lütfen dikkatli olalım.


Kod içinde yorum yazılan örnekler;


# Yorumlar "#" işaretinden sonra bir satır başında ya da bir komuttan sonra kullanılabilir.
User-agent: * # bütün botları kapsasın
Disallow: / # bütün botları uzak tutsun

Uyumluluk

Bütün robotların, bütün sayfalara erişiminin istenmediği durumlarda


Disallow: * # yıldız kullanmak pek uygun olmayacağı için onun yerine " / " kullanın.


Standart Dışı Kullanımlar

Geciktirme komutları

Çoğu büyük web arama botları geciktirme komutunu destekler. Örneğin aşağıdaki örnekte robottan ilgili web sitesinden 10 saniyelik aralıklar ile bilgi çekmesi istemi yapılmıştır.


User-agent: *
Crawl-delay: 10

İzin Ver komutu

Bazı büyük botlar, Allow ( izin ver ) komutu kullanarak Disallow ( kısıtla ) komutunu etkisizleştirmeye imkân verirler. Bu özellikle bütün klasördeki sadece bir dosyanın ya da sayfanın taranmasını istediğiniz durumlarda faydalı olacaktır. Fakat dikkat edilmelidir ki genelde standart olarak robots.txt'nin ilk satırı uygulamaya konulabilir. Fakat Google'ın uygulamasında önce tüm Allow ( izin ver ) komutları işleme konulur daha sonra Disallow komutları işleme konulur. Örneğin;


Allow: /folder1/myfile.html
Disallow: /folder1/

Gelişmiş Standartlar
Bu standardı geliştirmek için Visit-time (ziyaret-saati) ve request-rate (talep-oranı) gibi çeşitli önerilerin yapıldığını An Extended Standard for Robot Exclusion (Robot Engelleme için gelişmiş bir standart) adı altında bir takım öneriler yapılmıştır.


User-agent: *
Disallow: /downloads/
Request-rate: 1/5 # her 5 saniyede maksimum 1 sayfa
Visit-time: 0600-0845 # sadece 06:00 ile 08:45 UTC (GMT) saatleri arasında ziyaret edilme talebi

Bu standardın ilk versiyonunda " * " ya da " Disallow " diye herhangi bir komut yoktu. Googlebot ve Slurp gibi modern arama botları " * " lı komutları tanısa da, MSNbot ve Teoma bu komutu farklı şekilde anlamaktadır.

Diğer Örnekler


Örnek:

User-Agent: *
Allow: /

Örnekteki gibi kullanacağımız komutları yazdıktan sonra; metnimizi Robots.txt olarak kayıt etmeliyiz.

Önemli not: Google Robots.txt dosyasınının küçük harflerle yazılmasını öneriyor!

Robots.txt içerisinde kullanılabilecek komutlar nelerdir?

Robots.txt içerisinde kullanmamız gereken en temel 3 başlık vardır bunlar; User-agent, Allow ve Disallow 'dur.

User-agent: User-agent belirli bir botu belirlemek için kullanılır, örnek olarak;
User-agent: * (Yıldız) kullanımı tüm botları simgeler,
User-agent: Googlebot (Googlebot) kullanımı sadece googlebot'unu simgeler.

Disallow: Disallow kullanımı sitenizin indexlenmemesini istediğiniz bölümleri belirtmeniz için kullanılan bölümdür.

Örnek:

Disallow: / (/ - Eğik çizgi) sitenizin tamamının index'lenmesinin istemediğinizi,
Disallow: /engellenmeyi_istedigimiz_sayfa.html ise sadece indexlenmemesini istemediğimiz sayfayı belirtir.

Önemli not: Google; Disallow komut satırının / (Eğik çizgi) ile başlamasını öneririr.

Allow: Allow komutu bot'ların sayfanızın hangi kısımlarının indexlenmesi gerektiğini belirler. Genellikle; Allow : / olarak kullanılır ki bu; tüm sayfalarınızın indexleneceği anlamına gelir.

Örnek:

User-agent: *
Allow: /

Robots.txt dosyası içerisinde kullanabilecek diğer komutlar:

Sitenin tamamını engellemek için düz eğik çizgi kullanın. Disallow: /
Bir dizini ve o dizinin içinde bulunan tüm öğeleri engellemek için dizin adının sonuna bir düz eğik çizgi koyun. Disallow: /engelenecek_klasor/
Bir sayfayı engellemek için o sayfayı listeleyin. Disallow: /engellenecek_sayfa.html
Belirli bir görseli Google görsel aramasından kaldırmak için şunları ekleyin: User-agent: Googlebot-Image
Disallow: /resimler/engellenecek_resim.jpg
Sitenizdeki görsellerin tümünü Google görsel aramasından kaldırmak için: User-agent: Googlebot-Image
Disallow: /
Belirli bir dosya türündeki dosyaları (örneğin, .gif) engellemek için şunları kullanın: User-agent: Googlebot
Disallow: /*.gif$
Sitenizdeki sayfalarda AdSense reklamları görüntülemeye devam ederken bu sayfaların taranmasını engellemek için Mediapartners-Google dışındaki tüm botları engelleyin. Bu, sayfaların arama sonuçlarında görünmesini engellemekle birlikte Mediapartners-Google robotunun gösterilecek reklamları belirlemek üzere sayfaları analiz etmesine olanak sağlar. Mediapartners-Google robotu, sayfaları diğer Google user-agent'ları ile paylaşmaz. Örneğin: User-agent: *
Disallow: /klasor1/

User-agent: Mediapartners-Google
Allow: /klasor1/
Bir karakter sırasıyla eşleşmek için yıldız (*) kullanabilirsiniz. Örneğin, özel ile başlayan tüm alt dizinlere erişimi engellemek için: User-agent: Googlebot
Disallow: /private*/
Soru işareti (?) içeren tüm URL'lere erişimi engellemek için (daha açık belirtmek gerekirse, alan adınızla başlayan ve ardından herhangi bir dize, bir soru işareti ve herhangi bir dize gelen URL'leri taramasını engellemek için): User-agent: Googlebot
Disallow: /*?
URL sonu eşlemeyi belirtmek için $ karakterini kullanın. Örneğin, .xls ile biten tüm URL'leri engellemek için: User-agent: Googlebot
Disallow: /*.xls$ Bu dize kalıbı eşlemesini, Allow yönergesiyle birlikte kullanabilirsiniz. Örneğin, ? bir oturum kimliğini gösteriyorsa bu öğeleri içeren tüm URL'leri dışlayarak Googlebot'un aynı sayfaları taramasını önleyebilirsiniz. Ancak ? ile biten URL'ler, eklenmesini istediğiniz sayfanın sürümü olabilir. Bu durumda, robots.txt dosyanızı aşağıda gösterildiği biçimde ayarlayabilirsiniz:
User-agent: *
Allow: /*?$
Disallow: /*? Disallow: / *? yönergesi, ? içeren URL'lerin tümünü engeller (daha açık belirtmek gerekirse, alanınızla başlayan ve ardından herhangi bir dize, bir soru işareti ve herhangi bir dize gelen URL'lerin tümünü engeller).
Allow: /*?$ yönergesi, ? ile biten tüm URL'lere izin verir (daha açık belirtmek gerekirse, alanınızla başlayan ve ardından bir dize ve bir ? gelen ve ? işaretinden sonra hiç karakter içermeyen URL'lerin tümüne izin verir).