Sitenizin Robots.txt Dosyasını Düzenleme
3 dk.
Bu makalede
- robots.txt dosyanızı anlama
- robots.txt dosyanızı düzenleme
- robots.txt dosyanızı sıfırlama
- Wix Site Inspection veya Google Search Console'da robots.txt hatası
Önemli:
robots.txt dosyanızı düzenlemek gelişmiş bir özelliktir. Bu dosyada değişiklik yapmak, sitenizin arama sonuçlarında görünmesiyle ilgili sorunlara neden olabilir. Wix Müşteri Hizmetleri, robots.txt dosyası üzerinde yaptığınız değişiklikler konusunda size yardımcı olamaz.
robots.txt dosyası arama motorlarına, arama sonuçlarına sitenizin hangi sayfalarını dahil etmeleri gerektiğini ve hangilerini atlayacaklarını bildirir. Arama motorları sitenizi tarayıp dizine eklediklerinde sitenizin robots.txt dosyasını kontrol eder. Bu, arama motorlarının bir sayfayı veya dosyayı tarayacağını veya taramayacağını garanti etmez, ancak daha az doğru dizine ekleme girişimlerini önlemeye yardımcı olabilir.
Sitenize gönderilen tarama istekleri konusunda daha üst düzey kontrol istiyorsanız, robots.txt dosyanızı düzenleyebilirsiniz.
Sitenize gönderilen tarama istekleri konusunda daha üst düzey kontrol istiyorsanız, robots.txt dosyanızı düzenleyebilirsiniz.
İpucu:
- Arama motorlarının, sitenizin editöründeki belirli bir sayfayı dizine eklemesine engel olabilirsiniz.
- Robots meta etiketini kullanarak arama motorlarının sitenizin sayfalarını nasıl dizine ekleyeceği konusunda da daha fazla kontrol sahibi olabilirsiniz. Örneğin, arama motorlarına bir sayfadaki herhangi bir bağlantıyı takip etmemesini söylemek için "nofollow" etiketi kullanabilir. Robots meta etiketi hakkında daha fazla bilgi edinin
robots.txt dosyanızı anlama
robots.txt dosyasında, arama motorlarından gelen belirli isteklere izin vermek veya vermemek için talimatlar bulunur. "İzin ver" komutu tarayıcılara takip edebilecekleri bağlantıları söylerken, "disallow" komutu tarayıcılara takip edemeyecekleri bağlantıları söyler. Sitenizin site haritası dosyasının URL'si de buna dahildir.
Kök domaininize "/robots.txt" ekleyerek sitenizin robots.txt dosyasını görüntüleyebilirsiniz. Bir örnek şöyle olabilir: https://www.etkileyicisitem.com/robots.txt .
Daha fazla bilgi edinmek ister misiniz?
- robots.txt dosyası hakkındaki makalemizi okumak için Wix SEO Learning Hub'a göz atın.
- Google'ın sitenizin robots.txt dosyasını nasıl yorumladığı hakkında daha fazla bilgi edinin
robots.txt dosyanızı düzenleme
Sitenizin robots.txt dosyasını, sitenizin SEO ve GEO kontrol panelindeki Robots.txt editörü'nü kullanarak düzenleyebilirsiniz. Sitenizin robots.txt dosyası, varsayılan olarak arama motoru botlarının sitenizin tüm sayfalarına erişmesine olanak tanır. Aşağıdaki durumlarda botlar belirli sayfalara erişemeyebilir:
- Şifre korumalı sayfalar:
- Üyelere özel sayfalar
- Sitenizin Editöründe veya SEO Ayarlarındadizine eklenmesini engellediğiniz sayfalar
Robots.txt dosyanızda değişiklik yapmadan önce, robot.txt dosyaları için Google yönergeleri ve sınırlamaları'nı kontrol etmenizi öneririz.
Önemli:
Sitenizin robots.txt dosyasını düzenlemek, sitenizin sayfalarının arama sonuçlarında görünmesiyle ilgili sorunlara neden olabilir.
robots.txt dosyanızı düzenlemek için
- Sitenizin kontrol panelindeki SEO ve GEO sekmesine gidin.
- Sayfanın en altındaki Araçlar ve Ayarlar bölümüne gelin.
- Robots.txt Editörü'ne tıklayın.
- Dosyayı Göster'e tıklayın.
- Şu anda bu dosyayı kullanıyorsunuz alanındaki talimatları yazarak robots.txt dosya bilgilerinizi ekleyin.
- Değişiklikleri Kaydet'e tıklayın.
- Kaydet'e tıklayın.
İpucu:
- Arama motorları, sitenizi bir sonraki taradıklarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller.
- Sitenizi daha hızlı güncellemeniz gerekiyorsa, ana sayfanızın URL'sini arama motorlarına göndermeyi deneyebilirsiniz.
robots.txt dosyanızı sıfırlama
Sitenizin robots.txt dosyasını değiştirdiyseniz ve geri almak istiyorsanız, sitenizin SEO ve GEO kontrol panelindeki Robots.txt Editörü'nü kullanarak dosyayı varsayılan durumuna sıfırlayabilirsiniz.
robots.txt dosyanızı sıfırlamak için:
- Sitenizin kontrol panelindeki SEO ve GEO sekmesine gidin.
- Sayfanın en altındaki Araçlar ve Ayarlar bölümüne gelin.
- Robots.txt Editörü'ne tıklayın.
- Dosyayı Göster'e tıklayın.
- Varsayılana Sıfırla'ya tıklayın.
- Sıfırla'ya tıklayın.
İpucu:
- Arama motorları, sitenizi bir sonraki taradıklarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller.
- Sitenizi daha hızlı güncellemeniz gerekiyorsa, ana sayfanızın URL'sini arama motorlarına göndermeyi deneyebilirsiniz.
Wix Site Inspection veya Google Search Console'da robots.txt hatası
Bazen Wix Site Denetleme raporunuzda veya Google Search Console hesabınızda robots.txt tarafından Engellenenler gibi hatalar görebilirsiniz.
Böyle bir hata görürseniz, robot.txt dosyanızı, özellikle daha önce hiç düzenlemediyseniz, düzenlemenize gerek yoktur. Bunun yerine, sayfalarınızı aşağıdaki ayarlar için kontrol etmelisiniz:
- Arama motorlarının aşağıdaki nedenlerle sayfaların dizine eklemesi engellenir:
- Sayfa şifre korumalı
- Sayfa yalnızca üyelereyöneliktir
Bir sayfayı güncellemeniz gerekirse, Wix, siz sayfayı yayınladıktan sonra robots.txt dosyanızı otomatik olarak günceller. Sitenizin ayarlarını değiştirirseniz, robots.txt dosyanız hemen güncellenir.
Bir değişiklik yaptıktan sonra, arama motorları sitenizi bir sonraki taramalarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller. Daha kısa sürede güncellemeniz gerekiyorsa, ana sayfanızı yeniden dizine eklenmesi için arama motorlarına göndermeyi deneyebilirsiniz.