Sitenizin Robots.txt Dosyasını Düzenleme
3 dk.
Bu makalede
- robots.txt dosyanızı anlama
- robots.txt dosyanızı düzenleme
- robots.txt dosyanızı sıfırlama
- Wix Site Inspection veya Google Search Console'da robots.txt hatası
Önemli:
robots.txt dosyanızı düzenlemek gelişmiş bir özelliktir. Bu dosyada değişiklik yapmak, sitenizin arama sonuçlarında görünmesiyle ilgili sorunlara neden olabilir. Wix Müşteri Hizmetleri, robots.txt dosyası üzerinde yaptığınız değişiklikler konusunda size yardımcı olamaz.
robots.txt dosyası arama motorlarına, arama sonuçlarına sitenizin hangi sayfalarını dahil etmeleri gerektiğini ve hangilerini atlayacaklarını bildirir. Arama motorları sitenizi tarayıp dizine eklediklerinde sitenizin robots.txt dosyasını kontrol eder. Bu, arama motorlarının bir sayfayı veya dosyayı tarayacağını veya taramayacağını garanti etmez, ancak daha az doğru dizine ekleme girişimlerini önlemeye yardımcı olabilir.
Sitenize gönderilen tarama istekleri konusunda daha üst düzey kontrol istiyorsanız, robots.txt dosyanızı düzenleyebilirsiniz.
Sitenize gönderilen tarama istekleri konusunda daha üst düzey kontrol istiyorsanız, robots.txt dosyanızı düzenleyebilirsiniz.
İpucu:
- Arama motorlarının tek bir sayfayı dizine eklemesini engelleyebilirsiniz.
- Robots meta etiketini kullanarak arama motorlarının sitenizin sayfalarını nasıl dizine ekleyeceği konusunda da daha fazla kontrol sahibi olabilirsiniz. Örneğin, arama motorlarına bir sayfadaki herhangi bir bağlantıyı takip etmemesini söylemek için "nofollow" etiketi kullanabilir. Robots meta etiketi hakkında daha fazla bilgi edinin
robots.txt dosyanızı anlama
robots.txt dosyasında, arama motorlarından gelen belirli isteklere izin vermek veya vermemek için talimatlar bulunur. "İzin ver" komutu tarayıcılara takip edebilecekleri bağlantıları söylerken, "disallow" komutu tarayıcılara takip edemeyecekleri bağlantıları söyler. Ayrıca sitenizin site haritası dosyasının URL'si de burada bulunur.
Kök domaininize "/robots.txt" ekleyerek sitenizin robots.txt dosyasını görüntüleyebilirsiniz. Bir örnek şöyle olabilir: https://www.etkileyicisitem.com/robots.txt .
Daha fazla bilgi edinmek ister misiniz?
- robots.txt dosyası hakkındaki makalemizi okumak için Wix SEO Learning Hub'a göz atın.
- Google'ın sitenizin robots.txt dosyasını nasıl yorumladığı hakkında daha fazla bilgi edinin
robots.txt dosyanızı düzenleme
Sitenizin SEO Yönetim Paneli'ndeki Robots.txt Düzenleyicisi'ni kullanarak sitenizin robots.txt dosyasını düzenleyebilirsiniz. Sitenizin robots.txt dosyası, varsayılan olarak arama motoru botlarının sitenizin tüm sayfalarına erişmesine olanak tanır. Aşağıdaki durumlarda botlar belirli sayfalara erişemeyebilir:
- Şifre korumalı sayfalar
- Üyelere özel sayfalar
- Sitenizin editöründen veya sitenizin SEO Ayarlarından dizine eklenmesini engellediğiniz sayfalar
Robots.txt dosyanızda değişiklik yapmadan önce, robot.txt dosyaları için Google yönergeleri ve sınırlamaları'nı kontrol etmenizi öneririz.
Önemli:
Sitenizin robots.txt dosyasını düzenlemek, sitenizin sayfalarının arama sonuçlarında görünmesiyle ilgili sorunlara neden olabilir.
robots.txt dosyanızı düzenlemek için
- SEO Kontrol Panelinize gidin.
- Araçlar ve ayarlar alanından Robots.txt Düzenleyicisine Git'i seçin.
- Dosyayı Göster'e tıklayın.
- Şu anda bu dosyayı kullanıyorsunuz alanındaki talimatları yazarak robots.txt dosya bilgilerinizi ekleyin.
- Değişiklikleri Kaydet'e tıklayın.
- Kaydet'e tıklayın.
İpucu:
- Arama motorları, sitenizi bir sonraki taradıklarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller.
- Daha hızlı güncellemeniz gerekiyorsa, ana sayfanızın URL'sini arama motorlarına göndermeyi deneyebilirsiniz.
robots.txt dosyanızı sıfırlama
Sitenizin robots.txt dosyasını değiştirdiyseniz ve yeniden değiştirmek istiyorsanız, sitenizin SEO Yönetim Paneli'ndeki Robots.txt Düzenleyicisini kullanarak dosyayı varsayılan durumuna sıfırlayabilirsiniz.
robots.txt dosyanızı sıfırlamak için:
- SEO Kontrol Panelinize gidin.
- Araçlar ve ayarlar alanından Robots.txt Düzenleyicisine Git'i seçin.
- Dosyayı Göster'e tıklayın.
- Varsayılana Sıfırla'ya tıklayın.
- Sıfırla'ya tıklayın.
İpucu:
- Arama motorları, sitenizi bir sonraki taradıklarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller.
- Daha hızlı güncellemeniz gerekiyorsa, ana sayfanızın URL'sini arama motorlarına göndermeyi deneyebilirsiniz.
Wix Site Inspection veya Google Search Console'da robots.txt hatası
Bazen Wix Site Denetimi raporunuzda veya Google Search Console hesabınız Blocked by robots.txt gibi hatalar görebilirsiniz.
Böyle bir hata görürseniz, robot.txt dosyanızı, özellikle daha önce hiç düzenlemediyseniz, düzenlemenize gerek yoktur. Bunun yerine, sayfalarınızı aşağıdaki ayarlar için kontrol etmelisiniz:
- Arama motorlarının aşağıdaki nedenlerle sayfaların dizine eklemesi engellenir:
- Sayfanın şifre korumalı olması nedeniyle
- Sayfanın yalnızca üyelere özel olması nedeniyle
Bir sayfayı güncellemeniz gerekirse, Wix, siz sayfayı yayınladıktan sonra robots.txt dosyanızı otomatik olarak günceller. Sitenizin ayarlarını değiştirirseniz, robots.txt dosyanız hemen güncellenir.
Bir değişiklik yaptıktan sonra, arama motorları sitenizi bir sonraki taramalarında robots.txt dosyanızın önbelleğe alınmış sürümünü günceller. Daha önce güncellemeniz gerekiyorsa, ana sayfanızı yeniden dizine eklemesi için arama motorlarına göndermeyi deneyebilirsiniz.