WordPress Robots.txt kolayca nasıl optimize edilir?

giriiş

Web sitenizin SEO'sunu artırmak için çok sayıda teknik vardır. WordPress Robots.txt dosyasını optimize etmek en iyi yöntemlerden biridir. Arama motorlarının web sitenizi taramasına izin verdiği için, Robots.txt dosyası güçlü bir SEO aracı olarak bilinir. Sonuç olarak, Robots.txt dosyasını değiştirerek sitenizin SEO'sunu özgürce geliştirebilirsiniz. Bugünkü bu blog gönderisinde WordPress Robots.txt dosyasını bu konuyla ilgili optimize etmek için bazı yaklaşımları açık bir şekilde tanıtacağız.

Robots.txt dosyasının tanımı

Aşağıda, WordPress'in Robots.txt dosyasının bir özeti bulunmaktadır.

Şimdi Robot.txt dosyasının temel yapısına bir göz atalım:

Robots.txt dosyasında kullanılan terimleri sizin için tanımlayalım:

• User-agent: Tarayıcının adı
• İzin Verme: Bir web sitesinin sayfalarının, klasörlerinin veya dosyalarının taranmasını engeller.
• İzin ver: dizin, dosya ve sayfa taramayı etkinleştirme
• Varsa, site haritası: Site haritasının konumunu gösterin: bir sayıyı veya harfi temsil edin.
• *: Sayı veya karakter anlamına gelir
• $: Belirli bir uzantı içeren web sayfalarını satır sonuna kadar bekleyerek kısıtlamak için kullanabilirsiniz.

Anlamanıza yardımcı olması için aşağıdaki resme bakalım:

Arama motorlarının Robot.txt örneğindeki WordPress yükleme klasöründeki dosyaları taramasına izin veriyoruz.

Ancak, arama motorlarının oturum açma, kart ve fotoğraf klasörlerine erişimini kısıtlıyoruz.

Son olarak, ona site haritasının URL'sini sağlıyoruz.

WordPress web siteniz için neden bir Robots.txt dosyası oluşturulmalıdır?

Bir Robots.txt dosyası olmadan, arama motorları bir web sitesinin her sayfasını taramaya ve dizine eklemeye devam eder. Yine de, yalnızca belirttiğiniz klasörler veya sayfalar yerine web sitenizdeki tüm materyalleri tarayacaklardır.

İki temel nedenden dolayı web siteniz için bir Robots.txt dosyası oluşturmalısınız. Her şeyden önce, onun yardımıyla web sitenizdeki tüm bilgileri zahmetsizce yönetebilirsiniz. Sayfaların veya dizinlerin taranması veya dizine eklenmesi size bağlıdır. Bu, eklenti dosyaları, yönetici sayfaları veya tema dizinleri gibi sayfaların arama motorları tarafından taranmayacağı anlamına gelir. Sonuç olarak, web sitenizin indeks yükleme hızına yardımcı olacaktır.

Gereksiz yazıların veya sayfaların arama motorları tarafından dizine eklenmesinin engellenmesi gerekliliği de diğer gerekçedir. Bu nedenle, bir WordPress sayfasının veya gönderisinin arama sonuçlarında görünmesini kolayca ve rahat bir şekilde engelleyebilirsiniz.

WordPress Robots.txt nasıl daha verimli bir şekilde optimize edilir?

Bu öğretici blogda, iki farklı yöntem kullanarak WordPress web sitenizde Robots.txt dosyasını nasıl oluşturacağınızı ve geliştireceğinizi göstereceğiz:

• Bir eklenti kullanarak Robots.txt dosyasında değişiklik yapma: All in One SEO
• Robots.txt dosyasını FTP ile manuel olarak düzenleme

Robots.txt dosyasını daha etkili hale getirmek için All in One SEO eklentisini kullanın.

WordPress pazarında bu sorunla ilgili size yardımcı olacak birkaç WordPress SEO Eklentisi mevcuttur. Ancak bu yazıda, size yardımcı olması için 2 milyondan fazla kullanıcısı olan çok sevilen bir eklenti olan All in One SEO'yu kullanmayı seçtik.

Önce Eklentiler -> Yeni Ekle'yi seçerek yükleyelim. sonra eklentinin adını arayın, kurun ve ardından etkinleştirin .

Birkaç basit adımı tamamladıktan sonra yönetici kontrol paneline döneceksiniz. Hemen şimdi Hepsi bir arada SEO -> Araçlar'a gidin.

Etkinleştirmek için Robots.txt Düzenleyici bölümünde Özel Robots.txt'yi Etkinleştir düğmesini açıp kapatalım. Açtıktan sonra, varsayılan Robots.txt dosyasını WordPress'te düzenleyebilirsiniz.

Aşağı kaydırdığımızda, bu eklentinin Robots.txt dosyasının önizlemesini içeren bir kutu görüntülediğini fark edeceksiniz. Bunlar WordPress'in varsayılan kurallarıdır.

Kural Ekle düğmesini seçerek, web sitenizin SEO'suna yardımcı olmak için kendi özel kurallarınızdan daha fazlasını ekleyebilirsiniz.

Yeni bir kural eklemek için kuralı tüm kullanıcı aracılarına uygulamak için User-Agent alanına * girelim.

Sonraki aşamada arama botlarının tarama yapması için Allow veya Disallow'u seçmeniz yeterli.

Bundan sonra Dizin Yolu alanına dosya adını veya dizin yolunu girmeyi unutmayın.

Tüm tercihlerinizi tamamladığınızda, Değişiklikleri Kaydet düğmesine basalım.

Halihazırda eklediğiniz tüm ek kurallar artık Robots.txt dosyasına hemen uygulanacaktır.

FTP kullanarak WordPress Robots.txt dosyasını manuel olarak değiştirin ve optimize edin

Bu, hoşunuza gidebilecek farklı bir WordPress Robots.txt optimizasyonu yaklaşımıdır. Bunu başarmak için Robots.txt dosyasını bir FTP istemcisi kullanarak düzenlemelisiniz.

FPT istemcisini rahat bir şekilde kullanmak için, önce WordPress barındırma hesabınızla bir bağlantı kuralım. Eriştiğinizde sitenizin kök klasöründe bulunan Robots.txt dosyasını kolayca fark edebilirsiniz. Farenin sağ tuşu ile Görüntüle/Düzenle'yi seçelim.

Öte yandan, bulamazsanız muhtemelen hiçbir şeye sahip değilsinizdir. O halde önce sağ fare tuşuyla Yeni bir dosya oluştur'u seçerek web siteniz için bir Robots.txt dosyası oluşturalım.

Robots.txt dosyası bir düz metin dosyasıdır, dolayısıyla onu indirebilir ve diğerlerinin yanı sıra Notepad veya TextEdit gibi bir düz metin düzenleyici kullanarak düzenleyebilirsiniz. Bundan sonra onu web sitenizin kök klasörüne geri yüklemeniz yeterlidir. Kolay görünüyor, sence de öyle değil mi?

WordPress sitenizin Robots.txt dosyasının çalıştığından emin olun.

Robots.txt dosyanız, herhangi bir sorunun tanımlanabilmesi ve bildirilebilmesi için onu hazırlayıp yapılandırdıktan sonra test edilmelidir. Sonuç olarak, bir Robots.txt test aracı kullanarak test etmeniz gerekir. Şiddetle tavsiye ettiğimiz Google Search Console'u deneyin.

Bu hizmeti kullanmak istiyorsanız, web sitenizin Google Search Console'a bağlı olduğundan emin olmalısınız. Ardından, seçim listesinden özelliği seçerek Robots Testing Tool'u kullanabilirsiniz. Web siteniz için Robots.txt dosyası artık otomatik olarak eklenecektir. Bir hata varsa sizi uyaracaktır.

Çözüm

Genel olarak, Robots.txt dosyasını optimize etmenin ana amacı, arama botlarının eklenti klasörleri veya yönetici klasörleri dahil olmak üzere genel halk için gerekli olmayan sayfalara erişmesini durdurmaktır. Sonuç olarak, WordPress etiketlerini, kategorilerini veya arşiv sayfalarını engellemek SEO'nuza yardımcı olmaz. Başka bir deyişle, WordPress siteniz için mükemmel bir Robots.txt dosyası oluşturmak için aşağıdaki kalıba uymalısınız.

Bugünkü blog gönderisini WordPress Robots.txt'yi optimize etmeye yardımcı bulacağınızı umuyoruz. Tanıdıklarınıza ve diğer web yöneticilerine iletmeyi unutmayın. Ayrıca, herhangi bir sorunuz varsa lütfen aşağıya bir yorum bırakın. Bu nedenle, mümkün olan en kısa sürede size yanıt vereceğiz. WordPress Robots.txt dosyasını optimize etmenin zamanı geldi. Gelecek bloglara kadar, kendinize iyi bakın.

Bu arada, bu kullanışlı özelliği tam olarak destekleyen bir ton çağdaş, çekici ve ücretsiz WordPress temamız var. Gidip onları görelim ve birinden web sitenizi yeniden tasarlamasını isteyelim