Araştırma Motorlarının Bir WordPress Web Sitesini Taramasını Durdurma

Yayınlanan: 2022-11-02


Kısa bir süre önce, çalışanlarımızdan biri bize arama motorlarının WordPress web sitelerini taramasını ve dizine eklemesini nasıl sonlandırabileceklerini sordu.

Arama motorlarının web sayfanızı taramasını ve arama nihai sonuçlarında listelemesini engellemek isteyeceğiniz birkaç durum vardır.

Bu yazıda, arama motorlarının bir WordPress web sayfasını taramasını nasıl durduracağınızı göstereceğiz.

How to Stop Search Engines From Crawling a WordPress Site

Arama Motorlarının Bir WordPress Web Sitesini Taramasını Neden Sonlandırmalı?

Çoğu WordPress web sitesi için arama motorları, ziyaretçilerin en büyük kaynağıdır. Konuşabilirsin, neden herkes arama motorlarını engellemek istesin ki?

Aşağıda, araştırma motorlarının web sayfanızı dizine eklemesini istemeyeceğiniz bazı durumlar verilmiştir:

  • Başlarken, mahalle iyileştirme doğal ortamını veya sahneleme web sayfasını nasıl oluşturacağınızı bilmiyor olabilirsiniz ve bunun yerine canlı olmasına rağmen web sitenizi satın alabilirsiniz. Google'ın web sitenizi yapım aşamasındayken veya bakım modundayken dizine eklemesini istemeyeceksiniz.
  • Özel web günlükleri oluşturmak için WordPress kullanan epeyce insan da var. Özel oldukları için arama motorları tarafından dizine eklenmesini istemiyorlar.
  • İş yönetimi veya bir intranet için WordPress kullanabilirsiniz. Bu koşullarda, iç evraklarınızın herkesin erişimine açık olmasını istemezsiniz.

Yaygın bir yanılgı, hiçbir zaman alanınıza işaret eden bağlantılarınız yoksa, arama motorlarının muhtemelen web sitenizi asla bulamayacaklarıdır. Bu kesinlikle gerçek değil.

Örneğin, alan adı daha önce başka bir kişiye ait olduğu için web sitenize yönlendiren bağlantılar olabilir. Ayrıca, dünya çapında web üzerinde temel olarak alan adlarını listeleyen sayısız sayıda web sayfası vardır. Web sayfanız muhtemelen bunlardan sadece birinde görünebilir.

Bu iddia edildiğinde, araştırma motorlarının sitenizi taramasını nasıl durduracağınıza bir göz atalım. 4 prosedürü koruyacağız:

Yaklaşım 1: Arama Motorlarından WordPress Sitenizi Taramamasını İstemek

Bu en kolay stratejidir ancak web sitenizi taranmasını kesinlikle engellemez.

WordPress, araştırma motorlarına web sitenizi dizine eklememeleri talimatını vermenizi sağlayan gelişmiş bir özellik ile birlikte gelir. Tek yapmanız gereken Seçenekler » Okumak ve 'Arama Motoru Görünürlüğü'nün yanındaki kutuya bakmak.

WordPress'te Arama Motoru Görünürlük Ayarı

Bu kutu işaretlendiğinde, WordPress bu satırı web sitenizin başlığına sağlar:


WordPress ayrıca sitenizin robots.txt dosyasını değiştirir ve dosyaya şu suşları ekler:

Person-agent: *
Disallow: /

Bu türler, web sayfalarınızı dizine eklememek için robotlarla (internet tarayıcıları) kontrol eder. Yine de, bu talebi kabul etmek veya görmezden gelmek için motorları aramak kesinlikle size kalmış. Çoğu araştırma motoru buna saygı duysa da, bazı internet sayfalarının veya web sitenizdeki görsellerin dizine eklenme olasılığı vardır.

Araştırma motorlarının sitenizi dizine eklemesini veya taramasını imkansız hale getirmek istiyorsanız, Yöntem 3 veya 4'ü kullanarak WordPress web sitenizi parolayla korumanız gerekecektir.

2. İşlem: Kişisel Web sayfalarını Taramak İçin Arama Motorlarını Sorgulama

Arama motorlarının web sitenizi taramasını ve dizine eklemesini isteyebilirsiniz, ancak belirli gönderileri veya web sayfalarını arama nihai sonuç web sayfalarına dahil etmemelisiniz.

Bunu yapmanın en az zor yolu, Hepsi Bir Arada Web optimizasyonu (AIOSEO) eklentisini uygulamak. WordPress için en etkili Web sitesi konumlandırma aracıdır ve 3 milyondan fazla kuruluş tarafından güvenilmektedir.

Bu eğitim için, Web optimizasyonu Analiz yazılımından oluştuğu için AIOSEO'nun ücretsiz sürümü ile çalışacağız. AIOSEO'nun site haritası ekipmanı, yeniden yönlendirme yöneticisi, şema işaretleme, robots.txt düzenleyici ve daha fazlası gibi çok daha fazla özelliği içeren yüksek kaliteli bir sürümü de bulunmaktadır.

Başlamak için yapmanız gereken şey, web sitenize AIOSEO eklentisini yüklemek ve etkinleştirmektir. WordPress için Hepsi Bir Arada Arama motoru optimizasyonunun nasıl kurulacağına ilişkin adım adım kılavuzumuzu takip ederek eklentiyi nasıl kuracağınızı ve yapılandıracağınızı öğrenin.

Eklenti kurulduğunda, arama motorlarından belirtilen gönderileri ve internet sayfalarını dizine eklememesini istemek için kullanabilirsiniz. Bir kez daha, bu talebi kabul etmek veya görmezden gelmek için motorları aramak kesinlikle bağlıdır.

Dizine eklenmesini istemediğiniz gönderiyi veya web sayfasını düzenlemeniz yeterlidir. WordPress düzenleyicisinin altındaki AIOSEO Ayarlarına gitmek ve ardından 'Gelişmiş' sekmesine tıklamak istiyorsunuz.

AIOSEO Gelişmiş Ayarlar

Gönderinin varsayılan robot ayarlarını kullandığına dikkat edin. Bunu ayarlamak için, 'Varsayılan Ayarları Kullan' anahtarını kapalı konuma getirmek istiyorsunuz.

Arama Motorlarından Tek Bir Sayfayı Dizine Eklememesini İsteme

Artık 'Dizin Yok' onay kutusunu tıklayabilirsiniz. Gönderi yayınlandığında veya güncellendiğinde, araştırma motorlarının dizine eklememesi sorgulanacaktır.

Yöntem 3: cPanel Kullanarak Tüm Bir İnternet Sitesini Parolayla Koruma

WordPress web barındırma sağlayıcınız, web barındırma hesabınızı yönetmesi için cPanel'e izin veriyorsa, cPanel ile çalışarak tüm web sayfanızı koruyabilirsiniz. Tek yapmanız gereken cPanel panonuza giriş yapmak ve ardından 'Dosyalar' bölümündeki 'Directory Privacy' ikonuna tıklamak.

cPanel'in Dizin Gizlilik Özelliğini Kullanma

Ardından, WordPress'i kurduğunuz klasöre rastlamanız gerekir. Genellikle public_html klasörüdür. Bundan sonra, o klasörün yanındaki 'Düzenle' düğmesine tıklamanız gerekecek.

Kök Klasörü Düzenleyin

Not: Genel public_html dizini altına monte edilmiş çeşitli WordPress web siteleriniz varsa, o zaman basitçe tıklamanız gerekir. Bu internet sitelerine bakmak için public_html url'sini kullanın ve ardından parola ile savunmak istediğiniz web sitesinin klasörünü düzenleyin.

Bu, şifre güvenliğini dönüştürebileceğiniz her yerde size bir ekran sunar.

'Bu dizini parola ile koruyun' yazan kutuyu işaretleyin ve 'Kaydet' düğmesini tıklayın. İsterseniz, güvenli listeleme için kimliği de özelleştirebilirsiniz.

Bu Dizini Parolayla Korumak İçin Kutuyu İşaretleyin

Giriş için erişim izinlerinin iyileştirildiğini söyleyen bir onay mesajı göreceksiniz.

Yaklaşan, 'Geri Dön' düğmesine tıklamanız gerekiyor.

cPanel Dizini Gizlilik Başarı Mesajı

Tam olarak bu listeye erişirken kullanılması gerekecek bir kullanıcı adı ve şifre oluşturabileceğiniz bir ekrana yönlendirileceksiniz.

Bir kullanıcı adı ve şifre girmeniz ve ardından şifreyi onaylamanız gerekir. Kullanıcı adınızı ve şifrenizi, şifre yöneticisi uygulaması gibi güvenli bir yerde gördüğünüzden emin olun.

Bir Kullanıcı Adı ve Parola ekleyin

'Kaydet' düğmesine tıkladığınızda, WordPress web siteniz için başarılı bir şekilde ek şifre savunmanız olur.

Artık, bir tüketici veya motor arayan bir kişi web sitenizi her ziyaret ettiğinde, web sitesini görmek için daha önce oluşturduğunuz kullanıcı adı ve şifreyi girmeleri istenecektir.

Web Sitenize Erişmek İçin Artık Bir Kullanıcı Adı ve Parola Gerekiyor

Yöntem 4: Bir Eklenti İle WordPress'i Parolayla Koruma

Yönetilen bir WordPress web barındırma alternatifi kullanıyorsanız, cPanel'e erişiminiz olmayabilir. Bu durumda, internet sitenizi parola ile korumak için bir WordPress eklentisi kullanabilirsiniz.

Bu makalede en popüler iki alternatif bulunmaktadır:

  1. SeedProd, 800.000'den fazla web sitesinde uygulanan, WordPress için 1 numaralı hızla gelen ve bakım yöntemi eklentisidir. Web sitenizi arama motorları dahil kesinlikle herkesten gizlemek için kullanabileceğiniz kapsamlı edinme yönetimi ve izin özellikleri ile birlikte gelir. SeedProd için adım adım nasıl yapılır kılavuzumuz var.
  2. Password Secured, WordPress sitenizi tek bir parolayla (kullanıcı üretimi istenmez) parolayla korumanın gerçekten karmaşık olmayan bir yoludur. Bir WordPress web sayfasının parola ile nasıl korunacağına ilişkin adım adım kılavuzumuza bakın.

Bu kısa makalenin, arama motorlarının WordPress sitenizi taramasını veya dizine eklemesini bırakmanıza yardımcı olacağını umuyoruz. Ayrıca, web sitenizin genel performansını nasıl hızlandıracağınızı öğrenmek veya yeni başlayanlar için adım adım en büyük WordPress güvenlik eğitimimizi görmek isteyebilirsiniz.

Bu yazıyı tercih ettiyseniz, WordPress video eğitimleri için YouTube Kanalımıza abone olmayı unutmayın. Bize Twitter ve Facebook'tan da ulaşabilirsiniz.