Arama Motorlarını WordPress Sitenizi Dizine Eklemekten Nasıl Caydırırsınız?
Yayınlanan: 2022-10-12Arama motorları, web sitenizi taramak ve dizine eklemek için tarayıcıları veya başka web robotlarını kullanır. Birçok web sitesi sahibi için, web sitesi içeriğinin dizine eklenmesi, çevrimiçi görünürlüklerini artırmak ve böylece sitelerindeki trafiği artırmak için oldukça önemlidir. Ancak, sitenizin dizine eklenmesini istemeyeceğiniz durumlar vardır. Bu nedenler, arama motorlarının web sitenizi dizine eklemesini nasıl engelleyeceğinizi düşünmenizi sağlayabilir.
Sitenizdeki bir kaynağın veya sayfanın Google aramasında görünmesini engellemek mümkündür. Bu yazıda, arama motorlarının web sitenizi dizine eklemesini nasıl engelleyeceğinizi ve engelleyeceğinizi inceleyeceğiz.
İçindekiler
Google'da Endeksleme ve Listeleme
Arama Motorlarının Web Sitenizi Dizine Eklemesini Engellemek İstemenizin Nedenleri
Arama Motorlarının Web Sitenizi Taramasını ve Dizine Eklemesini Nasıl Engellersiniz?
- Varsayılan WordPress Arama Motoru Görünürlüğü Onay Kutusu aracılığıyla
- Robots.txt dosyasını değiştirme
- Web Sitenizi Parola Korumak
Bir Web Sitesini Google Arama'dan Kaldırma
Çözüm
Google'da Endeksleme ve Listeleme
indeksleme
İndeksleme, site içerik verilerinin toplanıp arama motoru sunucusuna indirilmesi ve ardından verileri merkezi veritabanına (index) ekleyerek saklanması işlemidir.
Dizin oluşturma işleminden önce, arama motorlarının yeni veya güncellenmiş içeriği belirlemek için web'i tarama eğiliminde olduğu Tarama işlemi gelir. Bu içerik, sırayla indekslemede kullanılan şeydir.
Dizin oluşturma, birden fazla sorgu yürüterek tüm içeriği aramaya kıyasla, içerik organize edildiğinden, arama sorgularıyla ilgili verilerin çok daha hızlı oluşturulmasını sağlayacaktır.
Liste
Listeleme, esas olarak web sitenizin Arama Motoru Sonuç Sayfalarında (SERP'ler) oluşturulmasını içerir.
Arama Motoru Sonuç Sayfalarında bir web sitesi görüntüleniyorsa, bu tür bir web sitesinin dizine eklendiği anlamına gelir. Aşağıda bununla ilgili örnek bir ekran görüntüsü verilmiştir:
Ancak indeksleme, esasen web sitenizin SERP'lerde listeleneceği anlamına gelmez.
Bir web sitesinin listelenebilmesi için dizine eklenmesi gerekmediğini de belirtmek önemlidir. Site etki alanına veya başka bir web sitesi içeriğine işaret eden bağlantılar varsa, Google bunu kullanacaktır.
Arama Motorlarının Web Sitenizi Dizine Eklemesini Engellemek İstemenizin Nedenleri
1. Bir geliştirme sitesi oluştururken
Bir site sahibi olarak, çoğu durumda, nihai web sitesini üretime geçirmeden önce web sitenizi bir geliştirme ortamında oluşturmak istersiniz.
Ancak, geliştirme sitesi içeriğinizin Google tarafından dizine eklenmesini istemezsiniz, bu da üretim sitenizle rekabete yol açar. Bu durumda, böyle bir senaryodan kaçınmak için geliştirme sitenizde dizin oluşturmayı devre dışı bırakmanız gerekir.
2. Özel İçerik
Web siteniz, arama motorlarının erişmesini istemediğiniz özel içerik içeriyorsa, bu tür bir sitenin dizine eklenmesini engellemeyi seçebilirsiniz.
Bu tür bir senaryoya örnek olarak, yalnızca bir kullanıcının aboneliği varsa veya yalnızca bir kullanıcı oturum açtığında erişilmesi gereken web sayfalarınız olabilir. Bu tür içerikler dizine eklemek için kullanılabilir hale getirilmemelidir.
3. Saldırıya Uğramış / Ele Geçirilmiş İçerik
Sitenizin saldırıya uğradığı ve dolayısıyla güvenliğinin ihlal edildiği bir senaryoda, bu, site kullanıcılarınız için ve özellikle E-ticaret siteleri söz konusu olduğunda bir güvenlik tehdidi oluşturur.
Bu tür risklerin azaltılmasına yardımcı olmak için sitenin indeksten çıkarılması veya hatta silinmesi uygun olacaktır.
4. Yinelenen İçerik
Bazen, özellikle ürün sayfalarının benzer görünebileceği E-ticaret siteleri söz konusu olduğunda, web sitenizde yinelenen içeriğe sahip olabilirsiniz. Ancak, web sitenizde yinelenen içeriğe sahip olmak, aslında Google tarafından cezalandırılmasına neden olabilir.
Bu nedenle, cezalandırılmaktan kaçınmak için sitenizdeki yinelenen içeriğin indeksini kaldırmak önemlidir.
5. Eski İçerik
Bazı durumlarda, güncel olmayan bilgiler sunan bir web siteniz olabilir ve bu nedenle arama sonuçları bu bilgileri içerir. Bu tür bilgiler sırayla site ziyaretçileri için yanıltıcı olabilir.
Bu nedenle, bu tür durumlarda arama motorlarının bu tür içeriği dizine eklemesini engellemek harika olurdu.
6. Sızan Bilgiler
İçeriğin zamanından önce kamuya açık hale getirilmesi durumunda, arama motorlarının bu tür içeriği dizine eklemesini engellemeniz veya web sitesini yayından kaldırmanız gerekir. Bu, bu içeriğin erişilemez hale getirilmesine yardımcı olacaktır.
7. Zararlı İçerik
Web sitenize zararlı olduğunu düşündüğünüz içeriklerin bulunabileceği durumlarda, web sitesini indeksten çıkarmayı düşünebilirsiniz. Örneğin, siteniz saldırıya uğradıysa ve siteye kötü amaçlı bilgiler eklendiyse bu durum söz konusu olabilir.
Arama Motorlarının Web Sitenizi Taramasını ve Dizine Eklemesini Nasıl Engellersiniz?
Arama motorlarının web sitenizi taramasını ve dizine eklemesini engellemek isteyip istemediğinizi düşünmenin birkaç yolu vardır. Bu yollardan bazılarını sırayla inceleyeceğiz ve her birinin bunu başarmaya nasıl yardımcı olduğunu keşfedeceğiz.
Varsayılan WordPress Arama Motoru Görünürlüğü Onay Kutusu aracılığıyla
Bu yöntem, arama motorlarının web sitenizi doğrudan WordPress panosundan taramasını engellemenizi sağlar. Bunu uygulamak için yapmanız gerekenler:
i) Bir yönetici hesabı kullanarak WordPress panonuza giriş yapın
ii) WordPress panonuzdaki Ayarlar > Okuma bölümüne gidin
iii) "Arama Motoru Görünürlüğü" bölümünde, "Arama motorlarının bu siteyi dizine eklemesini engelle" seçeneğini etkinleştirin.
iv) Değişikliklerinizi kaydedin
Yukarıdakiler gerçekleştirildikten sonra, site başlığınıza aşağıdaki kod eklenir:
<meta name="robots" content="noindex, nofollow">
robots.txt dosyası da şu şekilde değiştirilir:
User-agent: * Disallow: /Bu, arama motorlarının web sitenizi dizine eklemesini engellemeye yardımcı olacaktır. Bununla birlikte, bu değişikliklerin site motorlarının web sitenizi dizine eklemesini engellemeye yardımcı olurken, isteği yerine getirip getirmemenin bireysel arama motorlarına bağlı olduğunu unutmamak önemlidir.
Robots.txt dosyasını değiştirme (manuel)
Yukarıdaki yönteme benzer şekilde, bu, robots.txt dosyasını değiştirmeye yönelik manuel bir yaklaşım olarak kabul edilir.
Bunu başarmak için yapmanız gerekenler:
i) Site dosyalarınıza Filezilla gibi bir FTP yazılımı aracılığıyla erişin
ii) Web sitesi dosyalarınızın kök dizininde robots.txt dosyasını kontrol edin. Çoğu durumda bu, public_html klasörü içindedir.
Dosyayı izlemiyorsanız, bir tane oluşturmayı düşünebilirsiniz.
iii) Dosyaya aşağıdaki kodu ekleyin:
User agent: * Disallow: /iv) Değişikliklerinizi kaydedin
Ayrıca, Disallow: bölümüne alt dizini ve bilgi bilgisini ekleyerek belirli sayfalarda indekslemeye izin vermeyebilirsiniz. Buna bir örnek şöyle olacaktır:
User agent: * Disallow /blog/this-is-a-link-to-our-websiteWeb Sitenizi Parola Korumak
Arama motorları, erişimleri olmadığı için şifre korumalı web sitelerini tarayacak konumda değildir. Bu, web sitenizin dizine eklenmesini önleme söz konusu olduğunda, web sitenizi parola ile korumayı en uygun yaklaşımlardan biri haline getirir.
Sitenizin parola koruması çeşitli yaklaşımlarla sağlanabilir:
i) Barındırma kontrol paneliniz aracılığıyla Parola Koruması
ii) Parola koruma eklentisi kullanma
Barındırma kontrol paneliniz aracılığıyla Parola Koruması
Çeşitli barındırma kontrol panelleri, bir web sitesinde parola korumasının uygulanmasında farklı adımlara sahiptir. Buradaki durumumuzda bir cPanel örneği kullanacağız.
Web sitenizi cPanel üzerinden parola ile korumak için aşağıdakileri yapmanız gerekir:
i) cPanel hesabınıza giriş yapın
ii) Dosyalar bölümüne gidin ve “Dizin Gizliliği”ni seçin
iii) Sitelerinizin kök dizinini seçin. Bizim durumumuzda bu public_html / buddybuilder olacaktır.
iv) Yanındaki "Düzenle" eylemine tıklayın
v) “Bu dizini parolayla koru” seçeneğini etkinleştirin ve değişikliklerinizi kaydedin
vi) "Geri dön" bağlantısına tıklayarak bir önceki adıma dönün ve yeni "Kullanıcı Oluştur" bölümünde web sitesine erişimde kullanılacak yeni bir kullanıcı hesabı oluşturun.
Bu yapıldıktan sonra, arama motorları sitenizi tarayacak konumda olmayacaktır.
Parola koruma eklentisi kullanma
Bu seçenekte, Parola Korumalı eklentiyi kullanmayı düşünebilirsiniz. Eklentiyi kurmak için aşağıdakileri yapmanız gerekecektir:
i) WordPress panonuzdaki Eklentiler > Yeni Ekle bölümüne gidin ve “Parola Korumalı” ifadesini arayın
ii) Eklentiyi kurun ve etkinleştirin
iii) WordPress panonuzdaki Ayarlar > Parola Korumalı bölümüne gidin
iv) “Şifre Korumalı Durum” seçeneğini etkinleştirin ve şifrenizi girin
v) Sitenin korunacağı gün sayısını belirtin
vi) Değişikliklerinizi kaydedin
Bu yöntemde, resim gibi dosyalara doğrudan tarayıcıdan erişildiğinde, şifre korumasının uygulanmadığını ve dolayısıyla resme kolayca erişilebileceğini belirtmek önemlidir.
Bir Web Sitesini Google Arama'dan Kaldırma
Sitenizi zaten Google tarafından dizine eklediğiniz ve siteyi arama motorundan kaldırmak istediğiniz bir durumda, aşağıdakileri yaparak bunu yapabilirsiniz:
i) Google Arama Konsoluna erişin: https://search.google.com/search-console/
ii) Hesap ayrıntılarınızı kullanarak oturum açın. Hesabınız yoksa yukarıdaki bağlantıdan bir tane oluşturabilir ve bir mülk ekleyebilirsiniz. İşte bunun nasıl yapılacağına dair bir kılavuz: https://support.google.com/webmasters/answer/34592?hl=tr
iii) Sol üst kısımda, URL'sini kaldırmak istediğiniz özelliği seçin
iv) “Kaldırma” bölümüne tıklayın
v) “Geçici Kaldırmalar” sekmesinde “Yeni Talep” butonuna tıklayın.
vi) Açılan açılır penceredeki "URL'yi Geçici Olarak Kaldır" sekmesinde, "Yalnızca bu URL'yi kaldır" ve "Bu önek ile tüm URL'leri kaldır" seçeneklerine sahip olacaksınız.
Yalnızca belirtilen URL'yi, örneğin belirli bir blog gönderisini kaldırmak istiyorsanız, URL'sini doldurmanız ve "Yalnızca bu URL'yi kaldır" seçeneğini belirlemeniz gerekir.
Öte yandan, kök etki alanını ve onunla ilişkili diğer URL'leri kaldırmak isterseniz, URL'nizi kök etki alanı olarak doldurmanız ve "Bu önekle tüm URL'leri kaldır" seçeneğini seçmeniz gerekecektir.
vii) Talebinizi göndermek için “İleri” düğmesine tıklayın.
Bu yapıldıktan sonra Google'ın sitenizi geçici olarak arama motorlarından geçici olarak kaldıracağını unutmamak önemlidir. Bu genellikle 6 aydır ve bundan sonra URL'niz bir kez daha dizine eklenebilir, bu nedenle “Arama Motorlarının Web Sitenizi Taramasını ve Dizine Eklemesini Engelleme” çok önemlidir.
Çözüm
Arama motorlarının web sitelerini dizine eklemesini engellemeyi seçmenin birçok nedeni vardır. Bu makalede, arama motorlarının WordPress sitenizi dizine eklemesini engellemek için uygulamayı düşünebileceğiniz bazı yaklaşımların yanı sıra bu nedenlerden bazılarını inceledik.
Varsayılan WordPress arama Motoru görünürlük kutusu yöntemini kullanmak veya robots.txt dosya yöntemlerini değiştirmek, bazı arama motorları için tam olarak etkili olmayabilir, çünkü bazıları örneğin dosyalarınızı veya resimlerinizi taramaya devam edebilir. Bu yöntemleri parola korumasıyla eşleştirmenizi önemle tavsiye ederiz. Bu, arama motorlarının site içeriğinizin herhangi birine erişmesini engeller.
Bu makalenin yardımcı olacağını umuyoruz. Herhangi bir sorunuz, yorumunuz veya öneriniz varsa, lütfen bunları aşağıdaki yorumlar bölümünden göndermekten çekinmeyin.