Jak zniechęcić wyszukiwarki do indeksowania Twojej witryny WordPress?

Opublikowany: 2022-10-12

Wyszukiwarki używają robotów indeksujących lub robotów internetowych do indeksowania i indeksowania Twojej witryny. Dla wielu właścicieli witryn indeksowanie zawartości ich witryn jest bardzo ważne, aby zwiększyć ich widoczność w Internecie, a tym samym zwiększyć ruch w ich witrynach. Istnieją jednak przypadki, w których nie chcesz, aby Twoja witryna była indeksowana. Te powody mogą sprawić, że pomyślisz, jak zniechęcić wyszukiwarki do indeksowania Twojej witryny.

Istnieje możliwość zablokowania wyświetlania zasobu lub strony w Twojej witrynie w wyszukiwarce Google. W tym artykule przyjrzymy się, jak zniechęcić i uniemożliwić wyszukiwarkom indeksowanie Twojej witryny.

Spis treści

Indeksowanie a lista w Google

Powody, dla których chcesz zablokować wyszukiwarki przed indeksowaniem Twojej witryny

Jak zablokować wyszukiwarki przed przeszukiwaniem i indeksowaniem Twojej witryny?

  • Za pomocą domyślnego pola wyboru widoczności w wyszukiwarce WordPress
  • Modyfikowanie pliku Robots.txt
  • Ochrona hasłem Twojej witryny

Usuwanie witryny z wyszukiwarki Google

Wniosek

Indeksowanie a lista w Google

Indeksowanie

Indeksowanie to proces zbierania i pobierania danych o treści witryny na serwer wyszukiwarki, a następnie przechowywania danych poprzez dodanie ich do swojej centralnej bazy danych (indeksu).

Proces indeksowania jest poprzedzony indeksowaniem, w ramach którego wyszukiwarki mają tendencję do skanowania sieci w celu zidentyfikowania nowych lub zaktualizowanych treści. Ta zawartość jest z kolei wykorzystywana w indeksowaniu.

Indeksowanie umożliwi znacznie szybsze renderowanie danych istotnych dla zapytań wyszukiwania, ponieważ treść jest zorganizowana, w porównaniu z przeszukiwaniem całej treści przez wykonywanie wielu zapytań.

Wymienianie kolejno

Wpis dotyczy głównie renderowania Twojej witryny na stronach wyników wyszukiwania (SERP).

Jeżeli strona internetowa wyświetla się na Stronach Wyników Wyszukiwarki oznacza to, że taka strona jest zaindeksowana. Poniżej znajduje się przykładowy zrzut ekranu na ten temat:

Indeksowanie nie oznacza jednak zasadniczo, że Twoja witryna zostanie wymieniona w SERP.

Ważne jest również, aby pamiętać, że strona internetowa nie musi być indeksowana, aby znalazła się na liście. Jeśli istnieją linki wskazujące na domenę witryny lub inną zawartość witryny, Google wykorzysta to.

Powody, dla których chcesz zablokować wyszukiwarki przed indeksowaniem Twojej witryny

1. Tworząc witrynę programistyczną

Jako właściciel witryny w większości przypadków chcesz najpierw utworzyć swoją witrynę w środowisku programistycznym, zanim wypchniesz ostateczną witrynę do produkcji.

Nie chcesz jednak, aby zawartość Twojej witryny programistycznej była indeksowana przez Google, co z kolei doprowadziłoby do konkurencji z Twoją witryną produkcyjną. W takim przypadku musisz wyłączyć indeksowanie w witrynie deweloperskiej, aby uniknąć takiego scenariusza.

2. Treści prywatne

Jeśli Twoja witryna zawiera prywatne treści, których nie chcesz udostępniać wyszukiwarkom, możesz uniemożliwić indeksowanie takiej witryny.

Przykładem takiego scenariusza może być posiadanie stron internetowych, które powinny być dostępne tylko wtedy, gdy użytkownik ma subskrypcję lub tylko wtedy, gdy użytkownik jest zalogowany. Takiej zawartości nie należy udostępniać do indeksowania.

3. Zhakowane/skompromitowane treści

W scenariuszu, w którym Twoja witryna zostanie zhakowana, a tym samym naruszona, stanowi to zagrożenie bezpieczeństwa dla użytkowników Twojej witryny, a zwłaszcza w przypadku witryn e-commerce.

Aby pomóc w ograniczeniu takiego ryzyka, należałoby zdeindeksować witrynę lub nawet ją usunąć.

4. Powiel zawartość

Czasami możesz mieć zduplikowane treści w swojej witrynie, zwłaszcza jeśli chodzi o witryny e-commerce, w których strony produktów mogą wyglądać podobnie. Jednak posiadanie zduplikowanych treści w witrynie może w rzeczywistości prowadzić do nałożenia kary przez Google.

Dlatego ważne jest, aby deindeksować wszelkie zduplikowane treści w witrynie, aby uniknąć kary.

5. Nieaktualna treść

W niektórych przypadkach możesz mieć witrynę wyświetlającą nieaktualne informacje, a tym samym wyniki wyszukiwania zawierają te informacje. Takie informacje mogą z kolei wprowadzać w błąd odwiedzających witrynę.

Byłoby zatem wspaniale zniechęcić wyszukiwarki do indeksowania takich treści w takich sytuacjach.

6. Wyciekły informacje

Jeśli treść zostanie przedwcześnie udostępniona publicznie, należy zniechęcić wyszukiwarki do indeksowania takich treści lub cofnąć publikację witryny. Pomoże to w uniemożliwieniu dostępu do tej treści.

7. Szkodliwe treści

W sytuacjach, w których możesz mieć treści, które możesz uznać za szkodliwe dla Twojej witryny, możesz rozważyć deindeksowanie witryny. Może tak być na przykład w przypadku, gdy Twoja witryna została zhakowana i dodano do niej złośliwe informacje.

Jak zablokować wyszukiwarki przed przeszukiwaniem i indeksowaniem Twojej witryny?

Istnieje kilka sposobów, aby rozważyć, czy chcesz zniechęcić wyszukiwarki do przeszukiwania i indeksowania Twojej witryny. Przyjrzymy się niektórym z tych sposobów w kolejności i zbadamy, w jaki sposób każdy z nich pomaga w osiągnięciu tego celu.

Za pomocą domyślnego pola wyboru widoczności w wyszukiwarce WordPress

Ta metoda pozwala zniechęcić wyszukiwarki do indeksowania Twojej witryny bezpośrednio z pulpitu WordPress. Aby go zaimplementować, będziesz musiał:

i) Zaloguj się do pulpitu WordPress za pomocą konta administratora

ii) Przejdź do sekcji Ustawienia > Czytanie na pulpicie WordPress

iii) W sekcji „Widoczność dla wyszukiwarek” włącz opcję „Zniechęcaj wyszukiwarki do indeksowania tej witryny”

iv) Zapisz zmiany

Po wykonaniu powyższych czynności poniższy kod zostanie dodany do nagłówka Twojej witryny:

 <meta name="robots" content="noindex, nofollow">

Plik robots.txt został również zmodyfikowany do:

 User-agent: * Disallow: /

Pomoże to zniechęcić wyszukiwarki do indeksowania Twojej witryny. Należy jednak pamiętać, że chociaż te zmiany pomagają zniechęcać wyszukiwarki do indeksowania Twojej witryny, to od poszczególnych wyszukiwarek zależy, czy spełnią prośbę, czy nie.

Modyfikowanie pliku Robots.txt (ręcznie)

Podobnie jak w przypadku powyższej metody, jest to uważane za ręczne podejście do modyfikacji pliku robots.txt.

Aby to osiągnąć, będziesz musiał:

i) Uzyskaj dostęp do plików witryny za pomocą oprogramowania FTP, takiego jak Filezilla

ii) W katalogu głównym plików witryny poszukaj pliku robots.txt. W większości przypadków znajduje się to w folderze public_html.

Jeśli wydaje się, że nie śledzisz pliku, możesz rozważyć jego utworzenie.

iii) Dodaj następujący kod do pliku:

 User agent: * Disallow: /

iv) Zapisz zmiany

Możesz także zabronić indeksowania na określonych stronach, dodając podkatalog i informację o slug w sekcji Disallow:. Przykładem może być:

 User agent: * Disallow /blog/this-is-a-link-to-our-website

Ochrona hasłem Twojej witryny

Wyszukiwarki nie są w stanie indeksować stron internetowych chronionych hasłem, ponieważ nie mają do nich dostępu. To sprawia, że ​​ochrona hasłem Twojej witryny jest jednym z najbardziej odpowiednich podejść, jeśli chodzi o zapobieganie indeksowaniu Twojej witryny.

Ochronę witryny hasłem można osiągnąć na różne sposoby:

i) Ochrona hasłem za pośrednictwem panelu sterowania hostingu

ii) Korzystanie z wtyczki ochrony hasłem

Ochrona hasłem za pośrednictwem panelu sterowania hostingu

Różne panele sterowania hostingu mają różne etapy wdrażania ochrony hasłem w witrynie internetowej. W naszym przypadku posłużymy się przykładem cPanel.

Aby zabezpieczyć hasłem swoją witrynę za pośrednictwem cPanel, musisz wykonać następujące czynności:

i) Zaloguj się do swojego konta cPanel

ii) Przejdź do sekcji Pliki i wybierz „Prywatność katalogu”

iii) Wybierz katalog główny swoich witryn. W naszym przypadku będzie to public_html / buddybuilder

iv) Kliknij obok akcji „Edytuj”

v) Włącz opcję „Chroń ten katalog hasłem” i zapisz zmiany

vi) Wróć do poprzedniego kroku, klikając łącze „Wróć” i w nowej sekcji „Utwórz użytkownika” skonfiguruj nowe konto użytkownika, które będzie używane podczas uzyskiwania dostępu do witryny.

Gdy to zrobisz, wyszukiwarki nie będą w stanie zaindeksować Twojej witryny.

Korzystanie z wtyczki ochrony hasłem

W tej opcji możesz rozważyć użycie wtyczki Ochrona hasłem. Aby skonfigurować wtyczkę, musisz wykonać następujące czynności:

i) Przejdź do sekcji Wtyczki > Dodaj nowy w panelu WordPress i wyszukaj „chronione hasłem”

ii) Zainstaluj i aktywuj wtyczkę

iii) Przejdź do sekcji Ustawienia > Ochrona hasłem na pulpicie WordPress

iv) Włącz opcję „Stan ochrony hasłem” i wpisz swoje hasło

v) Określ liczbę dni, przez które witryna będzie chroniona

vi) Zapisz zmiany

Ważne jest, aby pamiętać, że w tej metodzie, gdy pliki, takie jak obrazy, są bezpośrednio dostępne w przeglądarce, ochrona hasłem nie jest stosowana, a zatem obraz jest łatwo dostępny.

Usuwanie witryny z wyszukiwarki Google

W przypadku, gdy masz już swoją witrynę zaindeksowaną przez Google i chcesz usunąć ją z wyszukiwarki, możesz to zrobić, wykonując następujące czynności:

i) Uzyskaj dostęp do Google Search Console: https://search.google.com/search-console/

ii) Zaloguj się przy użyciu danych swojego konta. Jeśli nie masz konta, możesz je utworzyć za pomocą tego samego linku powyżej i dodać usługę. Oto przewodnik, jak się do tego zabrać: https://support.google.com/webmasters/answer/34592?hl=pl

iii) W lewym górnym rogu wybierz usługę z adresem URL, który chcesz usunąć

iv) Kliknij sekcję „Usunięcie”

v) W zakładce „Tymczasowe usunięcia” kliknij przycisk „Nowa prośba”

vi) Na karcie „Tymczasowe usuwanie adresu URL” w wyrenderowanym wyskakującym okienku będą dostępne dwie opcje „Usuń tylko ten adres URL” i „Usuń wszystkie adresy URL z tym prefiksem”.

Jeśli chcesz usunąć tylko określony adres URL, na przykład określony post na blogu, musisz wypełnić jego adres URL i wybrać opcję „Usuń tylko ten adres URL”.

Z drugiej strony, jeśli chcesz usunąć domenę główną i wszelkie inne powiązane z nią adresy URL, musisz wypełnić swój adres URL jako domenę główną i wybrać opcję „Usuń wszystkie adresy URL z tym prefiksem”.

vii) Kliknij przycisk „Dalej”, aby przesłać żądanie.

Należy pamiętać, że po wykonaniu tej czynności Google tymczasowo usunie Twoją witrynę z wyszukiwarek na czas określony. Zwykle jest to 6 miesięcy, a następnie Twój adres URL może zostać ponownie zindeksowany, dlatego tak ważne jest „Zablokuj wyszukiwarki przed przeszukiwaniem i indeksowaniem Twojej witryny”.

Wniosek

Istnieje wiele powodów, dla których można zniechęcić wyszukiwarki do indeksowania ich witryny. W tym artykule przyjrzeliśmy się niektórym z tych powodów, a także niektórym podejściom, które możesz rozważyć, aby zniechęcić wyszukiwarki do indeksowania Twojej witryny WordPress.

Korzystanie z domyślnej metody pola widoczności w wyszukiwarce WordPress lub modyfikowanie metod pliku robots.txt może nie być w pełni skuteczne w przypadku niektórych wyszukiwarek, ponieważ niektóre mogą nadal indeksować, na przykład Twoje pliki lub obrazy. Zdecydowanie zalecamy połączenie tych metod z ochroną hasłem. Uniemożliwia to wyszukiwarkom dostęp do zawartości Twojej witryny.

Mamy nadzieję, że ten artykuł będzie pomocny. Jeśli masz jakieś pytania, komentarze lub sugestie, prześlij je w sekcji komentarzy poniżej.