Jeśli przeglądałeś zaplecze WordPressa, być może zauważyłeś ustawienie o treści „Nie zezwalaj wyszukiwarkom na indeksowanie tej witryny” i zastanawiałeś się, co ono oznacza.
A może szukasz sposobu na ukrycie swojej witryny przed niechcianymi użytkownikami i zastanawiasz się, czy zaznaczenie tego jednego małego pola wyboru wystarczy, aby zapewnić prywatność Twoich treści.
Co oznacza ta opcja? Co dokładnie robi z Twoją witryną? I dlaczego powinieneś unikać polegania na niej — nawet jeśli próbujesz ukryć swoją treść?
Poniżej znajdziesz odpowiedzi i kilka innych metod usuwania indeksu z Twojej witryny i blokowania dostępu do niektórych stron.
Sprawdź nasze Przewodnik wideo do korzystania z opcji „Zniechęcaj wyszukiwarki do indeksowania tej witryny” w WordPressie
Co oznacza „Zniechęcaj wyszukiwarki do indeksowania tej witryny”?
Czy kiedykolwiek zastanawiałeś się, jak wyszukiwarki indeksują Twoją witrynę i oceniają Twoje SEO? Robią to za pomocą zautomatyzowanego programu zwanego pająkiem, znanego również jako robot lub crawler. Pająki „przeszukują” sieć, odwiedzając witryny i rejestrując wszystkie Twoje treści.
Google używa ich do ustalania pozycji i rankingu Twojej witryny w wynikach wyszukiwania, pobierania opisów z Twoich artykułów na stronę wyników wyszukiwania i pobierania zdjęć do Google Images.
Gdy zaznaczysz „Zniechęcaj wyszukiwarki do indeksowania tej witryny”, WordPress modyfikuje plik robots.txt (plik, który zawiera instrukcje dla robotów, jak indeksować witrynę). Może również dodać meta tag do nagłówka witryny, który informuje Google i inne wyszukiwarki, aby nie indeksowały żadnej zawartości w całej witrynie.
Kluczowym słowem w tym przypadku jest „zniechęcanie”: wyszukiwarki nie mają obowiązku honorowania tej prośby, zwłaszcza wyszukiwarki, które nie korzystają ze standardu pliki robots.txt składnia, którą stosuje Google.
Roboty sieciowe nadal będą mogły znaleźć Twoją witrynę, ale prawidłowo skonfigurowane roboty odczytają Twoją witrynę. pliki robots.txt i opuszczają witrynę bez indeksowania treści i wyświetlania jej w wynikach wyszukiwania.
W przeszłości ta opcja w WordPressie nie zatrzymywała Google przed pokazywaniem Twojej witryny w wynikach wyszukiwania, a jedynie przed indeksowaniem jej zawartości. Nadal możesz zobaczyć swoje strony w wynikach wyszukiwania z błędem, takim jak „Brak informacji dostępnych dla tej strony” lub „Opis tego wyniku jest niedostępny z powodu pliku robots.txt witryny”.
Chociaż Google nie indeksowało strony, nie ukryło jej również całkowicie. Ta anomalia spowodowała, że ludzie mogli odwiedzać strony, których nie powinni byli widzieć. Dzięki WordPress 5.3 działa teraz prawidłowo, blokując zarówno indeksowanie, jak i wyświetlanie witryny.
Możesz sobie wyobrazić, jak bardzo zniszczyłoby to Twoje SEO, gdybyś włączył to przez przypadek. Jest to krytyczne, aby używać tej opcji tylko wtedy, gdy naprawdę nie chcesz, aby ktokolwiek widział Twoje treści — i nawet wtedy może to nie być jedyny środek, który chcesz podjąć.
Dlaczego możesz nie chcieć indeksować swojej witryny
Strony internetowe są tworzone, aby były widoczne dla ludzi. Chcesz, aby użytkownicy czytali Twoje artykuły, kupowali Twoje produkty, konsumowali Twoje treści — dlaczego celowo próbowałbyś blokować wyszukiwarki?
Istnieje kilka powodów, dla których możesz chcieć ukryć część lub całą swoją witrynę.
- Twoja witryna jest w fazie rozwoju i nie jest jeszcze gotowa do udostępnienia jej publicznie.
- Używasz WordPressa jako systemu zarządzania treścią, ale chcesz zachować jej prywatność.
- Próbujesz ukryć poufne informacje.
- Chcesz, aby Twoja witryna była dostępna tylko dla niewielkiej liczby osób za pośrednictwem linku lub za pośrednictwem zaproszeń, a nie za pośrednictwem publicznych stron wyszukiwania.
- Chcesz udostępnić część treści za opłatą lub inną bramką, np. artykuły dostępne wyłącznie w newsletterach.
- Chcesz zablokować dostęp do starych, nieaktualnych artykułów.
- Chcesz uniknąć kar SEO na stronach testowych lub duplikacji treści.
W przypadku niektórych z nich istnieją lepsze rozwiązania — skorzystanie z odpowiedniego serwera programistycznego offline, ustawienie artykułów jako prywatnych lub zabezpieczenie ich hasłem — ale istnieją uzasadnione powody, dla których możesz chcieć usunąć indeksację części lub całej witryny.
Jak sprawdzić, czy Twoja witryna zniechęca wyszukiwarki
Chociaż możesz mieć uzasadnione powody, aby usunąć indeksowanie swojej witryny, może być strasznym szokiem dowiedzieć się, że włączyłeś to ustawienie bez powodu lub pozostawiłeś je włączone przez przypadek. Jeśli nie masz żadnego ruchu i podejrzewasz, że Twoja witryna nie jest indeksowana, oto jak to potwierdzić.
Jednym z prostych sposobów jest sprawdzenie Na pierwszy rzut oka pole znajdujące się na ekranie głównym pulpitu administratora. Wystarczy zalogować się do zaplecza i zaznaczyć pole. Jeśli zobaczysz „Wyszukiwarki zniechęcone”, oznacza to, że aktywowałeś to ustawienie.
Jeszcze bardziej niezawodnym sposobem jest sprawdzenie pliki robots.txtMożesz to łatwo sprawdzić w przeglądarce, nawet nie logując się do swojej witryny.
Aby sprawdzić pliki robots.txtwystarczy dodać /robots.txt na końcu adresu URL swojej witryny. Na przykład: https://kinsta.com/robots.txt
Jeżeli widzisz Disallow: /, oznacza to, że cała Twoja witryna została zablokowana przed indeksowaniem.
Jeśli widzisz Disallow: po którym następuje ścieżka URL, np. Disallow: /wp-admin/, oznacza to, że każdy URL ze ścieżką /wp-admin/ jest blokowany. Taka struktura jest normalna dla niektórych stron, ale jeśli na przykład blokuje /blog/, który zawiera strony, które chcesz indeksować, może to powodować problemy!
Teraz, gdy WordPress używa meta tagów zamiast pliki robots.txt Aby usunąć indeksację witryny, należy również sprawdzić nagłówek pod kątem zmian.
Zaloguj się do swojego zaplecza i przejdź do Wygląd > Edytor motywów. Znajdować Nagłówek motywu (header.php) i poszukaj następującego kodu:
Możesz również sprawdzić funkcje.php dla znacznika noindex, gdyż za pomocą tego pliku można zdalnie wstawić kod do nagłówka.
Jeśli znajdziesz ten kod w plikach motywu, to Twoja witryna nie jest indeksowana przez Google. Zamiast usuwać go ręcznie, spróbujmy najpierw wyłączyć oryginalne ustawienie.
Jak zniechęcić do indeksowania przez wyszukiwarki w WordPressie
Jeśli chcesz pominąć dodatkowe kroki i przejść bezpośrednio do pierwotnego ustawienia, poniżej znajdziesz instrukcję, jak włączyć lub wyłączyć opcję „Zniechęcaj wyszukiwarki” w WordPressie.
Zaloguj się do pulpitu WordPress i przejdź do Ustawienia > Czytanie. Poszukaj Widoczność w wyszukiwarkach opcję z polem wyboru oznaczonym „Nie zezwalaj wyszukiwarkom na indeksowanie tej witryny”.
Jeśli stwierdzisz, że ta opcja jest już włączona i chcesz, aby Twoja witryna została zindeksowana, odznacz ją. Jeśli zamierzasz uniemożliwić indeksowanie swojej witryny, zaznacz ją (i zanotuj gdzieś notatkę przypominającą o jej późniejszym wyłączeniu!).
Teraz kliknij Zapisz zmiany, i gotowe. Może minąć trochę czasu, zanim Twoja witryna zostanie ponownie zaindeksowana lub usunięta z wyników wyszukiwania.
Jeśli Twoja witryna nadal nie jest indeksowana, możesz również usunąć kod noindex z pliku nagłówkowego lub ręcznie edytować pliki robots.txt aby usunąć flagę „Disallow”.
To dość proste. Ale dlaczego warto unikać tej opcji lub przynajmniej nie polegać na niej w pełni?
Wady korzystania z opcji „Zniechęcaj wyszukiwarki”
Wydaje się to proste — zaznacz pole wyboru, a nikt nie będzie mógł zobaczyć Twojej witryny. Czy to nie jest wystarczająco dobre? Dlaczego powinieneś unikać korzystania z tej opcji osobno?
Po włączeniu tego ustawienia lub jakiejkolwiek podobnej opcji, jedyne co się stanie, to dodanie znacznika do nagłówka lub pliki robots.txtJak pokazują starsze wersje WordPressa, które nadal pozwalają na wyświetlanie Twojej witryny w wynikach wyszukiwania, niewielka usterka lub inny błąd może spowodować, że ludzie zobaczą Twoje rzekomo ukryte strony.
Ponadto to wyłącznie wyszukiwarki muszą uszanować prośbę o nieindeksowanie Twojej witryny. Główne wyszukiwarki, takie jak Google i Bing, zazwyczaj to robią, ale nie wszystkie wyszukiwarki używają tego samego pliki robots.txt składni, a nie wszystkie roboty indeksujące sieć są wysyłane przez wyszukiwarki.
Na przykład jedną z usług wykorzystujących roboty sieciowe jest Maszyna Wayback. A jeśli Twoja treść jest indeksowana przez taką usługę, pozostaje w sieci na zawsze.
Możesz myśleć, że skoro Twoja nowa witryna nie ma żadnych linków do niej, to jest bezpieczna przed pająkami, ale to nieprawda. Obecność na współdzielonym serwerze, wysłanie wiadomości e-mail z linkiem do Twojej witryny lub nawet odwiedzenie Twojej witryny w przeglądarce (szczególnie Chrome) może spowodować, że Twoja witryna zostanie przeszukana.
Jeśli chcesz ukryć treść, nie jest dobrym pomysłem dodawanie parametru i liczenie na to, że on zadziała.
I bądźmy szczerzy, jeśli treść, którą chcesz usunąć z indeksu, ma charakter poufny lub osobisty, w żadnym wypadku nie powinieneś polegać na pliki robots.txt lub meta tag, aby go ukryć.
Ostatnia, ale nie mniej ważna opcja – ta opcja całkowicie ukryje Twoją witrynę przed wyszukiwarkami, podczas gdy często chcesz tylko usunąć indeksację niektórych stron.
Co więc powinieneś robić zamiast tej metody lub równolegle z nią?
Inne sposoby zapobiegania indeksowaniu przez wyszukiwarki
Chociaż opcja oferowana przez WordPress zazwyczaj spełnia swoje zadanie, w pewnych sytuacjach często lepiej jest zastosować inne metody ukrywania treści. Nawet sam Google mówi nie używaj pliku robots.txt do ukrywania stron.
Jeśli Twoja witryna ma nazwę domeny i znajduje się na serwerze publicznym, nie masz gwarancji, że Twoje treści nie zostaną wyświetlone lub zaindeksowane przez roboty, chyba że je usuniesz lub ukryjesz pod hasłem lub wymogiem logowania.
A zatem, jakie są lepsze sposoby na ukrycie swojej witryny lub niektórych jej stron?
Blokuj wyszukiwarki za pomocą .htaccess
Chociaż jego wdrożenie jest funkcjonalnie takie samo jak użycie opcji „Zniechęcaj wyszukiwarki”, możesz chcieć użyć jej ręcznie Plik .htaccess aby zablokować indeksowanie Twojej witryny.
Będziesz musiał użyć programu FTP/SFTP, aby uzyskać dostęp do swojej witryny i otworzyć plik .htaccess, który zwykle znajduje się w folderze głównym (pierwszym folderze widocznym po otwarciu witryny) lub w publiczny_html. Dodaj ten kod do pliku i zapisz:
Header set X-Robots-Tag "noindex, nofollow"
Uwaga: Ta metoda działa tylko dla serwerów Apache. Serwery NGINX, takie jak te działające na Kinsta, będą musiały dodać ten kod do .konf zamiast tego plik, który można znaleźć w /etc/nginx/ (możesz znaleźć przykład implementacja meta tagu Tutaj):
add_header X-Robots-Tag "noindex, nofollow";
Zabezpiecz hasłem wrażliwe strony
Jeśli są pewne artykuły lub strony, których nie chcesz, aby wyszukiwarki indeksowały, najlepszym sposobem na ich ukrycie jest zabezpieczenie hasłem swojej witryny. W ten sposób tylko Ty i wybrani przez Ciebie użytkownicy będziecie mogli zobaczyć tę treść.
Na szczęście ta funkcjonalność jest wbudowana w WordPress, więc nie ma potrzeby instalowania żadnych wtyczek. Wystarczy przejść do Posty Strony i kliknij na ten, który chcesz ukryć. Edytuj swoją stronę i poszukaj Status i widoczność > Widoczność menu po prawej stronie.
Jeśli nie używasz Gutenberga, proces jest podobny. To samo menu znajdziesz w Publikować skrzynka.
Zmień Widoczność Do Zabezpieczone hasłem i wprowadź hasło, a następnie zapisz — Twoja treść będzie teraz ukryta przed ogółem społeczeństwa.
Co jeśli chcesz zabezpieczyć hasłem całą swoją witrynę? Niepraktyczne jest wymaganie hasła dla każdej pojedynczej strony.
Użytkownicy Kinsta mają szczęście: mogą włączyć ochronę hasłem w Witryny > Narzędziawymagając podania nazwy użytkownika i hasła.
W przeciwnym wypadku możesz użyć wtyczki ograniczającej zawartość (np. Zabezpieczone hasłem). Zainstaluj i aktywuj, a następnie przejdź do Ustawienia > Zabezpieczone hasłem i włącz Status chroniony hasłem. Dzięki temu masz większą kontrolę, a nawet możesz dodać określone adresy IP do białej listy.
Ważny
Ta wtyczka nie była aktualizowana od ponad 11 miesięcy od momentu napisania tego tekstu. Może nie być już utrzymywana ani obsługiwana i może mieć problemy ze zgodnością z najnowszymi wersjami WordPressa.
Zainstaluj wtyczkę WordPress
Jeśli domyślne funkcje WordPressa nie wystarczają, często dobrym rozwiązaniem może okazać się zastosowanie dobrej wtyczki.
Na przykład, jeśli chcesz usunąć indeksację określonych stron, a nie całej witryny, Yoast ma taką opcję dostępną.
W Yoast SEO możesz otworzyć stronę, którą chcesz ukryć i poszukać opcji pod nią Zaawansowany patka: Czy zezwolić wyszukiwarkom na wyświetlanie tego wpisu w wynikach wyszukiwania? Zmień to na NIE a strona zostanie ukryta.
Należy zauważyć, że oba te rozwiązania opierają się na tych samych metodach, co domyślna opcja WordPressa, aby zniechęcić wyszukiwarki do indeksowania, i podlegają tym samym wadom. Niektóre wyszukiwarki mogą nie uwzględnić Twojej prośby. Będziesz musiał zastosować inne metody, jeśli naprawdę chcesz całkowicie ukryć tę treść.
Innym rozwiązaniem jest zapłacenie za swoją treść lub ukrycie jej za wymaganym logowaniem. Proste członkostwo Lub Członek ostateczny Wtyczki pomogą Ci skonfigurować bezpłatne lub płatne treści członkowskie.
Użyj witryny tymczasowej do testowania
Podczas pracy nad projektami testowymi lub witrynami w toku, najlepszym sposobem na ich ukrycie jest użycie witryny testowej lub deweloperskiej. Te witryny są prywatne, często hostowane na komputerze lokalnym, do którego nikt poza Tobą i innymi osobami, którym udzieliłeś zezwolenia, nie może uzyskać dostępu.
Wielu hostów internetowych zapewni Ci łatwe do wdrożenia witryny testowe i pozwoli Ci je przesłać na Twój serwer publiczny, gdy będziesz gotowy. Kinsta oferuje witrynę testową WordPress jednym kliknięciem dla wszystkich planów.
Dostęp do witryn testowych w MyKinsta można uzyskać, przechodząc do Witryny > Informacje i klikając Zmień środowisko rozwijane. Kliknij Środowisko przygotowawcze a potem Utwórz środowisko testowe przycisk. Za kilka minut Twój serwer deweloperski będzie gotowy do testowania.
Jeśli nie masz dostępu do łatwego sposobu na utworzenie witryny tymczasowej, Przygotowanie WP Wtyczka ta pomoże Ci zduplikować instalację i przenieść ją do folderu, aby ułatwić do niej dostęp.
Użyj Google Search Console, aby tymczasowo ukryć witryny
Google Search Console to usługa, która pozwala Ci rościć sobie prawo własności do Twoich witryn. Dzięki temu możesz tymczasowo zablokować Google przed indeksowaniem niektórych stron.
Ta metoda ma jednak kilka wad: jest dostępna wyłącznie dla Google (więc nie będzie miała wpływu na takie witryny jak Bing) i jej okres ważności wynosi tylko 6 miesięcy.
Jeśli jednak chcesz szybko i łatwo tymczasowo usunąć swoje treści z wyników wyszukiwania Google, oto właściwy sposób.
Jeśli jeszcze tego nie zrobiłeś, musisz dodać swoją witrynę do Google Search Console. Po wykonaniu tej czynności otwórz Przeprowadzki i wybierz Tymczasowe przeprowadzki > Nowe żądanie. Następnie kliknij Usuń tylko ten adres URL i podaj link do strony, którą chcesz ukryć.
To jeszcze bardziej niezawodna metoda blokowania treści, ale działa ona wyłącznie w ramach usługi Google i trwa tylko 6 miesięcy.
Streszczenie
Istnieje wiele powodów, dla których możesz chcieć ukryć treść na swojej stronie, ale poleganie na opcji „Zniechęcaj wyszukiwarki do indeksowania tej witryny” nie jest najlepszym sposobem, aby mieć pewność, że taka treść nie będzie widoczna.
Jeśli nie chcesz całkowicie ukryć swojej witryny w sieci, nigdy nie klikaj tej opcji, ponieważ przypadkowe jej włączenie może spowodować poważne szkody dla Twojego SEO.
A nawet jeśli chcesz ukryć swoją witrynę, ta domyślna opcja jest niepewną metodą. Powinna być połączona z ochroną hasłem lub innym blokowaniem, zwłaszcza jeśli masz do czynienia z poufną treścią.
Czy używasz innych metod, aby ukryć swoją witrynę lub jej części? Daj nam znać w sekcji komentarzy.
Oszczędź czas i koszty, a także zmaksymalizuj wydajność witryny dzięki integracjom na poziomie przedsiębiorstwa o wartości ponad 300 USD zawartym w każdym planie Managed WordPress. Obejmuje to wysokowydajną sieć CDN, ochronę przed atakami DDoS, ochronę przed złośliwym oprogramowaniem i hakowaniem, buforowanie brzegowe i najszybsze maszyny CPU Google. Zacznij bez długoterminowych umów, wspomaganych migracji i 30-dniowej gwarancji zwrotu pieniędzy.
Zapoznaj się z naszymi planami lub porozmawiaj z przedstawicielem handlowym, aby znaleźć plan odpowiedni dla siebie.
Salman Ravoof
Salman Ravoof jest samoukiem, programistą internetowym, pisarzem, twórcą i wielkim wielbicielem wolnego i otwartego oprogramowania (FOSS). Oprócz technologii pasjonuje się nauką, filozofią, fotografią, sztuką, kotami i jedzeniem. Dowiedz się więcej o nim na jego strona internetowai połącz się z Salmanem na Świergot.
