Cum să opriți motoarele de căutare să acceseze cu crawlere un site web WordPress

Împiedicați motoarele de căutare să acceseze cu crawlere un site web WordPress

Ori de câte ori un anumit subiect este căutat pe motoarele de căutare, motoarele de căutare verifică diverse conținuturi de pe diferite site-uri web pentru a le prezenta pe cele mai relevante spectatorilor.

Acesta este motivul pentru care site-urile web acordă o atenție deosebită pentru a se asigura că site-urile lor rămân actualizate și găsite cu ușurință pe motoarele de căutare.

Diferitele funcții pe care le îndeplinesc motoarele de căutare pentru a găsi conținut relevant sunt accesarea cu crawlere, indexarea și clasarea.

Accesarea cu crawlere în procesul în care software-ul, cum ar fi crawlerele web sau păianjenii, este utilizat pentru a identifica cel mai recent conținut al unui site web.

Cu toate acestea, deoarece adesea nu verifică dacă se fac actualizări pe paginile existente sau dacă este creată vreo pagină nouă, ei ar putea evita să viziteze o pagină de site pentru o lună sau două.

Indexarea este procesul prin care motoarele de căutare procesează și stochează informații despre un site web pe care îl consideră a fi relevant într-o bază de date uriașă.

Aceste informații pot fi obținute din index atunci când este introdus un șir de cuvinte cheie.

Clasamentul este metoda prin care motoarele de căutare prezintă rezultatele în ordinea relevanței atunci când se caută un subiect.

Prin localizarea unui site web, motoarele de căutare ajută la îmbunătățirea traficului organic către un anumit site web.

Prin urmare, s-ar putea întreba de ce ar trebui să optezi pentru motoarele de căutare pentru a opri accesarea cu crawlere a unui site web WordPress .

Motivul poate fi variat și ele sunt discutate mai jos.

Site de montaj

Când site-ul este încă „în funcțiune”, proprietarii de site-uri vor dori să-și elimine site-ul de pe pagina cu rezultate ale motorului de căutare sau din SERP-urile până când site-ul lor este pregătit pentru publicul lor.

Bloguri private

Mulți oameni folosesc WordPress pentru a crea bloguri private. Deoarece sunt private, vor prefera să împiedice accesarea cu crawlere sau indexarea site-urilor lor web pe motoarele de căutare.

Intranet

WordPress este adesea folosit pentru intranet sau management de proiect.

Pentru a preveni accesarea documentelor interne de către public, utilizatorii ar putea dori să împiedice accesarea cu crawlere.

Mulți oameni au această concepție că, dacă link-urile nu sunt adăugate pe site, atunci motoarele de căutare nu le pot localiza.

Cu toate acestea, acest lucru nu este adevărat, deoarece există diferite moduri prin care motoarele de căutare pot localiza un site web.

Prin urmare, este important să luați măsurile necesare pentru a împiedica motoarele de căutare să acceseze cu crawlere un site web.

Prevenirea motoarele de căutare de la indexarea site-ului WordPress

Motoarele de căutare pot opri accesarea cu crawlere a unui site WordPress atunci când utilizatorii întreprind acțiunile necesare implicate în acesta.

Următoarele metode vor împiedica motoarele de căutare să indexeze sau să acceseze cu crawlere un site web pe WordPress. Să le discutăm.

Metoda 1: Utilizând funcția încorporată a unui site web WordPress

În această metodă, proprietarii de site-uri pot folosi caracteristica încorporată a unui site WordPress pentru a împiedica motoarele de căutare să acceseze cu crawlere sau să indexeze un site web.

Pașii implicați în acest proces sunt următorii:

Pasul 1: Vizitați zona de administrare a site-ului WordPress și faceți clic pe „Setări”. Din lista derulantă care apare sub „Setări”, faceți clic pe „Citire”.

Pasul 2: va apărea o opțiune numită „Vizibilitatea motorului de căutare”. În continuare, faceți clic pe caseta care menționează „Descurajați motoarele de căutare de la indexarea acestui site”. Acest lucru va determina WordPress să editeze fișierul robots.txt și să aplice regulile care vor împiedica motoarele de căutare să indexeze sau să acceseze cu crawlere site-ul.

Pasul 3: Faceți clic pe butonul „salvare” pentru a confirma modificările.

Metoda 2: Editarea fișierului robots.txt

Dacă utilizatorii optează pentru prevenirea indexării sau accesării cu crawlere prin procesul manual, pot face acest lucru prin editarea fișierului robots.txt.

Acest fișier se află în directorul rădăcină al unui site web și aceasta este o metodă puternică care va duce la oprirea accesării cu crawlere a unui site WordPress de motoarele de căutare.

Pașii implicați în această metodă sunt discutați mai jos.

Pasul 1: Utilizați „Manager de fișiere” sau „client FTP” pentru a accesa fișierele site-ului web.

Pasul 2: Găsiți fișierul robots.txt. În general, poate fi găsit în același folder ca WordPress, care este de obicei folderul „public_html”.

Cu toate acestea, dacă fișierul nu a putut fi localizat, se poate crea un nou fișier gol.

Pasul 3: Introduceți următoarea sintaxă

Agent utilizator:*
Nu permite: /

Această sintaxă instruiește crawlerele web să nu indexeze paginile site-ului web.

Deși, majoritatea motoarelor de căutare respectă această instrucțiune, totuși, unele imagini sau pagini aleatorii din site-ul web ar putea fi indexate.

Protejarea cu parolă a site-ului web WordPress

Utilizatorii își pot proteja site-ul împotriva ca motoarele de căutare să nu mai acceseze cu crawlere un site WordPress, oferindu-i protecție prin parolă. Acest lucru se poate face prin următoarele metode.

Metoda 1: Protejarea prin parolă a site-ului web folosind Panoul de control de găzduire

În această metodă, site-urile web pot fi protejate cu o parolă accesând Control Panel sau cPanel.

Pentru clientul Hostinger

Următorii pași vor ajuta la protejarea prin parolă a site-ului web

Pasul 1: Accesați panoul de control Hostinger și faceți clic pe pictograma „Directoarele de protecție cu parolă”.

Pasul 2: În acest pas selectați directorul pe care doriți să îl protejați, care este locul în care este instalat WordPress.

Pasul 3: După ce ați selectat directorul, introduceți numele de utilizator și parola și faceți clic pe butonul „protejare”.

Folosind cPanel

Următorii pași sunt necesari pentru a se efectua în timpul utilizării cPanel

Pasul 1: Conectați-vă la contul cPanel și faceți clic pe „Confidențialitate director”

Pasul 2: Selectați folderul în care este instalat WordPress. În general, este „public_html”

Pasul 3: Faceți clic pe „Protejați cu parolă acest director” și introduceți numele directorului pe care doriți să-l protejați. Faceți clic pe butonul „Salvare” și completați formularul „Creare utilizator” care poate accesa directorul protejat. Faceți clic pe butonul „salvare” pentru a proteja site-ul WordPress prin parolă.

Metoda 2: Protejați WordPress prin parolă folosind Plugin

Uneori este posibil ca utilizatorii să nu aibă acces la cPanel dacă folosesc o soluție de găzduire WordPress gestionată.

În acest caz, ar putea folosi pluginuri pentru a-și proteja site-ul web prin parolă.

Această metodă va face ca motoarele de căutare să nu mai acceseze cu crawlere un site WordPress.

Unele dintre pluginurile populare utilizate în acest scop sunt pluginul Protejat cu parolă, WordFence și altele.

Cu toate acestea, înainte de a selecta un plugin adecvat, utilizatorii trebuie să se asigure că au fost actualizați recent.

Odată ce sunt instalate, trebuie să meargă la setare și să seteze o nouă parolă pentru site.

Astfel, dacă proprietarii de site-uri doresc să-și protejeze site-urile web împotriva indexării sau accesării cu crawlere de către motoarele de căutare, pot folosi metodele menționate mai sus.

BTW dacă sunteți în căutarea unor pași pentru a îmbunătăți prezența în motorul de căutare a site-ului dvs. WordPress?. Ar trebui să verificați linkul distribuit.