Hoe u zoekmachines kunt stoppen met het crawlen van een WordPress-site - DeLaatbusiness

Hoe u zoekmachines kunt stoppen met het crawlen van een WordPress-site

4 min


127
6 gratis internet marketing ebooks, klik hier voor download

Onlangs heeft een van onze gebruikers ons gevraagd hoe zij kunnen voorkomen dat zoekmachines hun WordPress-site crawlen en indexeren? Er zijn veel scenario’s wanneer u wilt voorkomen dat zoekmachines uw website crawlen of in zoekresultaten opnemen. In dit artikel laten we u zien hoe u kunt voorkomen dat zoekmachines een WordPress-site crawlen.

Stop met het doorzoeken van zoekmachines op uw WordPress-site

Waarom en wie zou zoekmachines willen stoppen

Voor de meeste websites zijn zoekmachines de grootste bron van verkeer. U kunt zich afvragen, waarom zou iemand zoekmachines willen blokkeren?

Bij het begin weten veel mensen niet hoe ze een lokale ontwikkelomgeving of een halteplaats moeten maken . Als u uw website live ontwikkelt op een openbaar toegankelijke domeinnaam , wilt u waarschijnlijk niet dat Google de pagina onder constructie of onderhoudsmodus indexeert.

Er zijn ook veel mensen die WordPress gebruiken om privé-blogs te maken , en ze willen niet dat die worden geïndexeerd in de zoekresultaten omdat ze privé zijn.

Ook gebruiken sommige mensen WordPress voor projectbeheer of intranet en wilt u niet dat uw interne documenten openbaar toegankelijk zijn.

In alle bovenstaande situaties wilt u waarschijnlijk niet dat zoekmachines uw website indexeren.

Een veelgehoorde misvatting is dat als ik geen links naar mijn domein heb, zoekmachines waarschijnlijk mijn website nooit zullen vinden. Dit is niet helemaal waar.

Er zijn veel manieren waarop zoekmachines een website kunnen vinden die elders is gelinkt. Bijvoorbeeld:

  1. Uw domeinnaam kan eerder eigendom zijn geweest van iemand anders en er zijn nog steeds enkele links die verwijzen naar uw website.
  2. Sommige resultaten van een zoeksite op een domein kunnen worden geïndexeerd met uw link erop.
  3. Er zijn letterlijk duizenden pagina’s met slechts een lijst met domeinnamen, uw site kan op een van die sites verschijnen.

Er gebeuren veel dingen op internet en de meeste zijn niet onder uw controle. Uw website is echter nog steeds onder uw controle en u kunt zoekmachines instrueren om uw website niet te indexeren of te volgen.

Het blokkeren van zoekmachines door uw WordPress-site te crawlen en te indexeren

WordPress wordt geleverd met een ingebouwde functie waarmee u zoekmachines kunt instrueren uw site niet te indexeren. Het enige dat u hoeft te doen is naar Instellingen »Lezen te gaan en het vakje naast de optie Zoekmachinezichtbaarheid aan te vinken.

Instelling van de zichtbaarheid van zoekmachines in WordPress

Wanneer dit selectievakje is aangevinkt, voegt WordPress deze regel toe aan de koptekst van uw website:

1
<meta name='robots' content='noindex,follow' />

WordPress past ook het robots.txt- bestand van uw site aan en voegt deze regels eraan toe:

1
2
User-agent: *
Disallow: /

Deze regels vragen robots (webcrawlers) om uw pagina’s niet te indexeren. Het is echter volledig aan zoekmachines om dit verzoek te accepteren of te negeren. Hoewel de meeste zoekmachines dit respecteren, kunnen sommige pagina’s of willekeurige afbeeldingen van uw site worden geïndexeerd.

Hoe ervoor te zorgen dat uw site niet wordt weergegeven in zoekresultaten?

De standaardzichtinstellingen voor WordPress geven zoekmachines de opdracht om uw website niet te indexeren. Het kan echter zijn dat zoekmachines uiteindelijk een pagina, bestand of afbeelding van uw website crawlen en indexeren.

De enige manier om ervoor te zorgen dat zoekmachines uw website helemaal niet indexeren of crawlen, is door uw gehele WordPress-site op serverniveau te beveiligen met een wachtwoord.

Dit betekent dat wanneer iemand uw website probeert te openen, deze wordt gevraagd om een ​​gebruikersnaam en wachtwoord op te geven, zelfs voordat ze WordPress bereiken. Dit omvat ook zoekmachines. Bij het inloggen mislukt, worden ze weergegeven 401-fout en de bots draaien weg. Hier leest u hoe u een volledige WordPress-site met een wachtwoord kunt beveiligen.

Methode 1: Wachtwoordbeveiliging van een gehele site met behulp van cPanel

Als uw WordPress-hostingprovider cPanel-toegang biedt om uw hostingaccount te beheren, dan kunt u uw hele site beveiligen met cPanel. Het enige wat u hoeft te doen, is inloggen op uw cPanel-dashboard en vervolgens klikken op ‘Wachtwoordbeveiliging Directories’-pictogram onder het gedeelte’ Beveiliging ‘.

Wachtwoord beveilig mappen

Vervolgens moet je de map kiezen waarin je WordPress hebt geïnstalleerd. Meestal is dit de map public_html.

Selecteer de hoofdmap

Als u meerdere WordPress-sites hebt geïnstalleerd in de map public_html, moet u op het mappictogram klikken om te bladeren en de map selecteren voor de website die u wilt beveiligen met een wachtwoord.

Op het volgende scherm moet u een naam voor de beschermde map invoeren en op de knop ‘Opslaan’ klikken.

Voer een naam in voor de beveiligde map

Uw informatie wordt opgeslagen en cPanel laadt de pagina opnieuw. Hierna moet u een geautoriseerde gebruiker toevoegen door een gebruikersnaam en wachtwoord in te voeren.

Toegevoegde gebruiker toevoegen

Dat is alles, u hebt met succes wachtwoordbeveiliging toegevoegd aan uw WordPress-site.

Wanneer een gebruiker of zoekmachine uw website bezoekt, wordt hem gevraagd de gebruikersnaam en het wachtwoord in te voeren die u eerder hebt gemaakt om de site te bekijken.

Wachtwoord beveiligde website

Methode 2: Wachtwoordbeveiliging van WordPress met een plug-in

Als u een beheerde WordPress-hostingoplossing gebruikt , hebt u soms geen toegang tot cPanel.

In dat geval hebt u de mogelijkheid om verschillende WordPress-plug-ins te gebruiken om uw website met een wachtwoord te beveiligen. Hieronder staan ​​de twee meest populaire oplossingen:

  1. SeedProd – het is de nummer 1 die binnenkort verschijnt en plug-in voor onderhoudsmodus voor WordPress, gebruikt op meer dan 800.000 websites. Het wordt geleverd met volledige toegangscontrole en machtigingsfuncties die u kunt gebruiken om uw website te verbergen voor iedereen, inclusief zoekmachines. We hebben stap voor stap een handleiding voor SeedProd .
  2. Met een wachtwoord beveiligd – het is een zeer eenvoudige manier om uw WordPress-site met een wachtwoord te beveiligen met een enkel wachtwoord (er hoeft geen gebruiker aangemaakt te worden). Zie onze stapsgewijze handleiding over hoe u een WordPress-site met een wachtwoord beveiligt .

We hopen dat dit artikel u heeft geholpen om te voorkomen dat zoekmachines uw WordPress-site crawlen of indexeren. Misschien wilt u ook onze ultieme stap voor stap WordPress beveiligingsgids voor beginners bekijken.


What's Your Reaction?

hate hate
0
hate
confused confused
0
confused
fail fail
0
fail
fun fun
0
fun
geeky geeky
0
geeky
love love
0
love
lol lol
0
lol
omg omg
0
omg
win win
0
win
Erwin@delaatbusiness.com
Dag, Hulp nodig met internet marketing of websites maken? neem dan contact op

0 Comments

Het e-mailadres wordt niet gepubliceerd. Vereiste velden zijn gemarkeerd met *

Choose A Format
Personality quiz
Series of questions that intends to reveal something about the personality
Trivia quiz
Series of questions with right and wrong answers that intends to check knowledge
Poll
Voting to make decisions or determine opinions
Story
Formatted Text with Embeds and Visuals
List
The Classic Internet Listicles
Countdown
The Classic Internet Countdowns
Open List
Submit your own item and vote up for the best submission
Ranked List
Upvote or downvote to decide the best list item
Meme
Upload your own images to make custom memes
Video
Youtube, Vimeo or Vine Embeds
Audio
Soundcloud or Mixcloud Embeds
Image
Photo or GIF
Gif
GIF format