skip to content
Advertentie

Over de <META>-tag “Robots”

In een notendop

Je kan een speciale HTML <META>-tag gebruiken om robots te vertellen de inhoud van de pagina niet te indexeren en/of ze niet te scannen op links om te volgen.

Bijvoorbeeld:

<html>
<head>
<title>...</title>
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
</head>

Je moet twee zaken goed in de gaten houden bij het gebruik van de robots <META>-tag:

  • robots kunnen je <META>-tag negeren. Vooral malware-robots die het Web afstruinen voor beveiligingskwetsbaarheden, en bots van spammers die e-mailadressen oogsten, zullen het lin ks laten liggen.
  • de NOFOLLOW-richtlijn slaat alleen op de links op de huidige pagina. Het is zeer waarschijnlijk dat een robot dezelfde links vindt op een andere pagina zonder NOFOLLOW (misschien op een andere site), en zo dus alsnog op je ongewenste pagina terechtkomt.

Haal deze NOFOLLOW niet door elkaar met het rel="nofollow" linkattribuut.

De details

Net als de /robots.txt is de robots META-tag een de-facto-standaard. Het kwam voort uit een informele BoF-bijeenkomst ("birds of a feather") op een gedistribueerde-indexeringsworksop in 1996 en werd omschreven in notulen.

De META-tag wordt ook beschreven in de HTML 4.01specificatie, bijlage B.4.1.

De rest van deze pagina geeft een overzicht van hoe je robots <META>-tags in in je pagina's gebruikt, met enkele eenvoudige recepten. Om meer te weten te komen, zie ook de FAQ.

Hoe maak je een robots meta-tag

Waar plaats je hem

Net als elke <META>-tag zou je hem in de HEAD-sectie van een HTML-pagina moeten plaatsen, zoals in het voorbeeld hierboven. Je moet hem in elke pagina van je site plaatsen, omdat een robot een dieplink kan tegenkomen naar welke van jouw pagina's dan ook.

Wat zet je erin

Het “NAME”-attribuut moet “ROBOTS” zijn.

Geldige waarden voor het “CONTENT”-attribuut zijn: “INDEX”, “NOINDEX”, “FOLLOW”, “NOFOLLOW”. Meerdere door komma’s gescheiden waarden zijn toegestaan, maar natuurlijk zijn alleen sommige combinaties logisch. Bij verstek van een robots <META>-tag is de waarde “INDEX,FOLLOW”, dus het is niet nodig om dat uit te schrijven. Blijven over:

<META NAME="ROBOTS" CONTENT="NOINDEX, FOLLOW">
<META NAME="ROBOTS" CONTENT="INDEX, NOFOLLOW">
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Advertentie