Meta Tag Robots

Tag meta robots zawiera instrukcje dla robotów wyszukiwarek internetowych. Pełni więc podobną funkcję jak plik robots.txt, jednakże dotyczy tylko tej strony, na której się znajduje.

Przykład implementacji tagu:

<meta name="robots" content="index, follow" />

• index - indeksuj stronę
• noindex - nie indeksuj strony
• follow - podążaj za linkami
• nofollow - nie podążaj za linkami
• none - połączenie noindex i nofollow
• noarchive - nie pokazuj linku do kopii strony w cache wyszukiwarki
• nosnippet - nie pokazuj opisu w wynikach wyszukiwania i nie zachowuj kopii strony w cache
• noodp - nie pokazuj opisu strony z Open Directory Project jako opisu w wynikach wyszukiwania

Wymienione powyżej wartości mogą być łączone ze sobą. W przypadku zastosowania przez webmastera dwóch sprzecznych zapisów Google posłucha tego, który jest bardziej restrykcyjny.

W zakresie tagu robots wyszukiwarki potrafiły ze sobą współpracować i dochodzić do kompromisów. Istnieją jednak również takie przypadki, gdzie albo nie udało się uzyskać synergii, albo tag dotyczy usługi charakterystycznej tylko dla jednej wyszukiwarki, więc nie ma sensu, by wpierały go pozostałe.

• Nie indeksuj obrazków

  <meta name="robots" content="noimageindex">

• Nie pozwalaj na tłumaczenie strony na inny język (ważne: name przyjmuje wartość google, nie googlebot!)

  <meta name="google" content="notranslate" />

• Nie indeksuj strony od konkretnego dnia

  <meta name="googlebot" content="unavailable_after: 25-Aug-2007 15:00:00 EST">

• Nie pokazuj opisu strony z Yahoo Directory jako opisu w wynikach wyszukiwania

  <meta name="robots" content="noydir">

• Meta Robots Tag 101: Blocking Spiders, Cached Pages & More - Danny Sullivan

• Anchor Text
• Black Hat
• Duplicate Content
• Google Bomb
• HTTP
• Link
• Meta Description Tag
• Mikroformaty
• Przyjazny URL
• Query Deserves Freshness (QDF)
• Rel Canonical
• Rel Nofollow
• robots.txt
• Site mapa
• Wyszukiwarki
• Zaplecze