Diese Testseite gehört zu meiner "meta robots"-Direktive SEO-Test-Reihe.
Diese Seite hier steht auf index, follow und sollte also indexiert werden können. Sie ist allerdings nur von einer Seite verlinkt, die wiederum auf NOINDEX, follow steht.
Der Test soll zeigen, ob Googlebot Links crawled, die sich in Dokumenten befinden, welche durch "meta robots"-Direktiven vom Indexing ausgeschlossen sind. Es gibt nämlich Vermutungen, dass Googlebot Seiten nicht oder nur sehr selten crawled, die nicht zur Indexierung vorgesehen sind - um Ressourcen zu sparen.
Außerdem meinte ein Google-Techniker gestern in einem Talk, Seiten, die auf NOINDEX stehen, würden nicht gerendet, um sie zu bewerten. Das heißt definitiv, dass Verlinkungen, die erst durch das Rendern im Seitenquelltext auftauchen würden - also zum Beispiel durch ausgeführtes JavaScript, so gar nicht gefunden und verfolgt werden würden.
Um herauszufinden, wie es sich aber mit Links verhält, die bereits im Quell-Code enthalten sind, habe ich diese "meta robots"-Direktive SEO-Test-Reihe aufgebaut. In den nächsten Tagen prüfe ich Logfiles und den Google-Index, ob der Crawler die so verlinkten Seiten findet und ob er die letzte Seite der Kette - also diese hier - indexiert hat.
Über das Ergebnis blogge ich dann auf seouxindianer.de/blog. Stay tuned!