Robots.txt vs. robots metatagi – näin estät sivun näkymisen hakutuloksissa
Vastoin yleistä käsitystä, robots.txt-tiedosto ei ole toimiva ratkaisu sivuston yksittäisten sivujen indeksoinnin hallintaan. Robots metatagi on oikea tapa kertoa hakuroboteille, pitääkö niiden indeksoida sivu vai ei.