robots.txt
- Dette indlæg indeholder 6 kommentarer, har 7 deltagere og blev senest opdateret af
Egil for 14 år, 4 måneder siden.
-
Emne
-
I udviklingsfasen vil jeg helst ikke have mine sites indekseret men jeg er af forskellige årsager nødt til at have dem åbne udadtil.
Har jeg forstået det korrekt at hvis mit domænenavn f.eks. er http://www.test.dk så vil følgende entry i en robots.txt fil holde crawlers væk?
Disallow: http://www.test.dk
//Fuzd
Viser 6 kommentarer - 1 til 6 (af 6 i alt)
Viser 6 kommentarer - 1 til 6 (af 6 i alt)
- Du skal være logget ind for at kommentere på dette indlæg.
























