Fjerne mange filer fra søgemaskiner

Det nemmeste ville være at lægge pdf-filerne i en separat (under)mappe

Nogle søgemaskiner anerkender at bruge *-notation i en Disallow, formentlig

Disallow: /dir/*.pdf

Men som du kan læse lidt om på http://en.wikipedia.org/wiki/Robots.txt er det ikke ligefrem standard ("The first version of the Robot Exclusion standard, does not mention anything about the "*" character in the Disallow: statement. Modern crawlers like Googlebot and Slurp recognize strings containing "*", while MSNbot and Teoma interpret it in different ways").

Okay. Dvs den optimale løsning er at flytte alle filerne.

Jeg bruger

Disallow: /dir/*.pdf

indtil jeg får tid til at flytte dem alle. Jeg skal nemlig ind i samtlige php filer og lave linket om. Rigtig molbo arbejde :-)

Tak for hjælpen

lukker tråden