robots.txt og Joomla
Jeg har en Joomla site hvor default robots.txt filen ser sådan ud:User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Jeg er dog lidt i tvivl om robots.txt filen er sat rigtigt op? Er der nogle parametre jeg kan udelade?
For en uge siden har jeg indsent et sitemap til Google hørende til url:
http://www.aarhus-lejligheder.dk
Via Google webmasterværktøj og Google analytic kan jeg se at der har været en robot forbi 1-3 gange dagligt og og af mine 4 webadresser i sitemappet er 1 blevet indekseret.
Burde jeg så ikke at kunne finde mit site på google hvis jeg specifikt søger på
www.aarhus-lejligheder.dk ?