indeksering af site
Hejsa,jeg vil indeksere et site ved at følge links. Jeg løber dog ind i et par udfordringer.
Er der nogen der har et bud på hvordan jeg forhindrer at links til andre sites bliver fulgt.
Jeg bruger en java.net.URLConnection til at "skyde" mod sites, men jeg kan ikke finde en metode til at sikre mig at den bliver på samme adresse.
/Mads