22. oktober 2006 - 20:51Der er
10 kommentarer og 1 løsning
Web Crawler mangler job
Jeg har planer om at lave en robot, der crawler webbet for informationer som den skal bruge til at opbygge en bestemt database. Jeg ved bare ikke helt hvad den skal indeksere, er det noget i kan hjælpe mig med?
Umidelbart kunne du bruge det til market intelligence. Lav f.eks en side hvor virksomheder kan købe sig adgang til at overvåge konkurrenter, produkter osv.
diggerx, du mener så at man skal købe sig adgang til en branche, hvorså der ville dukke nyheder og produktbeskrivelser op fra alle virksomhederne i branchen på en let og overskuelig måde, så man slipper for at klikke sig igennem konkurrenternes sider. Det lyder som en god ide, men spørgsmålet er jo bare om det er et brugbart redskab for virksomheder?
Jeg tænke nu mere på at indeksere noget der gavnede en større andel af befolkningen og som ville være frit tilgængelig.
hvis du ikke har en doktorgrad i datalogi og flere års erfaring i at programmere søgemaskiner fra bunden, kan du godt opgive! Er du klar over hvor mange 1000 søgemaskiner der findes på verdensplan?
Jeg har ikke nogen uddannelse indenfor datalogi, men man kan vel prøve sig frem og lære på den måde. En anden mulighed var jo og lære gennem internettet. Du må gerne smide nogle links hvis du kender sådan nogle.
Du kunne eventuelt crawle alle filer der sluttede på .RSS .XML etc.
Så tjekker om de var videopodcast, og så lade folk søge i de videoer.
Synes godt om
Ny brugerNybegynder
Din løsning...
Tilladte BB-code-tags: [b]fed[/b] [i]kursiv[/i] [u]understreget[/u] Web- og emailadresser omdannes automatisk til links. Der sættes "nofollow" på alle links.