CIO Tech Eksperten IT-JOB IT-Kurser Events Podcast Søg
Cookie ikon
Avatar billede oleko Nybegynder
18. september 2007 - 09:03 Der er 1 løsning

Webcrawler og dynamisk genererede sider

Jeg funderer lidt over at programmere min egen webcrawler.
Det med hele tiden at følge links fra en side til andre sider og igen herfra til andre sider kan jeg godt forstå.
Men hvad med f.eks. en portal med boliger, hvor man ofte skal udfylde en søge formular med dropdowns mv. over geografi, størrelse, pris o.s.v. Når formularen submittes, vil portalen generere et søgeresultat med links til emnerne ud fra opslag i en database.
Hvordan får en webcrawler fat i disse dynamisk genererede links?
Avatar billede goose Nybegynder
18. september 2007 - 09:12 #1
Disse boliger vil jo typisk kunne findes ved en almindelig navigering, alternativt kan der jo laves et sitemap hvor samlige sider ligger.

Du kan ikke få en webcrawler til at foretage denne handling, hvis man kunne, så vidste Google hvordan og det ved de ikke.

Hvis du skulle finde opskriften på dette, så sælg det til Google - tror de vil give ret mange gryn for det :o)

/Goose
Avatar billede Ny bruger Nybegynder

Din løsning...

Tilladte BB-code-tags: [b]fed[/b] [i]kursiv[/i] [u]understreget[/u] Web- og emailadresser omdannes automatisk til links. Der sættes "nofollow" på alle links.

Loading billede Opret Preview
Kategori
Se alle it-kurser fra Computerworld Kurser
IT-kurser om Microsoft 365, sikkerhed, personlig vækst, udvikling, digital markedsføring, grafisk design, SAP og forretningsanalyse.
Se alle it-kurser

Flere spørgsmål fra Søgemaskiner kategorien

Titel Indlæg Oprettet Seneste aktivitet
ny fane skifter til yahoo Af Dittelit i Søgemaskiner 7 26/05/202413:03 22/06/202418:29
Google concent version 2 Af Anja de Thurah i Søgemaskiner 1 22/05/202411:56 22/05/202414:22
Problemer med Firefox Af valby i Søgemaskiner 2 14/03/202417:55 14/03/202423:39
Google autofyld og passwords Af jesperodde i Søgemaskiner 12 28/06/202321:55 11/10/202319:09
Fjerne reklamer på forsiden af EDGE - Hvordan ? Af Ikke-ekspert i Søgemaskiner 4 13/05/202321:48 14/05/202314:01
Se alle spørgsmål i kategorien Opret spørgsmål

Log ind eller opret profil

Hov!

For at kunne deltage på Computerworld Eksperten skal du være logget ind.

Det er heldigvis nemt at oprette en bruger: Det tager to minutter og du kan vælge at bruge enten e-mail, Facebook eller Google som login.

Opret Log ind

Du kan også logge ind via nedenstående tjenester



Alle kategorier på Eksperten
Seneste spørgsmål Seneste aktivitet
I går 17:27 Hjælp til at fjerne mulighed for scroll Af golferscaddie i Excel
I går 15:29 Motion Af dcedata1977 i Linux
I går 12:56 Fremhævet tal i celle Af Malou i Excel
27/0815:09 Kode til det enkelte ark. Af lkt i Excel
27/0814:50 Give resultat ud fra flere "HVIS'er" Af Lassebo1981 i Excel
White papers
Flere white papers »


Premium
Teaser billede
Ifølge Kombit-topchef Kristian Vengsgaard står kommunerne over for et 'kafkask bureaukrati' med NIS2 - her er hans løsning
Læs mere »
Her er Danmarks tre bedste CISO’er lige nu: De er nomineret til titlen som Årets CISO 2024
Topchef: Public cloud er alt for dyrt og besværligt - fremtiden for virksomhederne er et helt andet sted
Professor: "Det er på høje tid at opløse virksomhedernes it-afdelinger"
Se alle »
Computerworld
Teaser billede
Verdens største bilproducent ramt af hackerangreb: Sender skylden videre til tredjepart
Læs mere »
Næste måned skifter din iPhones Apple-id til et nyt navn
Nærmest selvkørende: Jeg kørte fra Roskilde til København uden at røre rattet
Test: Denne laptop rammer plet - er utrolig slank men alligevel utrolig stærk
Se alle »
CIO
Teaser billede
Detailkæde har mistet over 65 millioner kroner efter cyberangreb – kræver erstatning fra it-leverandør
Læs mere »
Professor: "Det er på høje tid at opløse virksomhedernes it-afdelinger"
DSB køber cloud-løsning til 420 millioner kroner af hollandsk it-selskab: Skal afløse 30 år gammelt system
Der er under halvt så mange it-specialister i Danmark som regeringen påstår - tæller elektrikere og automekanikere med
Se alle »
Job & Karriere
Teaser billede
Efter 12 år er NNIT's hovedkvarter i Søborg nu ryddet og tomt - alle arbejder hjemme: "Det er med et vist vemod"
Læs mere »
KMD-direktør forlader selskabet: Det skal hun nu
IBM Danmark skifter ud i sin øverste ledelse - her er den nye direktion
Til åbningsfest i det nye NNIT-hovedkontor: ”Som at flytte til New York sammenlignet med der hvor vi kommer fra” - se billederne
Se alle »
White paper
Teaser billede
Informationshåndtering på frontlinjen: Sådan optimerer du med automatisering
Læs mere »
Sådan gør du: Elektronisk dokumentudveksling i praksis
SASE: Træf det rette valg – første gang
Nemmere overblik, styring og omkostningskontrol i dit multicloud-miljø
Se alle »

Events
Flere events »
White papers
Flere white papers »
IT-Kurser
Se alle vores it-kurser »