CIO Tech Eksperten IT-JOB IT-Kurser Events Podcast Søg
Cookie ikon
Avatar billede theranger Nybegynder
17. februar 2003 - 20:42 Der er 5 kommentarer og
1 løsning

Kende robotter

Er det muligt at finde ud af om en session er en robot?

Pt. gør jeg følgende, hvilket ikke er særligt smart - er der nogen smartere løsning:

      Select Case Request.ServerVariables("http_user_agent")
        Case "Mozilla/4.0 (compatible; grub-client-1.0.7; Crawl your own stuff with http://grub.org)"
            Var_Robot = "Y"
        Case "ia_archiver"
            Var_Robot = "Y"
        Case "Nutch"
            Var_Robot = "Y"
        Case "Mozilla/4.0 (compatible; MSIE 5.0; Windows NT; Girafabot; girafabot at girafa dot com; http://www.girafa.com)"
            Var_Robot = "Y"
        Case "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"
            Var_Robot = "Y"
        Case "Mozilla/4.0 (compatible; grub-client-1.0.6; Crawl your own stuff with http://grub.org)"
            Var_Robot = "Y"
        Case "Mozilla/5.0 (X11; Linux i686; en-US; rv:1.0rc5; OBJR)"
            Var_Robot = "Y"
        Case "EricssonR320/R1A UP.Link/4.1.0.1 (Fast Mobile Crawler)"
            Var_Robot = "Y"
        Case "FAST-WebCrawler/3.6 (atw-crawler at fast dot no; http://fast.no/support/crawler.asp)"
            Var_Robot = "Y"
        Case "FAST-WebCrawler/3.7/FirstPage (atw-crawler at fast dot no;http://fast.no/support/crawler.asp)"
            Var_Robot = "Y"
        Case "http://www.almaden.ibm.com/cs/crawler  [c01]"
            Var_Robot = "Y"
        Case "Scooter/3.2.SF0"
            Var_Robot = "Y"
        Case "Mercator-2.0"
            Var_Robot = "Y"
        Case "Mozilla/3.0 (compatible; Indy Library)"
            Var_Robot = "Y"
        Case "Mozilla/2.0 (Win16; I)"
            Var_Robot = "Y"
        Case "Mozilla/3.0 (compatible)"
            Var_Robot = "Y"
        Case "Mozilla/5.0 (Slurp/cat; slurp@inktomi.com; http://www.inktomi.com/slurp.html)"
            Var_Robot = "Y"
        Case "FAST-WebCrawler/3.7/FirstPage (atw-crawler at fast dot no;http://fast.no/support/crawler.asp)"
            Var_Robot = "Y"
        Case "TurnitinBot/1.5 http://www.turnitin.com/robot/crawlerinfo.html"
            Var_Robot = "Y"
        Case "Opera/4.0 (Windows NT 4.0;US)"
            Var_Robot = "Y"
        Case "NPBot-1/2.0 (http://www.nameprotect.com/botinfo.html)"
            Var_Robot = "Y"
        Case "Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 5.0) Microsoft Scheduled Cache Content Download Service"
            Var_Robot = "Y"
        Case "Mozilla/4.0 compatible ZyBorg/1.0 (wn.zyborg@looksmart.net; http://www.WISEnutbot.com)"
            Var_Robot = "Y"
        Case "Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 5.0) Fetch API Request"
            Var_Robot = "Y"
        Case "Oracle Ultra Search"
            Var_Robot = "Y"
        End Select
Avatar billede Slettet bruger
17. februar 2003 - 21:03 #1
Jeg tror du kan finde svaret i denne artikel:
http://www.webmasterbase.com/article/962

Det er under alle omstændigheder en knaldgod artikel.
Avatar billede theranger Nybegynder
17. februar 2003 - 21:10 #2
Nej - den er ikke meget bedre end det jeg selv har lavet - øv :-(
Avatar billede Slettet bruger
17. februar 2003 - 21:11 #3
Læste du nederst?

<%  Sub AddViolation(objDict, strWord)    'Adds a violation (a robot in this case)    objDict.Add strWord, False  End Sub  Function CheckStringForViolations(strString, objDict)    'Determines if the string strString has any violations    Dim bolViolations    bolViolations = False    Dim strKey    For Each strKey in objDict      If InStr(1, strString, strKey, vbTextCompare) > 0        bolViolations = True        objDict(strKey) = True      End If    Next  CheckStringForViolations = bolViolations  End Function  Dim objDictViolations  Set objDictViolations = Server.CreateObject("Scripting.Dictionary")  AddViolation objDictViolations, "Googlebot"  AddViolation objDictViolations, "Lycos"  AddViolation objDictViolations, "Ultraseek"  AddViolation objDictViolations, "Sidewinder"  AddViolation objDictViolations, "InfoSeek"  AddViolation objDictViolations, "Scooter"  AddViolation objDictViolations, "WebCrawler"  AddViolation objDictViolations, "UTV"  Dim strCheck, strKey  strCheck = Request.ServerVariables("HTTP_USER_AGENT")  If Len(strCheck) > 0 then    If CheckStringForViolations(strCheck, objDictViolations) then  Response.Redirect("spiderrichpage.asp")    ElseResponse.Redirect("userpage.asp")    End If  End If%>
Avatar billede Slettet bruger
17. februar 2003 - 21:12 #4
Prøv at læse artiklen grundigt igennem ;)
Avatar billede theranger Nybegynder
17. februar 2003 - 21:14 #5
Jeg er ude efter en type, der kan fange ALLE robotter - ikke bare de fleste.
Avatar billede Slettet bruger
17. februar 2003 - 21:16 #6
Well som det også står i artiklen, kan robottet maskere sig, ved at benytte en fake http_user_agent, så derfor er ovenstående script nok det smarteste, da det søger efter enkelte ord eller tegn i http_user_agent strengen.
Avatar billede Ny bruger Nybegynder

Din løsning...

Tilladte BB-code-tags: [b]fed[/b] [i]kursiv[/i] [u]understreget[/u] Web- og emailadresser omdannes automatisk til links. Der sættes "nofollow" på alle links.

Loading billede Opret Preview
Kategori
Programmeringssprog kurser
Kurser inden for grundlæggende programmering
Se alle Programmeringssprog kurser

Flere spørgsmål fra ASP kategorien

Titel Indlæg Oprettet Seneste aktivitet
Classic - filer vist med sidste fil først Af bsn i ASP 5 23/05/202409:56 24/05/202400:02
Optimer MySql table med ASP Af poulmadsen i ASP 4 26/04/202417:16 26/04/202418:37
JSON Af ingeman i ASP 3 07/04/202417:53 08/04/202412:09
Vis detaljeret fejlkoder Af poulmadsen i ASP 6 09/03/202418:16 10/03/202417:59
IIS virker ikke på asp sider... Af bsn i ASP 10 15/10/202313:12 18/10/202308:48
Se alle spørgsmål i kategorien Opret spørgsmål

Log ind eller opret profil

Hov!

For at kunne deltage på Computerworld Eksperten skal du være logget ind.

Det er heldigvis nemt at oprette en bruger: Det tager to minutter og du kan vælge at bruge enten e-mail, Facebook eller Google som login.

Opret Log ind

Du kan også logge ind via nedenstående tjenester



Alle kategorier på Eksperten
Seneste spørgsmål Seneste aktivitet
I går 18:09 Kan ikke fildele fra PC til PC Af gertLundberg i LAN/WAN
I går 17:33 Facebook kopier en tråd Af clausito i Sociale medier
I går 09:49 Indtogs sejlads : OL i Paris : Hvornår kom Danmark ? Af Ikke-ekspert i Fri debat
I går 03:28 Inkasso som privat? Af lekor adams i Fri debat
26/0723:51 Frossen cursor Af goglov i PC
White papers
Flere white papers »


Premium
Teaser billede
Nordjyske MapsPeople ruster op til opkøb af konkurrenter: "Vi vil vinde det her kapløb"
Læs mere »
Microsoft tager til genmæle: Vores licenspraksis skaber ikke unfair konkurrence
Færre unge studerende på landets it-uddannelser: "Vi afviser dem der, hvor de har lyst til at læse"
Overblik: Sådan forløb årets største databrud - mindst 165 organisationer ramt
Se alle »
Computerworld
Teaser billede
Elon Musk dropper CrowdStrike efter kæmpe nedbrud
Læs mere »
Med SearchGPT har verden fået en spritny søgemaskine: Kan den true Googles dominans?
Apples spritnye app til kodeord kommer til iOS 18: Sådan virker den
Apples folde-iPhone tager form: Her er planerne
Se alle »
CIO
Teaser billede
Så mange Microsoft-enheder blev ramt af gigantisk Crowdstrike-koks
Læs mere »
Telenor skrotter ældre it-system: Nyt system er en hyldevare
Derfor står Danske Bank foran en kæmpe AWS-transformation: Ellers skulle vi bygge en ny infrastruktur for at følge med
Microsoft kaster milliardbeløb efter nye tiltag til partnerprogrammet: Partnerne kan nu tjene endnu flere penge
Se alle »
Job & Karriere
Teaser billede
Efter 12 år er NNIT's hovedkvarter i Søborg nu ryddet og tomt - alle arbejder hjemme: "Det er med et vist vemod"
Læs mere »
Dansk top-profil trækker sig fra Microsoft: Skal være direktør i TDC Erhverv
KMD-direktør forlader selskabet: Det skal hun nu
IBM Danmark skifter ud i sin øverste ledelse - her er den nye direktion
Se alle »
White paper
Teaser billede
Nemmere overblik, styring og omkostningskontrol i dit multicloud-miljø
Læs mere »
Vejen væk fra WAN: Sådan skifter du til en moderne infrastruktur
Det behøver ikke at gøre ondt: Sådan gør du livet lettere for kunder med multicloud
Samlet platform sikrer sammenhæng, kontrol og sikkerhed i hybrid cloud
Se alle »

Events
Flere events »
White papers
Flere white papers »
IT-Kurser
Se alle vores it-kurser »