CIO Tech Eksperten IT-JOB IT-Kurser Events Podcast Søg

Log ind eller opret profil

Du kan også logge ind via nedenstående tjenester

jarret Nybegynder

08. marts 2012 - 20:19 Der er 7 kommentarer og
1 løsning

Hvordan finder web crawlers mine sider???

Hej

Jeg har sitet hvemkommer.dk hvor man kan oprette et event. Når man gør det får man to links, et til eventet og et til en admin side. Begge med unikt id. Problemet er at web crawler nu pludselig er begyndt at gå ind på siderne andre på ting. Ikke så heldigt og jeg fårstår ikke hvordan....

Kan nogen forklare hvordan det kan lade sig gøre og hvad jeg evt kan gøre ved det?

Event site
hvemkommer.dk/9c774d

Admin site eksempel
www.hvemkommer.dk/admin.php?c=80dbbfbb

Synes godt om

keysersoze Guru

08. marts 2012 - 21:04 #1

søgemaskinerne finder links på andre allerede indekserede sider så får nogle, bevidst eller ubevidst, lagt deres links offentligt ud finder søgemaskinerne dem. Må siderne ikke indekseret kan du kigge på noindex enten som meta eller i robots.txt.

Synes godt om

jarret Nybegynder

08. marts 2012 - 21:21 #2

nogle af de sider der bliver ændret på er jeg ret sikker på der ikke har været linket til...
kan jeg afvise robotter på særlig sider? det ville være super hvis admin.php eks ikke kunne findes men jeg vil jo gerne have at min index side er tilat finde på google :)

Synes godt om

keysersoze Guru

08. marts 2012 - 23:08 #3

ja - som sagt gennem meta eller robots.txt; http://support.google.com/webmasters/bin/topic.py?hl=da&topic=2370588

Synes godt om

jarret Nybegynder

09. marts 2012 - 14:01 #4

ahh ok ja med metatag kan jeg vælge sider fra.

har tidligere brugt robots.txt og endte med at min side helt forsvandt fra google...

super jeg prøver med

<meta name="robots" content="noindex">

på de sider jeg ikke vil ha indexeret

Synes godt om

keysersoze Guru

09. marts 2012 - 18:16 #5

Hvis siderne allerede er indekseret så kan der gå noget tid før resultatet kan ses - afhænger primært af hyppigheden robotterne kommer forbi.

Synes godt om

jarret Nybegynder

10. marts 2012 - 12:13 #6

ok, men vil Malware robotter ikke bare ignorere? eller finder de siden gennem googles indeksering.

de sider der bliver ramt at robotter kan jeg finde ved søgning på google på id'et så det kunne tyde på at det kun er når google har indeseret at de finder siderne... kan det passe?

og derved at meta tag'et måske vil virke

for lige at test meta tag'et poster jeg lige et link her og ser om det kan findes på google i morgen...

http://www.hvemkommer.dk/admin.php?c=38b3a9f6

Synes godt om

jarret Nybegynder

10. marts 2012 - 12:17 #7

læg et svar keyser

Synes godt om

keysersoze Guru

10. marts 2012 - 13:22 #8

Enhver kan lave en søgemaskine, der ignorerer både robots og meta og links kan jo også lægges ud i fora osv ligesom folk med for meget tid i teorien kan gætte sig til urls - og er dette nogle bekymringer du vil undgå er eneste mulighed at skjule det bag login.

Synes godt om

Ny bruger Nybegynder

Din løsning...

Tilladte BB-code-tags: [b]fed[/b] [i]kursiv[/i] [u]understreget[/u] Web- og emailadresser omdannes automatisk til links. Der sættes "nofollow" på alle links.

Følg dette spørgsmål

Opret Preview

Se alle it-kurser fra Computerworld Kurser

IT-kurser om Microsoft 365, sikkerhed, personlig vækst, udvikling, digital markedsføring, grafisk design, SAP og forretningsanalyse.

Se alle it-kurser

Flere spørgsmål fra Andre onlineløsninger kategorien

Titel	Indlæg	Oprettet	Seneste aktivitet
Problem med WordPress-installation via One.com's 1-klik installation 🚨 Af tobiasandersen i Andre onlineløsninger	7	09/09/202408:56	18/09/202415:18
Kunstig Enteligents For Synshandicappede Af tobberjas i Andre onlineløsninger	4	25/05/202411:37	26/05/202423:04
Hvor gemmer e-conomic momspercentage? Af Computernørderne i Andre onlineløsninger	2	20/04/202419:04	22/04/202411:06
Mailchimp: placere Image block i midten af teksten Af visto i Andre onlineløsninger	4	10/04/202421:45	14/04/202419:04
Google Calendar til tidsbestilling Af Psykolog Julie Lillegaard i Andre onlineløsninger	4	09/04/202421:47	19/04/202414:18

Se alle spørgsmål i kategorien Opret spørgsmål

Log ind eller opret profil

Hov!

For at kunne deltage på Computerworld Eksperten skal du være logget ind.

Det er heldigvis nemt at oprette en bruger: Det tager to minutter og du kan vælge at bruge enten e-mail, Facebook eller Google som login.

Du kan også logge ind via nedenstående tjenester

Alle kategorier på Eksperten

Seneste artiklerRSS

01/11

Test af Apple Watch Series 10: Apples jubilæums-model er blevet lidt af en mester af det hele

01/11

Google Clouds netop fratrådte topchef har fundet sit nye job: Bliver en af de mest magtfulde personer hos ServiceNow

01/11

Nu går OpenAI efter struben på Google: ChatGPT fungerer nu også som en AI-søgemaskine

01/11

Nørgaard: Agenterne kommer, og jeg er klar: Måske bliver min gamle drøm snart virkelighed

01/11

Staten vil selv udvikle kæmpe it-system til 650 millioner kroner: Nu tvinges regeringen til at lægge vigtige dokumenter frem

01/11

Det går fantastisk på det danske Dynamics-marked: NNIT-selskabet Scales kan vælge og vrage mellem opgaver

01/11

Linus Torvalds giver russiske Linux-udviklere sparket: Vil ikke have noget med dem at gøre

01/11

Skelsættende GDPR-sag ændrer definitionen af 'følsomme oplysninger'

01/11

Google indlemmer sin AI Gemini i Google Maps, Google Earth og Waze: Det kommer det til at betyde

01/11

Microsoft: Tvungen skift til Windows 11 kan udskydes med et år, hvis du betaler os 200 kroner

01/11

Sådan blev Margrethe Vestager ’Silicon Valleys største fjende’

Vis flere artikler

IT-JOB

ATP

IT Security Specialist - for some of the most critical digital infrastructure in Denmark

AURA A/S

Senior integrationsudvikler til udviklingsteam

Strandmøllen A/S

IT-driftsmedarbejder

Finanstilsynet

Projektleder

Unik System Design A/S

Ansvarlig UX’er med grafisk talent søges

Vis flere jobs

Seneste spørgsmål Seneste aktivitet

I dag 06:10	Excel åbner fil i kæmpe format Af Aske i Excel
I går 22:00	Datafordeler Af Lsk i PHP
I går 12:37	Summere beløb pr. dato Af TTA i Excel
31/1022:44	Tilslutte chassic fans Af viking69 i PC
31/1020:28	LED lysstofrør Af ErikHg i Fri debat