Programmering af crawler

Ikke legalt i forhold til deres regler:

http://www.linkedin.com/static?key=user_agreement&trk=hb_ft_userag

Don't undertake the following:

...

Duplicate, license, sublicense, publish, broadcast, transmit, distribute, perform, display, sell, rebrand, or otherwise transfer information found on LinkedIn (excluding content posted by you) except as permitted in this Agreement, LinkedIn's developer terms and policies, or as expressly authorized by LinkedIn;

...

Utilize or copy information, content or any data you view on and/or obtain from LinkedIn to provide any service that is competitive, in LinkedIn's sole discretion, with LinkedIn;

...

Adapt, modify or create derivative works based on LinkedIn or technology underlying the Services, or other Users' content, in whole or part, except as permitted under LinkedIn's developer program;

...

Rent, lease, loan, trade, sell/re-sell access to LinkedIn or any information therein, or the equivalent, in whole or part;

...

Deep-link to the Site for any purpose, (i.e. including a link to a LinkedIn web page other than LinkedIn's home page) unless expressly authorized in writing by LinkedIn or for the purpose of promoting your profile or a Group on LinkedIn as set forth in the Brand Guidelines;

@arne_v: Ikke desto mindre gør Google det i stor stil. Men måske har de en aftale? Har kun læst dit uddrag, men det ser også ud til at komme an på formålet.

@naquer: Oplysninger, der vises på html-sider, du har adgang til, og som der kan uddrages struktureret information fra, kan crawles. SÅ et korte svar er JA.

<ole>

"Ikke desto mindre gør Google det i stor stil."  >> Nej.

"Men måske har de en aftale?" >> Næppe.

"Har kun læst dit uddrag, men det ser også ud til at komme an på formålet." >> Ja og nej.

Tag for eksempel et kik på LinkedIn's robots.txt. Det er ikke så svært at se, at LinkedIn ikke giver adgang til de enkelte profiler. Den slags overholder Google faktisk.

Det, du kan finde p[ Google, er oversigtssider som denne.

/mvh
</bole>

Ole,

Prøv at google et ikke for almindeligt navn, fx Frank Gade Nielsen. Det første hit er hans public linkedin profil. Hvor får google så den information fra?

Og dette uanset den robots.txt, du henviser til, som indeholder pub.

Og prøv også at google "peter hansen linkedin" nu du er i gang.

Jeg tror, du bør sætte dig ind i, hvordan man læser en robots.txt  *o)

LinkedIn har formodentlig vurderet, at det vil være en fordel for dem selv, at visse store søgemaskiner har adgang til deres offentlige profiltekster. Alle andre er sat til Disallowed.

Ole,

Vi er vist omsider enige om, at google faktisk læser profiler i stor stil, hvilket var min indledende påstand, og som du imødegik.

Så jeg vil lukke her, og undlade at kommentere på hvem der bør læse på hvad.

Fin plan  =)

Der er ikke nogen tekniske problemer.

Men den foreslaaede brug (der refereres til hotels.com og momondo.com) er ulovlig medmindre der foreligger en skriftlig tilladelse fra LinkedIn per deres user agreement.

Mange tak for svarene.

Konkret skal jeg bruge data til at lave noget statistik - altså skal jeg ikke bruge informationer om enkelte brugere, men i stedet udtrække alle der f.eks. har en bachelor fra København. Hvis jeg forstår jer ret, er det udelukkende brugere som google der kan gøre dette?

Du kunne jo proeve at spoerge dem om lov.

Dit formaal lyder ikke som noget der vil genere dem og derfor kunn du maaske faa OK fra dem.

Tak for svarene.

Lukket