Er webscraping lovligt?

det Webscraping er ikke ulovligt i sig selv. Udtrække offentlige data på internet er lovligt, forudsat at man overholder Brugsbetingelser på hjemmesiden, den RGPD og ophavsret.

Her er de regler, du skal kende, før du går i gang.

Er webscraping lovligt? Hvad siger loven?

det web scraping er at Udtræk data automatisk fra websider. Konkret går et værktøj gennem et websted, læser sidernes kode og henter de oplysninger, du er interesseret i. Som regel er denne fremgangsmåde juridisk så længe du holder dig til offentlige data tilgængelige på internettet.

Lovligheden afhænger først og fremmest af tre elementer : de generelle brugsbetingelser for hjemmesiden, den RGPD og ophavsret. Scraping bliver ulovligt, når man rører ved personlige oplysninger, såsom personlig data uden retsgrundlag, eller når du omgår en teknisk beskyttelse.

Hvad angår ophavsretten, er lov om intellektuel ejendomsret fastlægger rammerne for indsamling, opbevaring og brug af data. Producenten af en database har desuden en sui generis-ret (artikel L342-3 i loven om intellektuel ejendomsret), som forbyder udtræk af en væsentlig del af en database, selvom oplysningerne deri er offentligt tilgængelige.

Så snart du indsamler personlig data, så kommer du ind i området for RGPD. Det er ligegyldigt, om oplysningerne er offentlige: du skal have en retsgrundlag (samtykke eller berettiget interesse), overholde princippet om dataminimering og informere de berørte personer. Det er netop dette punkt, som mange glemmer, inden de går i gang.

Hvilke faktorer gør webscraping ulovligt?

Der er fire faktorer, der går igen oftest: de Brugsbetingelser, dem ophavsret, det RGPD og forstyrrelse af hjemmesidens funktion. Her er, hvad du skal tjekke, inden du udtrækker data, uanset om du laver prisscraping eller andre oplysninger.

Almindelige brugsbetingelser (ABB)

Hjemmesider har ret til at fastsætte deres egne regler for adgang til deres sider. Du finder dem i generelle brugsbetingelser (GBB). Disse dokumenter fungerer som juridisk aftale mellem hjemmesiden og dens brugere.

Hvis dokumentet udtrykkeligt forbyder web scraping, kan din dataindsamling udsætte dig for kontraktmæssige risici. Ifølge fransk ret er overtrædelse af brugsbetingelserne først og fremmest et spørgsmål om aftaleret, det er ikke nødvendigvis en straffesag, men det er et første tydeligt signal. Læs derfor de generelle vilkår, inden du starter din download.

Intellektuelle ejendomsrettigheder

det ophavsret beskytter originale værker, herunder visse former for indhold og databaser. Hvis et websted er beskyttet af ophavsret, kan det udgøre en overtrædelse at kopiere indholdet uden tilladelse.

I Frankrig er Lov om intellektuel ejendomsret gå et skridt videre med databaseudgiverens sui generis-ret (artikel L.342-3). Denne rettighed beskytter den, der har oprettet en database, uafhængigt af den klassiske ophavsret. Konkret betyder det, at en betydelig udvinding Indsamling af data kan være ulovlig, selvom disse data er offentligt tilgængelige. Det er det punkt, der oftest overses.

Personoplysninger og GDPR

I Europa er scraping af personlig data (navne, e-mailadresser, profiler LinkedIn, regnskaber over sociale netværk…) er strengt reguleret af RGPD, og det gælder endda for data, der er frit tilgængelige på internettet. Så snart du indsamler oplysninger, der identificerer en person, foretager du en behandling af personoplysninger og du skal have en retsgrundlag : samtykke, berettiget interesse eller lovmæssig forpligtelse.

GDPR pålægger også positive forpligtelser: at overholde minimering, informere de berørte personer og fastsætte en holdbarhed begrænset. Uden et klart retsgrundlag svarer din dataindsamling til ulovlig webscraping. Den CNIL kan i så fald pålægge bøder på op til 20 millioner euro Hvor 4 % af den globale årlige omsætning, alt efter hvilket beløb der er størst.

Forstyrrelse af hjemmesidens funktion

Selv på et websted, der tillader webscraping, er et intensiv scraping kan blive ulovligt. Denne form for automatiseret dataudtræk overbelaster serveren og kan forhindre, at den fungerer korrekt, hvilket dermed sidestilles med en Denial-of-Service-angreb (DoS).

I Frankrig er den’§ 323-2 i straffeloven straffer forstyrrelse af et automatiseret databehandlingssystem med straffe på op til 5 års fængsel og En bøde på 150.000 euro. Professionelle værktøjer som Bright Data tilbyder strukturerede løsninger for at undgå denne form for misbrug.

Hvad er god praksis for lovlig webscraping?

At udføre scraping på lovlig vis bygger på nogle få enkle regler. De beskytter dig mod juridiske risici og overholder generelle brugsbetingelser websteder. Hvis du vil forstå Hvorfor bruge scraping?, så kan vi lige så godt gøre det ordentligt fra starten.

1. Overhold robots.txt-filen

De fleste hjemmesider indeholder en fil robots.txt, som angiver, hvilke sider der må gennemsøges af robotter, herunder scrapers. Hvis denne fil forbyder adgang til et afsnit, må du ikke scrape det. Det er grundlaget for en dataindsamling respektfuld og i overensstemmelse med reglerne.

2. Begræns antallet af forespørgsler

For ikke at forstyrre en hjemmesides server skal du begræns hyppigheden af dine forespørgsler. Der findes egnede værktøjer til dette formål, især dem, der anvendes i web scraping Python. De giver dig mulighed for at styre tidsintervallerne mellem de enkelte forespørgsler. Et for aggressivt tempo kan overbelaste en server og udgøre en strafbar handling, så sørg for at sprede dine opkald godt ud.

3. Identificer dig tydeligt via User-Agent

Når man scraper, er det bedst at bruge en User-Agent klar i dine forespørgsler HTTP. Det giver webstedets administratorer mulighed for at se, at det er et script og ikke et menneske, der tilgår indholdet. Et User-Agent Med »identifiable« kan du:

• Forbedre gennemsigtighed af din virksomhed
• At fremme dialogen, hvis der opstår problemer
• Begrænse risikoen for blokering

4. Fokus på offentlige data

For at undgå juridiske risici bør du fokusere på offentlige data der er frit tilgængelige på internettet, dvs. oplysninger, som alle kan se uden forudgående tilmelding eller login. Undgå derimod at hente personlig data eller oplysninger beskyttet med adgangskode.

5. Brug API'er, hvis de er tilgængelige

Der er mange hjemmesider, der tilbyder API til webscraping for at gendanne deres data på en lovlig og struktureret. Det er den sikreste måde at forblive i overensstemmelse i overensstemmelse med de langsigtede juridiske rammer. Disse officielle værktøjer sikrer også større stabilitet end direkte scraping. Brug dem så hurtigt som muligt i dine projekter.

Er web scraping lovligt i Frankrig?

Ja, den Webscraping er lovligt i Frankrig, så længe du overholder retlige rammer på plads. Indsamling af offentlige data er fortsat tilladt, men skal ske i overensstemmelse med RGPD, til generelle brugsbetingelser websteder og til ophavsret.

Hvis reglerne ikke overholdes, kan det medføre alvorlige juridiske konsekvenser:

• Civilretlige sanktioner: I tilfælde af overtrædelse af brugsbetingelserne eller ophavsretten kan rettighedshaverne kræve erstatning fra dig erstatning og renter.
• Strafferetlige sanktioner: Ulovlig indsamling af personoplysninger straffes hårdt. Den’§ 226-16 i straffeloven forudser op til 5 års fængsel og En bøde på 300.000 euro for uretmæssig eller svigagtig indsamling.
• Sanktioner i henhold til GDPR: For en virksomhed kan en bøde løbe op på 4 % af den globale årlige omsætning Hvor 20 millioner euro, alt efter hvilket beløb der er størst.

Et konkret eksempel: udtrækning af profiler LinkedIn siden sociale netværk til kunderekruttering, uden retsgrundlag eller manglende underretning af de berørte personer medfører direkte en sanktion fra CNIL. Det er et af de hyppigste tilfælde af ulovlig scraping i praksis.

I tilfælde af tvivl om overensstemmelse om dit projekt er det bedst at konsultere en specialistadvokat om databeskyttelse, inden du går i gang.