Project Galileo omvat nu ook toegang tot de Bot Management- en AI Crawl Control-services van Cloudflare. De 750 journalisten, onafhankelijke nieuwsorganisaties en andere non-profitorganisaties die aan het programma deelnemen en die nieuwsvergaring over de hele wereld ondersteunen, kunnen nu hun websites gratis tegen AI-crawlers beschermen.
Project Galileo is het gratis programma van Cloudflare voor de bescherming van belangrijke maatschappelijke stemmen op het internet. Het project is in 2014 van start gegaan en omvat nu meer dan 3000 organisaties in 125 landen. Het vormt de basis voor andere gratis Cloudflare-programma's die bescherming bieden aan democratische verkiezingen, openbare scholen, openbare klinieken en andere belangrijke instellingen.
Volgens ons zullen alle deelnemers aan Project Galileo baat hebben bij deze extra gratis diensten, met name nieuwsorganisaties.
Nieuwsorganisaties, en dan vooral lokale nieuwsorganisaties, staan voor grote uitdagingen bij de overgang naar het AI-gestuurde internet. Aangezien mensen steeds vaker gebruikmaken van AI-modellen voor informatie, komt een kleiner deel van hun webverkeer terecht op de websites waar die informatie vandaan komt. Sectoren die afhankelijk zijn van gebruikersverkeer om inkomsten te genereren, zoals nieuwsorganisaties, lopen steeds meer risico.
Als nieuwsorganisaties kunnen monitoren en beheren hoe AI-crawlers met hun websites omgaan, kunnen ze hun content beter beschermen en beter geïnformeerde beslissingen nemen over de samenwerking met AI-bedrijven. Ons uiteindelijke doel is om nieuwsorganisaties de hulpmiddelen te geven die ze nodig hebben om een eerlijke vergoeding voor hun werk te krijgen.
AI zorgt voor een fundamentele verandering van de manier waarop het internetverkeer verloopt. Cloudflare heeft onlangs data gepubliceerd waaruit blijkt dat het voor website-eigenaren met Open AI 750 keer moeilijker is om hetzelfde verkeersvolume te genereren vergeleken met de vorige Google-zoekmachine. Met Anthropic is dat 30.000 keer moeilijker.
Nieuwsorganisaties zijn afhankelijk van dit verkeer, niet alleen om contact te leggen met hun lezers, maar ook om inkomsten te genereren uit abonnementen, advertenties, e-commerce en licenties. De CEO van de Financial Times zei onlangs dat AI een 'vrij plotselinge en aanhoudende' daling van 25% tot 30% in het zoekmachineverkeer naar zijn artikelen had veroorzaakt.
Het potentiële verlies aan gebruikersverkeer en inkomsten komt op een lastig moment voor de nieuwsindustrie. Het is algemeen bekend dat kleine, onafhankelijke kranten en nieuwsradiostations voortdurend onder een aanzienlijke financiële druk staan, vooral in de Verenigde Staten. Volgens een recent document van het Amerikaanse Congres sloten meer dan twee kranten per week hun deuren in 2024. Een derde van alle kranten in het land zal naar verwachting vóór het begin van 2025 niet langer bestaan. Uit een rapport van het Northwestern Local News Initiative uit 2024 blijkt dat meer dan 206 Amerikaanse regio's geen enkele lokale nieuwsbron hadden en dat 1561 regio's er maar één hadden.
Recente bezuinigingen op de financiering van de Public Broadcasting Corporation en National Public Radio, die subsidies, programmering en andere steun verstrekten aan publieke nieuwszenders in de VS, hebben de druk op deze organisaties verder vergroot en er worden nog meer sluitingen verwacht.
De controle teruggeven aan journalisten
Een belangrijke eerste stap om journalisten en nieuwsorganisaties te helpen zich aan het AI-gestuurde internet aan te passen, is het bieden van hulpmiddelen waarmee ze de toegang van AI-modellen tot hun content kunnen monitoren en aansturen.
"In een tijdperk dat wordt gekenmerkt door AI en digitale ontwrichting, is het bieden van robuuste hulpmiddelen voor onafhankelijke media niet zomaar ondersteuning, maar van levensbelang," aldus Meera Selva, CEO van Internews Europe.
"Onafhankelijke uitgevers hebben behoefte aan tools die gebruiksvriendelijk en betaalbaar zijn, zodat ze zich kunnen richten op de groei van hun bedrijf. LION waardeert de beveiliging en bescherming die Cloudflare onze leden al jaren via Project Galileo biedt, en we zijn erg blij dat er nu meer middelen beschikbaar komen om onze leden te helpen omgaan met de snel veranderende digitale beveiliging." - Sarah Gustavus Lim, van LION- Membership Director
Cloudflare's Bot Management en AI Crawl Control zijn precies voor deze doeleinden ontworpen. Bot Management is een beveiligingstool die gebruikmaakt van machinaal leren om het webverkeer te analyseren en zo onderscheid te maken tussen goede bots, zoals de crawlers van zoekmachines, en slechte bots die websites aanvallen of inloggegevens stelen. Hiermee kunnen website-eigenaren slechte bots blokkeren, terwijl goede bots hun werk kunnen blijven doen.
AI Crawl Control biedt vergelijkbare hulpmiddelen om AI-crawlers te identificeren en aan te sturen. Cloudflare gebruikt verschillende technieken om crawlers te identificeren en te categoriseren (HTTP-header, heuristiek en ander gedrag), waardoor website-eigenaren de crawleractiviteit op type kunnen analyseren (bijv. AI-zoekmachine, AI-scraper), waar ze vandaan komen (Google, OpenAI, Anthorpic, etc.) en tot welke content ze toegang hebben. Hier volgt een voorbeeld van het soort informatie dat de AI Crawl Control-tool van Cloudflare kan leveren (met gebruik van het domein radar.cloudflare.com):
Cloudflare combineert deze inzichten met gebruiksvriendelijke bedieningselementen waarmee website-eigenaren weloverwogen beslissingen kunnen nemen over de vraag of ze hun content beschikbaar willen stellen, bijvoorbeeld alleen aan bepaalde soorten bots of aan individuele AI-bedrijven. Hierdoor kan een lokale krant bijvoorbeeld besluiten om alle AI-crawlers te blokkeren en een directe verbinding met de lezers via de eigen website te behouden, of alleen AI-schrapers te blokkeren en AI-zoekcrawlers die verkeer doorverwijzen toe te staan, of exclusieve toegang tot de content te onderhandelen met en te verkopen aan één enkel AI-bedrijf. De volgende afbeelding laat zien hoe gebruikers met AI Crawl Control toegang per crawler kunnen toestaan of blokkeren:
Wij denken dat de mogelijkheid om de activiteit van AI-crawlers te controleren en aan te sturen een grote hulp is voor nieuwsorganisaties die hun content willen beschermen en inzicht willen in de manier waarop modellen hun data gebruiken.
Wij denken ook dat dit lange-termijn-inzichten zal opleveren, waardoor nieuwsorganisaties wederzijds voordelige relaties met AI-bedrijven kunnen ontwikkelen.
"Willen ze hun democratische functie kunnen blijven vervullen door nieuws te verzamelen en betrouwbare informatie te verspreiden, moeten onafhankelijke media inkomsten genereren die losstaan van politieke of zakelijke invloeden. Nu ze het crawlen van de websites van uitgevers kunnen monitoren en er geld mee kunnen verdienen, kunnen media hun intellectuele eigendom beschermen en tegelijkertijd nieuwe inkomstenstromen genereren ter ondersteuning van hun kwaliteitsjournalistiek." - Ryan Powell, Hoofd Innovatie en Media Business bij het International Press Institute
Een vrije pers, als we die kunnen beschermen
Journalistiek is een van de fundamenten van een vrije samenleving en democratisch bestuur. De pers zorgt ervoor dat de machthebbers verantwoording afleggen en geeft gemarginaliseerde en ondervertegenwoordigde groepen een stem. De pers beschermt ook de vrije en open markten die het voor startups mogelijk maken om machtige gevestigde bedrijven te ondervragen.
Vooral lokaal nieuws draagt bij aan het creëren van een gedeelde identiteit. Niet alleen door verslag te doen van lokale evenementen, sportwedstrijden, boerenmarkten en nieuwe bedrijven, maar ook door essentiële transparantie te verlangen van lokale functionarissen en schoolbesturen, met toezicht op evenementen op het gebied van openbare veiligheid en verkiezingen.
De bescherming van journalisten en nieuwsorganisaties online is al sinds jaar en dag onderdeel van de missie van Cloudflare. Wij beschouwen het van essentieel belang voor onze onderneming en de toekomst van het internet.
Wilt u meer weten over Project Galileo? Meld u dan vandaag nog aan. Als u geïnteresseerd bent om mee te helpen aan de ontwikkeling van een beter internet, sluit u dan bij ons aan.