Kami gembira mengumumkan bahwa Project Galileo kini akan menyertakan akses ke layanan Bot Management dan AI Crawl Control milik Cloudflare. Peserta dalam program, yang terdiri dari sekitar 750 jurnalis, organisasi berita independen, dan organisasi nirlaba lain yang mendukung pengumpulan berita di seluruh dunia, kini akan memiliki kemampuan untuk melindungi situs web mereka dari perayap AI—secara gratis.
Project Galileo adalah program gratis Cloudflare untuk membantu melindungi suara masyarakat sipil penting secara online. Diluncurkan pada tahun 2014, kini terdiri dari lebih dari 3.000 organisasi di 125 negara, dan telah menjadi fondasi bagi program Cloudflare gratis lainnya yang membantu melindungi pemilihan umum demokratis, sekolah umum, klinik kesehatan umum, dan infrastruktur penting lainnya.
Meskipun kami menganggap semua peserta Project Galileo akan mendapat manfaat dari layanan gratis tambahan ini, kami percaya layanan ini penting bagi organisasi berita.
Organisasi berita, khususnya berita lokal, menghadapi tantangan sangat besar dalam transisi ke web berbasis AI. Karena orang makin banyak yang beralih ke model AI untuk mencari informasi, makin sedikit lalu lintas web mereka yang sampai ke situs web asli tempat informasi berasal. Industri, seperti organisasi berita, yang mengandalkan lalu lintas pengguna untuk menghasilkan pendapatan semakin berisiko.
Mengizinkan organisasi berita memantau dan mengontrol bagaimana perayap AI berinteraksi dengan situs web mereka, akan membantu mereka melindungi konten dengan lebih baik dan membuat keputusan yang lebih tepat tentang keterlibatan dengan perusahaan AI. Intinya, tujuan kami adalah menyediakan alat yang dibutuhkan organisasi berita untuk menegosiasikan kompensasi yang adil atas pekerjaan mereka.
AI pada dasarnya mengubah cara arus lalu lintas di Internet. Cloudflare baru-baru ini menerbitkan data yang menunjukkan bahwa dengan Open AI, pemilik situs web 750 kali lebih sulit untuk mendapatkan volume lalu lintas yang sama dibandingkan dengan pencari Google sebelumnya. Dengan Antropik, masalahnya 30.000 kali lebih sulit.
Organisasi berita mengandalkan lalu lintas tidak hanya untuk terhubung dengan pembaca mereka, tetapi juga menghasilkan pendapatan dari langganan, iklan, e-commerce, dan lisensi. CEO Financial Times baru-baru ini menyatakan bahwa AI telah menyebabkan penurunan lalu lintas yang ''cukup mendadak dan berkelanjutan" sebesar 25% hingga 30% ke berbagai artikelnya yang tiba melalui mesin pencari.
Potensi kerugian lalu lintas pengguna dan penghasilan didapat di saat yang sudah genting bagi industri berita. Hal ini telah didokumentasikan dengan baik bahwa surat kabar dan stasiun radio berita kecil dan independen terus menghadapi tekanan keuangan yang sangat besar, khususnya di Amerika Serikat. Menurut kesaksian Kongres AS baru-baru ini, lebih dari dua surat kabar tutup per minggu pada tahun 2024 dengan sepertiga surat kabar di negara tersebut akan tutup sebelum awal tahun 2025. Laporan tahun 2024 oleh Northwestern Local News Initiative melaporkan lebih dari 206 daerah di AS tidak memiliki sumber berita lokal, dan 1.561 hanya memiliki satu.
Pemangkasan dana baru-baru ini terhadap Public Broadcasting Corporation dan National Public Radio, yang menyediakan hibah, program, dan dukungan lain kepada stasiun berita umum di seluruh AS, telah memberikan tekanan lebih lanjut terhadap berbagai organisasi ini dengan perkiraan akan ada lebih banyak penutupan.
Mengembalikan kontrol kepada jurnalis
Langkah penting pertama dalam membantu jurnalis dan organisasi berita beradaptasi dengan web berbasis AI adalah menyediakan alat untuk membantu mereka memantau dan mengontrol akses model AI ke konten mereka.
“Di era yang ditentukan oleh campur tangan AI dan digital, menyediakan alat yang tangguh untuk media independen bukan hanya dukungan - tetapi juga penyelamat” - Meera Selva, CEO Internews Europe
"Penerbit independen memerlukan alat yang mudah digunakan dan terjangkau, sehingga mereka dapat fokus mengembangkan bisnisnya. LION mengapresiasi keamanan dan perlindungan yang disediakan oleh Cloudflare kepada anggota kami melalui Project Galileo selama bertahun-tahun, dan kami senang melihat lebih banyak sumber daya kini tersedia untuk membantu anggota mengelola lanskap keamanan digital yang berkembang pesat. - Sarah Gustavus Lim, Direktur Keanggotaan LION
Bot Management dan AI Crawl Control Cloudflare dirancang khusus untuk tujuan ini. Bot Management adalah alat keamanan yang menggunakan pembelajaran mesin untuk menganalisis lalu lintas web guna membedakan antara bot yang baik, seperti perayap mesin pencari, dan bot jahat yang menyerang situs web atau mencuri kredensial. Fitur ini membantu pemilik situs web memblokir bot jahat agar tidak mencapai situs web mereka, sekaligus memastikan bot yang bermanfaat dapat terus menjalankan tugasnya.
AI Crawl Control menyediakan alat serupa untuk mengidentifikasi dan mengelola perayap AI. Cloudflare menggunakan beragam teknik untuk mengidentifikasi dan mengategorikan perayap (header HTTP, heuristik, dan perilaku lainnya) yang memberikan kemampuan kepada pemilik situs web untuk menganalisis aktivitas mereka berdasarkan jenis (misalnya. Pencarian AI, pengikis AI), dari mana mereka berasal (Google, OpenAI, Anthorpic, dll.), dan konten apa yang mereka akses. Berikut adalah jenis data yang dapat disediakan oleh alat AI Crawl Control Cloudflare (menggunakan domain radar.cloudflare.com ) sebagai contoh:
Cloudflare memadukan wawasan ini dengan kontrol yang mudah digunakan sehingga membantu pemilik situs web membuat keputusan yang tepat tentang apakah akan menyediakan data mereka, termasuk hanya untuk jenis bot tertentu atau untuk perusahaan AI tertentu. Misalnya, hal ini akan membantu surat kabar lokal untuk memutuskan akan memblokir semua perayap AI dan mempertahankan koneksi langsung ke para pembaca mereka melalui situs web mereka sendiri, memblokir hanya pengikis AI sekaligus mengizinkan perayap pencarian AI yang merujuk lalu lintas, atau bernegosiasi dan menjual akses eksklusif ke konten mereka ke satu perusahaan AI. Gambar berikut menunjukkan bagaimana AI Crawl Control membantu pengguna mengizinkan atau memblokir akses berdasarkan perayapan per perayap:
Kami rasa kemampuan untuk mengontrol dan memantau aktivitas perayap AI akan memberikan bantuan langsung kepada organisasi berita yang ingin melindungi konten mereka dan memahami bagaimana model menggunakan data mereka.
Kami juga merasa hal ini akan memberikan wawasan jangka panjang yang akan membantu organisasi berita untuk menegosiasikan hubungan yang saling menguntungkan dengan perusahaan AI dari waktu ke waktu.
Kemampuan media independen untuk menjalankan fungsi demokratisnya dengan mengumpulkan berita dan mendistribusikan informasi tepercaya bergantung pada hasil pendapatan yang bebas dari pengaruh politik atau bisnis. Dengan memantau dan memonetisasi perayapan situs penerbit, media bisa melindungi kekayaan intelektual mereka sekaligus mengembangkan arus pendapatan baru untuk mendukung jurnalisme berkualitas mereka." - Ryan Powell, Kepala Inovasi dan Bisnis Media di International Press Institute
Pers akan bersifat bebas, jika kita bisa mempertahankannya
Jurnalisme adalah bagian dari fondasi masyarakat bebas dan pemerintahan demokratis. Jurnalisme membantu menjaga akuntabilitas penguasa dan memberikan suara kepada mereka yang terpinggirkan dan kurang terwakili. Jurnalisme juga melindungi pasar bebas dan terbuka yang memungkinkan perusahaan rintisan untuk menantang petahana yang kuat.
Berita lokal khususnya membantu menciptakan identitas bersama. Tidak hanya dengan meliput acara masyarakat, olahraga sekolah menengah, pasar petani, dan bisnis baru, melainkan juga memberikan transparansi dan pengawasan penting atas pejabat setempat, dewan sekolah, acara keselamatan publik, dan pemilihan umum.
Membantu melindungi jurnalis dan organisasi berita online selalu menjadi bagian dari misi Cloudflare. Kami melihatnya penting bagi bisnis kami dan masa depan Internet.
Jika Anda tertarik untuk mempelajari lebih lanjut tentang Project Galileo, daftar sekarang juga. Jika Anda tertarik membantu membangun Internet yang lebih baik, ayo gabung dengan kami.