- Cloudflare akan memblokir crawler Big Tech AI Bot secara default.
- Bayaran Cloudflare per merangkak memungkinkan pembuat biaya raksasa untuk akses konten.
- Langkah ini membahas kekhawatiran tentang konten yang mengeksploitasi teknologi besar tanpa persetujuan atau pembayaran.
Cloudflare mengumumkan perubahan kebijakan utama yang dapat membentuk kembali dinamika antara pembuat konten dan Ai perusahaan.
Mulai Selasa, perusahaan akan secara otomatis memblokir AI Crawlers Dari Mengikis Situs Web yang kuat, kecuali jika pemilik situs secara eksplisit memilih. Ini menjadikan CloudFlare sebagai penyedia infrastruktur internet utama pertama untuk menegakkan model berbasis izin default untuk akses konten AI.
Langkah ini dilakukan di tengah kekhawatiran yang berkembang dari pembuat konten dan penerbit yang mengeksploitasi pekerjaan mereka tanpa persetujuan atau kompensasi.
Secara historis, mesin pencari telah mengindeks konten dengan cara yang mendorong lalu lintas dan pendapatan iklan kembali ke sumber asli. Tetapi crawler bot AI, digunakan untuk melatih model bahasa besar, memanen data dalam jumlah besar dan mengirim lalu lintas jauh lebih sedikit kembali ke pembuat asli konten ini. Bot -bot ini digunakan oleh raksasa industri termasuk Google, Meta, Openai, dan Antropik.
Cloudflare, yang mengelola dan melindungi lalu lintas sekitar 20% dari Web, awalnya meluncurkan sistem pemblokiran crawler AI satu klik opsional pada tahun 2024. Lebih dari satu juta pelanggan memungkinkannya. Sekarang, ini menjadi default: Perusahaan AI sekarang akan diminta untuk mendapatkan izin eksplisit dari situs web sebelum mengikis, membalik skrip pada pemanenan data pasif.
“Konten asli adalah apa yang menjadikan internet salah satu penemuan terbesar di abad terakhir, dan kita harus berkumpul untuk melindunginya,” Cloudflare CEO Pangeran Matthew dikatakan.
“AI Crawlers telah menggores konten tanpa batas,” tambahnya. “Tujuan kami adalah mengembalikan kekuatan di tangan pencipta, sambil tetap membantu perusahaan AI berinovasi. Ini adalah tentang melindungi masa depan internet yang gratis dan bersemangat dengan model baru yang bekerja untuk semua orang.”
Bayar per merangkak
Sebagai bagian dari dorongan yang lebih luas menuju internet berbasis izin, Cloudflare juga meluncurkan gaji per merangkak pada hari Selasa. Fitur baru ini memungkinkan penerbit dan pencipta memilih perusahaan AI untuk mengakses konten mereka. Peserta dapat menetapkan harga untuk perayap individu, memberikan kontrol penuh atas bagaimana dan apakah pekerjaan mereka digunakan dalam pelatihan model AI.
Cloudflare berharap untuk membuat pasar yang transparan dan berbasis persetujuan yang membantu pencipta memutuskan apakah akan mengizinkan semua crawler AI, mengizinkan yang spesifik, atau menetapkan biaya akses mereka sendiri, mengubah penggunaan konten yang sebelumnya tidak dimonetisasi menjadi aliran pendapatan baru.
Untuk perusahaan AI, bayar per crawl menawarkan antarmuka yang ramping untuk menelusuri persyaratan akses, melihat harga, dan memilih apakah akan membayar atau berjalan pergi tanpa data.
Bayar per Crawl saat ini tersedia untuk sekelompok mitra tertentu, dengan akses yang lebih luas tersedia melalui ini halaman pendaftaran.
Penerbit besar telah menandatangani atau menyatakan dukungan untuk langkah terbaru Cloudflare untuk memblokir crawler bot AI secara default, termasuk Gannett, Time, BuzzFeed, The Atlantic, dan Associated Press. Perusahaan lain, seperti Stack Overflow, telah mendukung inisiatif ini.
Pada intinya, gerakan Cloudflare adalah upaya untuk mengatur ulang model ekonomi Internet untuk zaman baru AI generatif. Inisiatif ini tidak menghentikan inovasi AI, tetapi mendorongnya untuk tumbuh secara bertanggung jawab dengan membayar kekayaan intelektual dan menghargai pencipta di balik data.
Mendaftar untuk Newsletter Memo Tech BI Di Sini. Hubungi saya melalui email di abarr@businessinsider.com.
Baca selanjutnya
