Cloudflare telah mengumumkan fitur baru yang disebut “Bayar Per Perayapan,” yang memungkinkan pemilik situs web untuk mengenakan biaya kepada perayap AI untuk mengakses konten mereka.
Ini menandai implementasi skala besar pertama dari kode respons HTTP 402 Payment Required, sebuah standar yang sudah lama tidak digunakan, yang memberikan penerbit dan kreator lebih banyak kontrol atas bagaimana dan kapan model AI dapat mengindeks atau melatih karya mereka.
Apa itu Bayar Per Perayapan?
Saat ini, banyak pemilik konten menghadapi keputusan biner: memblokir perayap AI sepenuhnya atau mengizinkan mereka akses tanpa batas secara gratis. CloudflareSistem baru memperkenalkan opsi ketiga: menagih perayap per permintaan menggunakan mekanisme penagihan dan verifikasi bawaan.
Dengan Bayar Per Perayapan, pemilik konten menggunakan Cloudflare bisa:
- Mengisi daya perayap AI berdasarkan permintaan
- Blokir atau izinkan perayap khusus sesuai kebutuhan
- Menggunakan mesin berbasis aturan untuk mengontrol harga dan akses setelah kebijakan bot/WAF yang ada
Fitur ini saat ini masih dalam versi beta pribadi, tetapi menandakan peralihan ke arah web yang lebih dapat dimonetisasi dan berbasis izin, terutama dalam konteks pengikisan AI generatif.
Cara Kerja
Perayap AI harus diautentikasi dengan Cloudflare menggunakan standar Web Bot Auth, sebuah metode yang memverifikasi identitas perayap menggunakan header HTTP yang ditandatangani dan kriptografi kunci publik.
Saat perayap mengakses konten:
- Jika menyertakan maksud pembayaran, konten disajikan (HTTP 200 OK).
- Jika tidak, server akan merespons dengan HTTP 402 Pembayaran Diperlukan, disertai harga.
- Penerbit dapat menentukan tarif tetap atau mengabaikan biaya untuk bot tertentu.
- Transaksi keuangan ditangani oleh Cloudflare sebagai pedagang tercatat.
Artinya, meskipun perusahaan AI sebelumnya tidak memiliki hubungan dengan penerbit, kini perusahaan tersebut dapat dikenai biaya untuk akses atau diblokir secara terprogram dengan undangan untuk membayar.
Pendapat Kami: Permainan yang Lebih Besar & Mengapa Itu Penting
Apa Manfaatnya? Cloudflare?
Dari apa yang kita lihat, Cloudflare tidak hanya memecahkan masalah penerbit – tetapi juga meletakkan dasar bagi lapisan lisensi web yang dapat diprogram yang dapat membentuk kembali ekonomi AI, pencarian, dan bahkan asisten pribadi.
Dalam skala besar, Bayar Per Perayapan dapat:
- Standarisasi harga konten digital di jutaan domain
- Buat pasar lisensi waktu nyata untuk agen dan scraper AI
- Biarkan pemilik web secara selektif memonetisasi berbagai jenis konten (misalnya, ulasan, penelitian, forum)
Dalam jangka panjang, posisi ini Cloudflare sebagai lapisan kliring untuk interaksi mesin-ke-konten dengan penagihan, identitas, dan penegakan aturan yang ditangani di tepi. Jika agen cerdas menjadi dominan dalam cara pengguna mengonsumsi web (melalui Siri, ChatGPT, atau alat AI vertikal), Cloudflare dapat menjadi gerbang tol default yang mengatur akses, kepatuhan, dan monetisasi.
Mengapa Ini Penting untuk Hosting & Penerbit
Langkah ini sangat relevan untuk ruang berita, blog, forum, dan situs ulasan hosting seperti HostScore.net – yang semuanya menghasilkan konten asli bernilai tinggi yang sering diambil oleh model AI.
Hingga saat ini, kesepakatan lisensi antara penerbit dan pengembang AI bersifat sekali pakai, sulit ditingkatkan skalanya, dan hanya dapat diakses oleh grup media besar. Bayar Per Perayapan memungkinkan setiap pemilik domain untuk menetapkan harga bagi perayap dan berpotensi memperoleh pendapatan ketika sistem AI menggunakan konten mereka untuk pelatihan atau inferensi.
Bagi ruang hosting, hal ini juga menimbulkan pertanyaan strategis:
- Haruskah penyedia hosting mendukung fitur Bayar Per Perayapan di dasbor mereka?
- Apakah bandwidth atau batasan perayapan menjadi faktor dalam memilih web host?
- Bisa jadi harga APIs dan skema metadata berkembang untuk mendukung lisensi akses AI yang dinamis?
CloudflareImplementasinya dapat menjadi dasar bagi standar monetisasi yang lebih luas di web terbuka – tidak hanya untuk pelatihan AI, tetapi juga untuk aplikasi agen masa depan yang mengonsumsi konten atas nama pengguna akhir.
Siapa yang Bisa Menggunakan Cloudflare 'Bayar Per Perayapan'?
Fitur ini saat ini tersedia dalam versi beta privat. Cloudflare mengundang:
- Operator perayap AI bersedia membayar untuk akses konten
- Penerbit dan pembuat konten yang ingin mengenakan biaya untuk akses
Peminat dapat mendaftar melalui cloudflare.com/paypercrawl-signup.
