Cloudflare telah mengumumkan ciri baharu yang dipanggil “Pay Per Crawl,” yang membolehkan pemilik tapak web mengenakan bayaran kepada perangkak AI untuk mengakses kandungan mereka.
Ini menandakan pelaksanaan berskala besar pertama kod respons HTTP 402 Payment Required, piawaian yang telah lama tidak digunakan, memberikan penerbit dan pencipta lebih kawalan ke atas cara dan bila model AI boleh mengindeks atau melatih kerja mereka.
Apakah itu Pay Per Crawl?
Hari ini, ramai pemilik kandungan menghadapi keputusan binari: sekat perangkak AI sepenuhnya atau benarkan mereka akses tanpa had secara percuma. CloudflareSistem baharu memperkenalkan pilihan ketiga: mengecaj perangkak setiap permintaan menggunakan mekanisme pengebilan dan pengesahan terbina dalam.
Dengan Pay Per Crawl, pemilik kandungan menggunakan Cloudflare boleh:
- Caj perangkak AI atas dasar setiap permintaan
- Sekat atau benarkan perangkak tertentu mengikut keperluan
- Gunakan enjin berasaskan peraturan untuk mengawal harga dan akses selepas dasar bot/WAF sedia ada
Ciri ini kini dalam beta peribadi, tetapi menandakan peralihan ke arah web yang lebih boleh diwangkan dan berasaskan kebenaran, terutamanya dalam konteks pengikisan AI generatif.
Langkah-langkah untuk Copytrade
Perangkak AI mesti mengesahkan dengan Cloudflare menggunakan standard Web Bot Auth, kaedah yang mengesahkan identiti perangkak menggunakan pengepala HTTP yang ditandatangani dan kriptografi kunci awam.
Apabila perangkak mengakses kandungan:
- Jika ia termasuk niat pembayaran, kandungan tersebut disampaikan (HTTP 200 OK).
- Jika tidak, pelayan membalas dengan HTTP 402 Payment Required, bersama-sama dengan harga.
- Penerbit boleh menentukan kadar rata atau memintas caj untuk bot tertentu.
- Urus niaga kewangan dikendalikan oleh Cloudflare sebagai peniaga rekod.
Ini bermakna walaupun syarikat AI tidak mempunyai hubungan terdahulu dengan penerbit, ia kini boleh dicaj untuk akses atau disekat secara pengaturcaraan dengan jemputan untuk membayar.
Pandangan Kami: Permainan yang Lebih Besar & Mengapa Ia Penting
Untuk apa dalam This Cloudflare?
Daripada apa yang kita lihat, Cloudflare bukan sekadar menyelesaikan masalah penerbit – ia juga meletakkan asas untuk lapisan pelesenan web boleh atur cara yang boleh membentuk semula ekonomi AI, carian dan juga pembantu peribadi.
Pada skala, Pay Per Crawl boleh:
- Seragamkan harga kandungan digital merentas berjuta-juta domain
- Buat pasaran pelesenan masa nyata untuk ejen AI dan pengikis
- Benarkan pemilik web secara selektif mengewangkan jenis kandungan yang berbeza (cth, ulasan, penyelidikan, forum)
Dalam jangka panjang, kedudukan ini Cloudflare sebagai lapisan pembersihan untuk interaksi mesin ke kandungan dengan pengebilan, identiti dan penguatkuasaan peraturan yang dikendalikan di tepi. Jika ejen pintar menjadi dominan dalam cara pengguna menggunakan web (melalui Siri, ChatGPT, atau alatan AI menegak), Cloudflare boleh menjadi pondok tol lalai yang mengawal akses, pematuhan dan pengewangan.
Mengapa Ia Penting untuk Pengehosan & Penerbit
Langkah ini amat relevan untuk bilik berita, blog, forum dan tapak semakan pengehosan seperti HostScore.net – kesemuanya menghasilkan kandungan asli bernilai tinggi yang kerap dikikis oleh model AI.
Sehingga kini, tawaran pelesenan antara penerbit dan pembangun AI adalah sekali sahaja, sukar untuk skala dan hanya boleh diakses oleh kumpulan media yang besar. Pay Per Crawl membolehkan mana-mana pemilik domain menetapkan harga untuk perangkak dan berpotensi memperoleh hasil apabila sistem AI menggunakan kandungan mereka untuk latihan atau inferens.
Untuk ruang pengehosan, ia juga menimbulkan persoalan strategik:
- Perlukah penyedia pengehosan menyokong ciri Pay Per Crawl dalam papan pemuka mereka?
- Adakah had lebar jalur atau rangkak menjadi faktor dalam memilih hos web?
- Boleh harga APIs dan skema metadata berkembang untuk menyokong pelesenan akses AI dinamik?
CloudflarePelaksanaan boleh menetapkan asas untuk piawaian pengewangan yang lebih luas di web terbuka – bukan sahaja untuk latihan AI, tetapi juga untuk aplikasi agen masa depan yang menggunakan kandungan bagi pihak pengguna akhir.
Yang Boleh Menggunakan Cloudflare 'Pay Per Crawl'?
Ciri ini kini tersedia dalam beta peribadi. Cloudflare adalah menjemput:
- Pengendali perangkak AI sanggup membayar untuk akses kandungan
- Penerbit dan pencipta kandungan yang ingin mengenakan bayaran untuk akses
Pihak yang berminat boleh memohon melalui cloudflare.com/paypercrawl-signup.
