Cloudflare أعلنت شركة جوجل عن ميزة جديدة تسمى "الدفع مقابل كل عملية زحف"، والتي تتيح لأصحاب مواقع الويب تحصيل رسوم من روبوتات الذكاء الاصطناعي مقابل الوصول إلى محتواهم.
يمثل هذا أول تنفيذ واسع النطاق لرمز الاستجابة HTTP 402 Payment Required، وهو معيار لم يتم استخدامه لفترة طويلة، مما يمنح الناشرين والمبدعين مزيدًا من التحكم في كيفية ومتى يمكن لنماذج الذكاء الاصطناعي فهرسة أعمالهم أو التدريب عليها.
ما هو الدفع مقابل الزحف؟
يواجه العديد من مالكي المحتوى اليوم قرارًا ثنائيًا: حظر روبوتات الذكاء الاصطناعي بالكامل أو السماح لها بالوصول غير المحدود مجانًا. Cloudflareيقدم النظام الجديد خيارًا ثالثًا: فرض رسوم على أدوات الزحف لكل طلب باستخدام آلية الفوترة والتحقق المضمنة.
مع الدفع لكل زحف، يمكن لأصحاب المحتوى استخدام Cloudflare يستطيع:
- زواحف شحن الذكاء الاصطناعي على أساس كل طلب
- حظر أو السماح برامج زحف محددة حسب الحاجة
- إستخدم محرك قائم على القواعد للتحكم في التسعير والوصول بعد سياسات الروبوت/WAF الحالية
الميزة متاحة حاليًا في مرحلة تجريبية خاصة، ولكنها تشير إلى التحول نحو ويب أكثر قابلية للربح ويعتمد على الأذونات، خاصة في سياق كشط الذكاء الاصطناعي التوليدي.
كيف تعمل هذه التقنية؟
يجب على برامج الزحف الخاصة بالذكاء الاصطناعي المصادقة باستخدام Cloudflare باستخدام معيار Web Bot Auth، وهي طريقة للتحقق من هوية أداة الزحف باستخدام رؤوس HTTP الموقعة وتشفير المفتاح العام.
عندما يصل الزاحف إلى المحتوى:
- إذا كان يتضمن نية الدفع، فسيتم تقديم المحتوى (HTTP 200 OK).
- إذا لم يحدث ذلك، يستجيب الخادم بـ HTTP 402 Payment Required (مطلوب الدفع)، بالإضافة إلى السعر.
- يمكن للناشرين تحديد سعر ثابت أو تجاوز الرسوم لروبوتات محددة.
- تتم معالجة المعاملات المالية بواسطة Cloudflare باعتباري تاجرًا مسجلاً.
وهذا يعني أنه حتى لو لم تكن لشركة الذكاء الاصطناعي علاقة سابقة مع الناشر، فمن الممكن الآن فرض رسوم على الوصول إليها أو حظرها برمجيًا بدعوة للدفع.
رأينا: المسرحية الأكبر وأهميتها
ما هو في هذا ل Cloudflare?
ومن ما نرى، Cloudflare لا يقتصر الأمر على حل مشكلة الناشر فحسب، بل إنه يضع الأساس أيضًا لطبقة ترخيص ويب قابلة للبرمجة يمكنها إعادة تشكيل اقتصاديات الذكاء الاصطناعي والبحث وحتى المساعدين الشخصيين.
على نطاق واسع، يمكن لـ Pay Per Crawl أن:
- توحيد أسعار المحتوى الرقمي عبر ملايين المجالات
- إنشاء سوق ترخيص في الوقت الفعلي لوكلاء الذكاء الاصطناعي والكاشطات
- السماح لأصحاب المواقع الإلكترونية بتحقيق الدخل بشكل انتقائي من أنواع مختلفة من المحتوى (على سبيل المثال، المراجعات، والأبحاث، والمنتديات)
على المدى الطويل، هذا هو الموقف Cloudflare كطبقة تطهير للتفاعلات بين الآلة والمحتوى، مع معالجة الفواتير والهوية وتطبيق القواعد على الحافة. إذا أصبحت الوكلاء الأذكياء مسيطرين على كيفية استخدام المستخدمين للويب (عبر Siri، ChatGPT، أو أدوات الذكاء الاصطناعي العمودية، Cloudflare قد يصبح كشك الرسوم الافتراضي الذي يحكم الوصول والامتثال وتحقيق الربح.
لماذا هذا مهم للاستضافة والناشرين
هذه الخطوة ذات أهمية خاصة لغرف الأخبار والمدونات والمنتديات ومواقع استضافة المراجعات مثل HostScore.net - والتي تنتج جميعها محتوى أصليًا عالي القيمة يتم استخراجه بشكل متكرر بواسطة نماذج الذكاء الاصطناعي.
حتى الآن، كانت اتفاقيات الترخيص بين الناشرين ومطوري الذكاء الاصطناعي تُبرم لمرة واحدة فقط، ويصعب توسيع نطاقها، ولا يمكن الوصول إليها إلا من قِبل مجموعات الوسائط الكبيرة. يتيح نظام الدفع مقابل الزحف لأي مالك نطاق تحديد أسعار أدوات الزحف، وربما تحقيق إيرادات عندما تستخدم أنظمة الذكاء الاصطناعي محتواها للتدريب أو الاستدلال.
أما بالنسبة لمساحة الاستضافة، فإنها تثير أيضًا أسئلة استراتيجية:
- هل يجب على موفري الاستضافة دعم ميزات الدفع لكل زحف في لوحات المعلومات الخاصة بهم؟
- هل سيصبح عرض النطاق الترددي أو حدود الزحف عاملاً في اختيار مستضيف الويب؟
- هل يمكن التسعير APIs هل تتطور مخططات البيانات الوصفية لدعم ترخيص الوصول الديناميكي للذكاء الاصطناعي؟
Cloudflareإن تنفيذ هذا المشروع قد يضع الأساس لمعايير تحقيق الدخل الأوسع على الويب المفتوح - ليس فقط لتدريب الذكاء الاصطناعي، ولكن أيضًا لتطبيقات الوكيل المستقبلية التي تستهلك المحتوى نيابة عن المستخدمين النهائيين.
من يمكنه الاستخدام Cloudflare "الدفع مقابل كل عملية زحف"؟
الميزة متاحة حاليًا في النسخة التجريبية الخاصة. Cloudflare يدعو:
- مشغلو برامج الزحف بالذكاء الاصطناعي على استعداد للدفع مقابل الوصول إلى المحتوى
- الناشرون ومنشئو المحتوى الذين يرغبون في فرض رسوم على الوصول
يمكن للأطراف المهتمة التقديم عبر cloudflare.com/paypercrawl-signup.