Το Cloudflare Επιτρέπει στις Ιστοσελίδες να Χρεώνουν τα AI Bots Με ‘Πληρωμή Ανά Αναζήτηση’

Η Cloudflare προσφέρει στους εκδότες μια νέα επιλογή: να χρεώνουν τα AI bots για την αναζήτηση στις ιστοσελίδες τους χρησιμοποιώντας ένα αναβιωμένο σύστημα πληρωμής HTTP 402.

Μέσω του νέου της συστήματος “Pay Per Crawl” οι ιδιοκτήτες ιστοσελίδων μπορούν να χρεώνουν τα AI bots για την πρόσβαση στο περιεχόμενό τους. Το σύστημα παρέχει στους εκδότες μια εναλλακτική προσέγγιση από την τρέχουσα πολιτική των δύο επιλογών, η οποία είτε επιτρέπει την αποκόμιση δεδομένων από AI, είτε τον πλήρη αποκλεισμό της πρόσβασης AI.

«Πολλοί εκδότες, δημιουργοί περιεχομένου και ιδιοκτήτες ιστοσελίδων αισθάνονται επί του παρόντος ότι έχουν ένα δυαδικό επιλογή – είτε να αφήσουν την κύρια πόρτα ευρύχωρα ανοιχτή για την ΑΙ να καταναλώσει όλα όσα δημιουργούν, είτε να δημιουργήσουν τον δικό τους περιφραγμένο κήπο,» είπε η Cloudflare. «Αλλά τι γίνεται αν υπήρχε άλλος τρόπος;»

Με το Pay Per Crawl, οι δημιουργοί περιεχομένου τώρα μπορούν να αποφασίσουν ποιος εισέρχεται και πόσο θα πληρώσει. Μπορούν να αφήσουν κάποια ΑΙ να εισέρχονται δωρεάν, να αποκλείσουν εντελώς άλλα, ή να χρεώσουν για την πρόσβαση. “Θέλαμε οι δημιουργοί περιεχομένου να έχουν τον έλεγχο του ποιος θα έχει πρόσβαση στο έργο τους,” είπε η Cloudflare. «Οι δημιουργοί θα πρέπει να είναι στο τιμόνι.»

Η κίνηση αυτή προκύπτει μέσα από μια αυξανόμενη αντίδραση κατά των εταιρειών AI που χρησιμοποιούν περιεχόμενο από το διαδίκτυο χωρίς συγκατάθεση. Για παράδειγμα, το YouTube έχει δεχτεί κριτική για το ότι επιτρέπει στη Google να αντιγράφει βίντεο χωρίς να ειδοποιεί τους δημιουργούς. Επιπλέον, η λειτουργία AI Overviews της Google έχει μειώσει την κυκλοφορία σε ιστότοπους ειδήσεων όπως το HuffPost και την εφημερίδα The Washington Post κατά περισσότερο από 50%.

«Η Google απλώς παίρνει το περιεχόμενο με τη βία και το χρησιμοποιεί χωρίς καμία ανταπόδοση – ο ορισμός της κλοπής», δήλωσε η Danielle Coffey, πρόεδρος της News/Media Alliance.

Το εργαλείο λειτουργεί με τη χρήση ενός παλιού χαρακτηριστικού του διαδικτύου: του κώδικα απόκρισης HTTP 402, που αντιστοιχεί στο «Απαιτείται Πληρωμή». Αν ένα AI bot προσπαθεί να έχει πρόσβαση σε μια σελίδα, ο διακομιστής μπορεί τώρα να απαντήσει με ένα 402 και να περιλαμβάνει μια ετικέτα τιμής. Εάν το bot συμφωνεί να πληρώσει, ο διακομιστής παρέχει το περιεχόμενο.

Η Cloudflare παρέχει την τεχνική υποδομή και διαχειρίζεται τις πληρωμές. Οι εκδότες μπορούν να ορίσουν μια σταθερή τιμή ανά αίτημα crawl και ακόμη και να εφαρμόσουν διαφορετικούς κανόνες για διαφορετικά bots. Ακόμη και αν ένα bot δεν είναι εγγεγραμμένο στην Cloudflare, μπορεί ακόμη να «χρεωθεί» – πρακτικά μπλοκάροντας την πρόσβαση, αλλά αφήνοντας χώρο για μελλοντικές συμφωνίες.

Αυτό το σύστημα θα μπορούσε να οδηγήσει σε πιο ευέλικτες αδειοδοτήσεις και δυναμικές τιμολογήσεις στο μέλλον. Όπως το διατυπώνει η Cloudflare: «Παρέχοντας στους δημιουργούς έναν ισχυρό, προγραμματιστικό μηχανισμό για την αξιολόγηση και τον έλεγχο των ψηφιακών τους περιουσιακών στοιχείων, τους ενδυναμώνουμε να συνεχίσουν να δημιουργούν το πλούσιο, ποικίλο περιεχόμενο που καθιστά το Διαδίκτυο ανεκτίμητο.»