Cloudflare CEO says the web's future is "pay to cr — ინსაითი

ინტერნეტის განვითარების ისტორიაში პირველად, ავტომატიზებულმა ტრაფიკმა ადამიანების მიერ გენერირებულ აქტივობას გადაასწრო. Cloudflare Radar-ის ბოლო მონაცემებით, გლობალური HTTP მოთხოვნების უმრავლესობას ახლა სწორედ ბოტები ასრულებს. ეს ტენდენცია მიუთითებს იმაზე, რომ ქსელის ძირითადი მომხმარებელი ადამიანი აღარ არის და ციფრული სივრცე სულ უფრო მეტად ივსება სხვადასხვა ხელოვნური ინტელექტის აგენტებით, რომლებიც მონაცემებს აგროვებს.

ინფორმაცია ამის შესახებ Cloudflare-ის CEO-მ, მეთიუ პრინსმა, საკუთარ X პლატფორმაზე გამოაქვეყნა. მან დაადასტურა, რომ ქსელში ბოტების დომინირება ბევრად უფრო ადრე მოხდა, ვიდრე ამას დარგის სპეციალისტები ელოდნენ. კომპანიის ხელმძღვანელი მიიჩნევდა, რომ ეს ნიშნული 2027 წლის ბოლომდე არ დაფიქსირდებოდა, თუმცა ბოლო თვეების განმავლობაში მომხდარმა მკვეთრმა ცვლილებამ წინასწარი გეგმები სრულად შეცვალა.

მეთიუ პრინსმა განმარტა, რომ ხელოვნური ინტელექტის აგენტების სწრაფმა გავრცელებამ ავტომატიზებული ტრაფიკის ზრდას სერიოზული იმპულსი მისცა. ბოლო რამდენიმე თვის განმავლობაში შეიქმნა ასობით ახალი ბოტი, რომლებიც ვებგვერდებს ინფორმაციის მოსაპოვებლად ასკანირებს. ამ პროცესმა ტრაფიკის გადანაწილება მკვეთრად დააჩქარა და რეალური ადამიანების მიერ გენერირებული აქტივობის წილი საგრძნობლად შეამცირა.

Cloudflare-ის მიერ გავრცელებული სტატისტიკა აჩვენებს, რომ ამჟამად ბოტები გლობალური HTTP მოთხოვნების 57.4%-ს აგენერირებს. ადამიანების მიერ განხორციელებული მოთხოვნების წილი კი მხოლოდ 42.6%-ს შეადგენს. მიუხედავად იმისა, რომ ზუსტი მონაცემების შეგროვება გარკვეულ სირთულეებთანაა დაკავშირებული, კომპანიის ანალიტიკოსები აცხადებენ, რომ საერთო ტენდენცია აშკარაა და მისი შეჩერება შეუძლებელია.

პლატფორმის ხელმძღვანელმა ტერმინოლოგიურ განსხვავებებზეც გაამახვილა ყურადღება. მისი განცხადებით, სიტყვები ბოტი, კრაულერი და აგენტი ფაქტობრივად ერთსა და იმავე პროგრამულ უზრუნველყოფას აღნიშნავს. ამ იარლიყების შერჩევა ხშირად იმაზეა დამოკიდებული, თუ რამდენად სასარგებლოა კონკრეტული ავტომატიზებული სისტემა ვებგვერდის მფლობელისთვის და რა მიზნით ხდება მისი გამოყენება.

მომავალში ქსელის ეკონომიკური მოდელის ცვლილებაზე საუბრისას მეთიუ პრინსმა დაწერა: „აშკარაა, რომ მომავალში ეს იქნება pay to crawl“. ეს ნიშნავს, რომ ვებგვერდებიდან ინფორმაციის უფასოდ შეგროვების ეპოქა დასასრულს უახლოვდება. ხელოვნური ინტელექტის მოდელების შესაქმნელად და მოსამზადებლად ბაზების შეგროვება სხვადასხვა კომპანიას სულ უფრო ძვირი დაუჯდება.

ამ ტენდენციის საპასუხოდ, Cloudflare-მა 2025 წლის ზაფხულში სპეციალური ტექნოლოგიური პლატფორმა გამოუშვა. აღნიშნული სისტემა ვებგვერდების მფლობელებს საშუალებას აძლევს, გააკონტროლონ ხელოვნური ინტელექტის კრაულერების წვდომა თავიანთ კონტენტზე. ამასთან, პლატფორმა საიტების მესაკუთრეებს სთავაზობს შესაძლებლობას, ინფორმაციის ჩამოტვირთვისთვის კონკრეტული გადასახადი დააწესონ.

მიუხედავად შემოთავაზებული შესაძლებლობებისა, ახალ ინსტრუმენტს ჯერჯერობით დიდი პოპულარობა არ მოუპოვებია. ვებგვერდების მფლობელები ამ გადახდის სისტემას პასიურად იყენებენ. მეთიუ პრინსმა აღნიშნა, რომ პლატფორმამ ჯერჯერობით ვერ შეძლო ფართო ბაზარზე ფეხის მოკიდება, რაც ბევრი საიტისთვის საკუთარი ინფორმაციის მონეტიზაციის პრობლემას კვლავ აქტუალურს ხდის.

ტექნოლოგიური კომპანია მუშაობას მაინც განაგრძობს და ახალი სტანდარტების შექმნას ცდილობს. Cloudflare ამჟამად მუშაობს პროტოკოლებსა და ინფრასტრუქტურაზე იმ მოცულობის მხარდასაჭერად, რაც ამ სისტემას დასჭირდება. მეთიუ პრინსის შეფასებით, ბაზარს სჭირდება მოქნილი ტექნიკური ბაზა, რომელიც მილიარდობით ტრანზაქციას შეაფერხებლად დაამუშავებს და უსაფრთხოებას უზრუნველყოფს.

ბოტების აქტივობის ზრდის ფონზე, ხელოვნური ინტელექტის საძიებო ინსტრუმენტები მომხმარებელთა რეკორდულ რაოდენობას იზიდავს. მაგალითად, Google-ის AI Overviews და AI Mode პლატფორმებს უკვე მილიარდობით ადამიანი იყენებს. ეს სისტემები ინფორმაციის მისაღებად თავად მიმართავს კრაულერებს, რაც ვებგვერდებზე ავტომატიზებულ მოთხოვნებს ყოველდღიურად კიდევ უფრო ზრდის.

მედიაში ამ თემას დიდი გამოხმაურება მოჰყვა. გამოცემა THE DECODER-ის ანალიტიკოსმა, მათიას ბასტიანმა, 2026 წლის 4 ივნისს გამოქვეყნებულ სტატიაში ვრცლად მიმოიხილა ინტერნეტის ახალი რეალობა. მან ხაზი გაუსვა, რომ ბოტების ტრაფიკის ასეთი დომინირება ვებგვერდების მფლობელებს აიძულებს, საკუთარი ინფორმაციის დაცვისა და მონეტიზაციის ახალ გზებზე იფიქრონ.

კონტენტის შემქმნელები უკვე აქტიურად ითხოვენ კომპენსაციას ტექნოლოგიური გიგანტებისგან. მსხვილი საინფორმაციო სააგენტოები ცდილობს, ხელოვნური ინტელექტის მწარმოებლებთან ინდივიდუალური სალიცენზიო ხელშეკრულებები გააფორმონ. თუმცა მცირე ზომის ვებგვერდებს ამგვარი მოლაპარაკებების წარმოებისა და საკუთარი უფლებების დაცვის რესურსი ხშირად არ გააჩნია.

მცირე ბიზნესისთვის და დამოუკიდებელი ბლოგერებისთვის ფასიანი ინდექსირების სისტემის დანერგვა დამატებით ბარიერებს შექმნის. მათ არ აქვთ შესაბამისი ინფრასტრუქტურა, რათა თითოეული კრაულერისგან თანხა მიიღონ. Cloudflare-ის მიზანი სწორედ ამ პროცესის გამარტივებაა, თუმცა ტექნიკური სტანდარტის ჩამოყალიბებას კიდევ დრო დასჭირდება.

კრაულინგის ახალმა მოდელმა მომავალში შესაძლოა საძიებო სისტემების მუშაობის ხარისხზეც იქონიოს გავლენა. თუ ვებგვერდების მფლობელები საკუთარ შინაარსს ხელოვნური ინტელექტის აგენტებისგან სრულად დახურავენ, საძიებო რობოტები ვეღარ შეძლებს ახალი მონაცემების დროულად დამუშავებას. ეს კი ქსელში არსებული ინფორმაციის ხელმისაწვდომობას საგრძნობლად შეზღუდავს.