Cloudflare-ის ახალი პოლიტიკა AI კომპანიებს აიძულებს, გამომცემლების კონტენტისთვის საფასური გადაიხადონ

Cloudflare-მა ხელოვნური ინტელექტის ინდუსტრიისთვის ახალი ვადა დააწესა, რათა ერთმანეთისგან გაიმიჯნოს ტრადიციული საძიებო სისტემებისთვის (მაგალითად, Google Search) განკუთვნილი ვებ-კრაულერები და ის ბოტები, რომლებიც AI აგენტებისა და მოდელების დასატრენინგებლად გამოიყენება. კომპანიის განცხადებით, 2026 წლის 15 სექტემბრიდან Cloudflare-ის სტანდარტული პარამეტრები ავტომატურად დაბლოკავს „შერეული დანიშნულების“ კრაულერებს ყველა იმ გვერდზე, რომელიც რეკლამებს მასპინძლობს.

ეს ნიშნავს, რომ ბოტები, რომლებიც ერთდროულად ახორციელებენ ძიებას, AI აგენტების მუშაობასა და მოდელების წვრთნას, ნაგულისხმევი პარამეტრებით ვეღარ შეძლებენ ამ საიტების ინდექსაციას, თუ საიტის მფლობელი თავად არ შეცვლის პარამეტრებს. აღნიშნული ცვლილებები შეეხება Cloudflare-ის ახალ კლიენტებს, არსებული მომხმარებლების მიერ შექმნილ ახალ საიტებსა და ყველა არსებულ უფასო მომხმარებელს. ეს ნაბიჯი მნიშვნელოვან გავლენას მოახდენს იმაზე, თუ როგორ მიიღებენ AI მოდელების პროვაიდერები წვდომას ვებ-კონტენტზე ტრენინგისთვის ან თავიანთი სერვისების ფუნქციონირებისთვის.

Cloudflare აღნიშნავს, რომ ვებგვერდების მფლობელების უმეტესობას სურს, მათი კონტენტი იძებნებოდეს საძიებო სისტემებში და ხშირად AI სერვისებშიც, თუმცა მათ სჭირდებათ დაცვა, რათა საკუთარი ინტელექტუალური საკუთრება უფასოდ არ გასცენ. კომპანია ხაზგასმით მიუთითებს „მსოფლიოს უდიდეს საძიებო სისტემაზე“ (აშკარა მინიშნება Google-ზე), რომელსაც დაახლოებით ორჯერ მეტ ინფორმაციაზე აქვს წვდომა, ვიდრე სხვა AI კომპანიებს. ეს განპირობებულია იმით, რომ საძიებო გიგანტი ართულებს საიტების ხილვადობის შენარჩუნებას ისე, რომ მათი კონტენტი AI-სთვის არ იქნას გამოყენებული.

დაპირისპირება Google-თან და ინდუსტრიის გამოწვევები

წარსულში Google ეწინააღმდეგებოდა მსგავს განზოგადებას და აღნიშნავდა, რომ მათ აქვთ სპეციალური ბოტი, სახელწოდებით Google Extended. ეს ინსტრუმენტი საიტის მფლობელებს საშუალებას აძლევს, უარი თქვან თავიანთი კონტენტის გამოყენებაზე AI მოდელების ტრენინგისთვის და ისეთი პროდუქტებისთვის, როგორიცაა Gemini Apps და Vertex API. ამასთან, კომპანია ამტკიცებს, რომ ამ ბოტის დაბლოკვა გავლენას არ ახდენს საიტის Google Search-ში გამოჩენაზე. თუმცა, ტექნოლოგიური გიგანტის ძირითადი Googlebot მაინც ახორციელებს კრაულინგს ძიებისთვის, მათ შორის ისეთი ფუნქციებისთვის, როგორიცაა AI Overviews და AI Mode.

„ახლა, როდესაც ინტერნეტ ტრაფიკის უდიდესი ნაწილი არაადამიანურია, ჩვენ უფრო შორს უნდა წავიდეთ და უფრო სწრაფად ვიმოქმედოთ, რათა მდგრადი ეკოსისტემა ჩამოყალიბდეს“, — განაცხადა Cloudflare-ის თანადამფუძნებელმა და აღმასრულებელმა დირექტორმა მეთიუ პრინსმა.

მან მიუთითა ბოლო პერიოდის მნიშვნელოვან ეტაპზე, როდესაც ბოტების მიერ გენერირებულმა ტრაფიკმა პირველად გადააჭარბა ადამიანების აქტივობას ინტერნეტში. აღსანიშნავია, რომ ამ ცვლილებას მომავალ წლამდე არ ელოდნენ. პრინსის თქმით, Cloudflare-ის ახალი ინსტრუმენტები და პარტნიორობები ვებგვერდების მფლობელებს მეტ ხილვადობასა და კომერციულ შესაძლებლობებს აძლევს, ხოლო სარგებელს მოუტანს იმ AI კომპანიებს, რომელთა ბოტებსაც მკაფიო და გამჭვირვალე მიზნები აქვთ.

კონტენტის მონეტიზაციის ახალი მოდელები

მიუხედავად იმისა, რომ Cloudflare სთავაზობს პროდუქტებს საკუთარი AI სისტემების გასაშვებად, კომპანიამ ასევე გამოუშვა ინსტრუმენტების სერია, რათა გამომცემლებს მეტი კონტროლი მისცეს საკუთარ კონტენტზე AI ეპოქაში. ბოლო წლებში Cloudflare-მა დანერგა AI ბოტებთან ბრძოლის მექანიზმები, მათ შორის პლატფორმა Pay Per Crawl, რომელიც საიტებს საშუალებას აძლევს, AI ბოტებს კონტენტის მოპოვებისთვის (scraping) საფასური დააკისრონ.

კომპანიის განცხადებით, Pay Per Crawl ახლა ტრანსფორმირდება მოდელად „Pay Per Use“ (გადახდა გამოყენების მიხედვით). ეს საშუალებას მისცემს გამომცემლებს, AI კომპანიებს საფასური მაშინ გადაახდევინონ, როდესაც მათი კონტენტი ღირებულებას ქმნის და არა მხოლოდ მაშინ, როდესაც ხდება მონაცემების ამოღება. ეს ცვლილება ასევე დაეხმარება გამომცემლებს ინტერნეტ-ტრაფიკისა და გამოთვლითი რესურსების დაზოგვაში. Cloudflare-ის მონაცემებით, AI კრაულერების ტრაფიკის 50%-ზე მეტი იხარჯება უკვე არსებული, უცვლელი გვერდების განმეორებით გადამოწმებაზე.

ამ ინიციატივის პრაქტიკაში განსახორციელებლად, Cloudflare თავდაპირველად ორ პარტნიორთან, Ceramic.ai-სა და You.com-თან თანამშრომლობს. როდესაც გამომცემელი თანხმდება ამ პირობებს, ის იღებს ანაზღაურებას, თუ მისი კონტენტი გამოჩნდება Ceramic-ის AI ძიების შედეგებში ან როდესაც You.com გამოიყენებს მის პრემიუმ კონტენტს. Cloudflare-ის განმარტებით, სხვა AI კომპანიებსაც შეუძლიათ ამ მოდელის მორგება საკუთარ სამუშაო პროცესებზე.