Cloudflare-მა მომხმარებლებისთვის AI ბოტების (AI crawlers) მართვის ახალი შესაძლებლობები გაააქტიურა. ეს სიახლე ხელმისაწვდომია ყველა მომხმარებლისთვის, მათ შორის უფასო პაკეტის მფლობელებისთვისაც. სისტემა საშუალებას იძლევა, AI ბოტები სამ ძირითად კატეგორიად დაიყოს: Search (ძიება), Agent (აგენტი) და Training (წვრთნა), რაც თითოეული მათგანის ცალ-ცალკე მართვის საშუალებას იძლევა.
თუმცა, ამ ცვლილებას თან ახლავს მნიშვნელოვანი ტექნიკური ნიუანსი, რომელიც 15 სექტემბრიდან შევა ძალაში. Cloudflare-ის ყველაზე მკაცრი წესების მიხედვით, საიტებმა, რომლებიც დაბლოკავენ "Training" კატეგორიის ბოტებს, შესაძლოა შემთხვევით ისეთი კომბინირებული ბოტებიც დაბლოკონ, როგორიცაა Googlebot, Applebot და Bingbot.
AI ბოტების კატეგორიზაცია და მართვა
Cloudflare-ის განახლებული პოლიტიკა საიტის მფლობელებს სთავაზობს უფრო მეტ კონტროლს იმაზე, თუ როგორ ურთიერთქმედებენ ხელოვნური ინტელექტის ბოტები მათ კონტენტთან. მომხმარებლებს შეუძლიათ ინდივიდუალურად განსაზღვრონ წვდომის წესები შემდეგი ჯგუფებისთვის:
- Search (ძიება): ბოტები, რომლებიც გამოიყენება საძიებო სისტემების ინდექსირებისთვის.
- Agent (აგენტი): ბოტები, რომლებიც ასრულებენ კონკრეტულ დავალებებს მომხმარებლებისთვის.
- Training (წვრთნა): ბოტები, რომლებიც აგროვებენ მონაცემებს AI მოდელების მოსამზადებლად.
მნიშვნელოვანი ცვლილებები 15 სექტემბრიდან
15 სექტემბრიდან ამოქმედდება Cloudflare-ის ახალი სტანდარტული პარამეტრები. ყველაზე მკაცრი წესების გამოყენების შემთხვევაში, საიტები, რომლებიც ზღუდავენ AI წვრთნისთვის განკუთვნილ ბოტებს, ავტომატურად დაბლოკავენ მრავალფუნქციურ ბოტებსაც. ეს ეხება ისეთ მნიშვნელოვან სერვისებს, როგორიცაა:
- Googlebot
- Applebot
- Bingbot
ვინაიდან ეს ბოტები ხშირად ერთდროულად ასრულებენ როგორც საძიებო ინდექსირების, ისე AI მოდელების წვრთნის ფუნქციას, მათი დაბლოკვა საიტის ძიების შედეგებიდან გაქრობას გამოიწვევს. ეს კრიტიკულად მნიშვნელოვანია SEO-სთვის და საიტის ხილვადობისთვის.
რეკომენდაციები საიტის მფლობელებისთვის
მოსალოდნელი გართულებების თავიდან ასაცილებლად, საიტის მფლობელებს ეძლევათ შემდეგი მითითებები:
- გადახედეთ Cloudflare-ის მართვის პანელს (Dashboard) მითითებულ ვადამდე.
- შეამოწმეთ AI ბოტების მართვის პარამეტრები და დარწმუნდით, რომ "Training" კატეგორიის დაბლოკვა არ აფერხებს თქვენთვის სასურველ საძიებო ბოტებს.
- საჭიროების შემთხვევაში, შეცვალეთ პარამეტრები ისე, რომ შენარჩუნდეს წვდომა Googlebot-ისთვის და სხვა მნიშვნელოვანი საძიებო სისტემებისთვის.
Cloudflare-ის ეს ნაბიჯი მიზნად ისახავს საიტებისთვის მეტი გამჭვირვალობის შექმნას, თუმცა მოითხოვს ყურადღებას, რათა თავიდან იქნას აცილებული საძიებო ტრაფიკის შემთხვევითი დაკარგვა.
