Cloudflare-ის AI ბოტების მართვის ახალმა წესებმა შესაძლოა Googlebot-ი დაბლოკოს

Cloudflare-მა მომხმარებლებისთვის AI ბოტების (AI crawlers) მართვის ახალი შესაძლებლობები გაააქტიურა. ეს სიახლე ხელმისაწვდომია ყველა მომხმარებლისთვის, მათ შორის უფასო პაკეტის მფლობელებისთვისაც. სისტემა საშუალებას იძლევა, AI ბოტები სამ ძირითად კატეგორიად დაიყოს: Search (ძიება), Agent (აგენტი) და Training (წვრთნა), რაც თითოეული მათგანის ცალ-ცალკე მართვის საშუალებას იძლევა.

თუმცა, ამ ცვლილებას თან ახლავს მნიშვნელოვანი ტექნიკური ნიუანსი, რომელიც 15 სექტემბრიდან შევა ძალაში. Cloudflare-ის ყველაზე მკაცრი წესების მიხედვით, საიტებმა, რომლებიც დაბლოკავენ "Training" კატეგორიის ბოტებს, შესაძლოა შემთხვევით ისეთი კომბინირებული ბოტებიც დაბლოკონ, როგორიცაა Googlebot, Applebot და Bingbot.

AI ბოტების კატეგორიზაცია და მართვა

Cloudflare-ის განახლებული პოლიტიკა საიტის მფლობელებს სთავაზობს უფრო მეტ კონტროლს იმაზე, თუ როგორ ურთიერთქმედებენ ხელოვნური ინტელექტის ბოტები მათ კონტენტთან. მომხმარებლებს შეუძლიათ ინდივიდუალურად განსაზღვრონ წვდომის წესები შემდეგი ჯგუფებისთვის:

• Search (ძიება): ბოტები, რომლებიც გამოიყენება საძიებო სისტემების ინდექსირებისთვის.
• Agent (აგენტი): ბოტები, რომლებიც ასრულებენ კონკრეტულ დავალებებს მომხმარებლებისთვის.
• Training (წვრთნა): ბოტები, რომლებიც აგროვებენ მონაცემებს AI მოდელების მოსამზადებლად.

მნიშვნელოვანი ცვლილებები 15 სექტემბრიდან

15 სექტემბრიდან ამოქმედდება Cloudflare-ის ახალი სტანდარტული პარამეტრები. ყველაზე მკაცრი წესების გამოყენების შემთხვევაში, საიტები, რომლებიც ზღუდავენ AI წვრთნისთვის განკუთვნილ ბოტებს, ავტომატურად დაბლოკავენ მრავალფუნქციურ ბოტებსაც. ეს ეხება ისეთ მნიშვნელოვან სერვისებს, როგორიცაა:

• Googlebot
• Applebot
• Bingbot

ვინაიდან ეს ბოტები ხშირად ერთდროულად ასრულებენ როგორც საძიებო ინდექსირების, ისე AI მოდელების წვრთნის ფუნქციას, მათი დაბლოკვა საიტის ძიების შედეგებიდან გაქრობას გამოიწვევს. ეს კრიტიკულად მნიშვნელოვანია SEO-სთვის და საიტის ხილვადობისთვის.

რეკომენდაციები საიტის მფლობელებისთვის

მოსალოდნელი გართულებების თავიდან ასაცილებლად, საიტის მფლობელებს ეძლევათ შემდეგი მითითებები:

1. გადახედეთ Cloudflare-ის მართვის პანელს (Dashboard) მითითებულ ვადამდე.
2. შეამოწმეთ AI ბოტების მართვის პარამეტრები და დარწმუნდით, რომ "Training" კატეგორიის დაბლოკვა არ აფერხებს თქვენთვის სასურველ საძიებო ბოტებს.
3. საჭიროების შემთხვევაში, შეცვალეთ პარამეტრები ისე, რომ შენარჩუნდეს წვდომა Googlebot-ისთვის და სხვა მნიშვნელოვანი საძიებო სისტემებისთვის.

Cloudflare-ის ეს ნაბიჯი მიზნად ისახავს საიტებისთვის მეტი გამჭვირვალობის შექმნას, თუმცა მოითხოვს ყურადღებას, რათა თავიდან იქნას აცილებული საძიებო ტრაფიკის შემთხვევითი დაკარგვა.