Cloudflare-ის AI ბოტების მართვის ახალმა წესებმა შესაძლოა Googlebot-ი დაბლოკოს
Cloudflare-ის ახალი წესების თანახმად, AI წვრთნის ბოტების დაბლოკვამ შესაძლოა Googlebot-ისა და Bingbot-ის შეზღუდვა გამოიწვიოს, რაც საიტის საძიებო რეიტინგზე უარყოფითად აისახება.

Cloudflare-მა მომხმარებლებისთვის AI ბოტების (AI crawlers) მართვის ახალი შესაძლებლობები გაააქტიურა. ეს სიახლე ხელმისაწვდომია ყველა მომხმარებლისთვის, მათ შორის უფასო პაკეტის მფლობელებისთვისაც. სისტემა საშუალებას იძლევა, AI ბოტები სამ ძირითად კატეგორიად დაიყოს: Search (ძიება), Agent (აგენტი) და Training (წვრთნა), რაც თითოეული მათგანის ცალ-ცალკე მართვის საშუალებას იძლევა.
თუმცა, ამ ცვლილებას თან ახლავს მნიშვნელოვანი ტექნიკური ნიუანსი, რომელიც 15 სექტემბრიდან შევა ძალაში. Cloudflare-ის ყველაზე მკაცრი წესების მიხედვით, საიტებმა, რომლებიც დაბლოკავენ "Training" კატეგორიის ბოტებს, შესაძლოა შემთხვევით ისეთი კომბინირებული ბოტებიც დაბლოკონ, როგორიცაა Googlebot, Applebot და Bingbot.
AI ბოტების კატეგორიზაცია და მართვა
Cloudflare-ის განახლებული პოლიტიკა საიტის მფლობელებს სთავაზობს უფრო მეტ კონტროლს იმაზე, თუ როგორ ურთიერთქმედებენ ხელოვნური ინტელექტის ბოტები მათ კონტენტთან. მომხმარებლებს შეუძლიათ ინდივიდუალურად განსაზღვრონ წვდომის წესები შემდეგი ჯგუფებისთვის:
- Search (ძიება): ბოტები, რომლებიც გამოიყენება საძიებო სისტემების ინდექსირებისთვის.
- Agent (აგენტი): ბოტები, რომლებიც ასრულებენ კონკრეტულ დავალებებს მომხმარებლებისთვის.
- Training (წვრთნა): ბოტები, რომლებიც აგროვებენ მონაცემებს AI მოდელების მოსამზადებლად.
მნიშვნელოვანი ცვლილებები 15 სექტემბრიდან
15 სექტემბრიდან ამოქმედდება Cloudflare-ის ახალი სტანდარტული პარამეტრები. ყველაზე მკაცრი წესების გამოყენების შემთხვევაში, საიტები, რომლებიც ზღუდავენ AI წვრთნისთვის განკუთვნილ ბოტებს, ავტომატურად დაბლოკავენ მრავალფუნქციურ ბოტებსაც. ეს ეხება ისეთ მნიშვნელოვან სერვისებს, როგორიცაა:
- Googlebot
- Applebot
- Bingbot
ვინაიდან ეს ბოტები ხშირად ერთდროულად ასრულებენ როგორც საძიებო ინდექსირების, ისე AI მოდელების წვრთნის ფუნქციას, მათი დაბლოკვა საიტის ძიების შედეგებიდან გაქრობას გამოიწვევს. ეს კრიტიკულად მნიშვნელოვანია SEO-სთვის და საიტის ხილვადობისთვის.
რეკომენდაციები საიტის მფლობელებისთვის
მოსალოდნელი გართულებების თავიდან ასაცილებლად, საიტის მფლობელებს ეძლევათ შემდეგი მითითებები:
- გადახედეთ Cloudflare-ის მართვის პანელს (Dashboard) მითითებულ ვადამდე.
- შეამოწმეთ AI ბოტების მართვის პარამეტრები და დარწმუნდით, რომ "Training" კატეგორიის დაბლოკვა არ აფერხებს თქვენთვის სასურველ საძიებო ბოტებს.
- საჭიროების შემთხვევაში, შეცვალეთ პარამეტრები ისე, რომ შენარჩუნდეს წვდომა Googlebot-ისთვის და სხვა მნიშვნელოვანი საძიებო სისტემებისთვის.
Cloudflare-ის ეს ნაბიჯი მიზნად ისახავს საიტებისთვის მეტი გამჭვირვალობის შექმნას, თუმცა მოითხოვს ყურადღებას, რათა თავიდან იქნას აცილებული საძიებო ტრაფიკის შემთხვევითი დაკარგვა.
მსგავსი სტატიები
WebMCP ინსტრუმენტები და AI აგენტების უსაფრთხოება: როგორ ავიცილოთ თავიდან სისტემის გატეხვა
WebMCP ტექნოლოგია AI აგენტებს მძლავრ ინსტრუმენტებს სთავაზობს, თუმცა ეს ქმნის Prompt Injection-ის საფრთხეს. გაიგეთ, როგორ დაიცვათ თქვენი სისტემები Chrome-ის რეკომენდაციების მიხედვით.
AI ხილვადობის რეიტინგები არასტაბილურია: ახალი კვლევა სტატისტიკურ ხმაურზე მიუთითებს
AI ხილვადობის მაჩვენებლები ხშირად იცვლება, რაც ართულებს ზუსტ ანალიზს. ახალი კვლევა გვთავაზობს მეთოდს, რომელიც განსაზღვრავს, როდის არის რეიტინგები რეალურად სანდო.
WordPress 7.0.1 ტექნიკური განახლება: 31 ხარვეზის გამოსწორება და PHP თავსებადობის გაუმჯობესება
WordPress-მა გამოუშვა 7.0.1 ვერსია, რომელიც 31 ტექნიკურ ხარვეზს ასწორებს, აუმჯობესებს PHP-სთან თავსებადობას და უსაფრთხოების ფუნქციებს.