Google-ის წარმომადგენელმა, ჯონ მიულერმა, მნიშვნელოვანი განმარტება გააკეთა იმის შესახებ, თუ როგორ შეიძლება ვებგვერდებზე განთავსებულმა ე.წ. „ბოტის შემოწმების“ (Are you a bot) ეკრანებმა საიტის SEO-ზე უარყოფითი გავლენა იქონიოს. მისი თქმით, არსებობს რისკი, რომ საძიებო სისტემამ რეალური კონტენტის ნაცვლად სწორედ ეს დამცავი გვერდი დააინდექსოს.

ეს პრობლემა განსაკუთრებით აქტუალურია იმ საიტებისთვის, რომლებიც იყენებენ აგრესიულ უსაფრთხოების ფილტრებს ავტომატიზებული ტრაფიკისგან დასაცავად. თუ Google-ის ბოტი (Googlebot) საიტზე შესვლისას კონტენტის ნაცვლად ბოტის შემოწმების ბარიერს აწყდება, ის ამ შეტყობინებას აღიქვამს, როგორც გვერდის ძირითად შინაარსს.

მიულერმა დეტალურად აღწერა ის მექანიზმები, რომელთა გამოც შესაძლოა საიტი ძიების შედეგებიდან საერთოდ გაქრეს ან მისი პოზიციები მკვეთრად გაუარესდეს. ქვემოთ მოცემულია ძირითადი რისკები და მიზეზები, რასაც ეს ტექნიკური ხარვეზი იწვევს.

კანონიკურობის პრობლემა და დუბლირებული კონტენტი

ერთ-ერთი ყველაზე სერიოზული საფრთხე კანონიკური (canonical) გვერდის შერჩევის პროცესს უკავშირდება. ვინაიდან „ხართ თუ არა ბოტი?“ ტიპის ეკრანები ბევრ სხვადასხვა ვებგვერდზე იდენტურია, Google-ის ალგორითმმა შესაძლოა თქვენი საიტი სხვა საიტის ასლად მიიჩნიოს.

  • თუ მრავალი საიტი აჩვენებს ერთსა და იმავე სტანდარტულ შეტყობინებას, Google-მა შესაძლოა სხვა საიტი აირჩიოს კანონიკურ წყაროდ თქვენი გვერდის ნაცვლად.
  • შედეგად, თქვენი ორიგინალური კონტენტი ძიების შედეგებში აღარ გამოჩნდება, რადგან სისტემა მას სხვა საიტის დუბლიკატად ჩათვლის.

რატომ არის რთული პრობლემის იდენტიფიცირება?

ჯონ მიულერის განმარტებით, ამ ხარვეზის აღმოჩენა ხშირად რთულია საიტის მფლობელებისთვის. როდესაც ადამიანი ბრაუზერიდან სტუმრობს საკუთარ საიტს, ის ჩვეულებრივ ხედავს სრულ კონტენტს, რადგან უსაფრთხოების სისტემა მას „ნამდვილ მომხმარებლად“ ცნობს. თუმცა, Googlebot-ის შემთხვევაში ვითარება განსხვავებულია.

„პრობლემა ისაა, რომ თქვენ, როგორც მომხმარებელი, ამას ვერ ხედავთ, მაგრამ Google-ის ბოტი ხედავს მხოლოდ შემოწმების ეკრანს“, — აღნიშნავს მიულერი.

იმისათვის, რომ თავიდან აიცილოთ მსგავსი გართულებები, აუცილებელია დარწმუნდეთ, რომ თქვენი Firewall ან ბოტებისგან დამცავი სისტემები სწორად ახდენენ Google-ის ოფიციალური ბოტების იდენტიფიცირებას და მათთვის კონტენტზე წვდომას არ ზღუდავენ. წინააღმდეგ შემთხვევაში, საძიებო სისტემა ვერ შეძლებს თქვენი გვერდების შინაარსის წაკითხვას და მათ სათანადოდ რანჟირებას.