Google, Microsoft და OpenAI ხელოვნური ინტელექტის სწავლებისგან თავის არიდების ერთიან სტანდარტზე თანხმდებიან

Google, Microsoft და OpenAI გეგმავენ, მხარი დაუჭირონ robots.txt ფაილში არსებულ ერთიან სტანდარტს, რომელიც ვებგვერდებს ხელოვნური ინტელექტის (AI) მოდელების სწავლების პროცესიდან გამოთიშვის საშუალებას მისცემს. ეს ინიციატივა მიზნად ისახავს კონტენტის მფლობელებისთვის პროცესის გამარტივებას, რათა მათ რამდენიმე პლატფორმაზე ერთდროულად შეძლონ საკუთარი მონაცემების გამოყენების შეზღუდვა.

მიუხედავად საერთო მიზნისა, პროექტში მონაწილე კომპანიები ამ სტანდარტს განსხვავებულად განმარტავენ და ნერგავენ. ერთიანი robots.txt ხაზის მეშვეობით საიტებს შეეძლებათ უარი თქვან AI-ს სწავლებაზე რამდენიმე პროვაიდერთან ერთდროულად, თუმცა თითოეული ტექნოლოგიური გიგანტი ამ მონაცემებს საკუთარი სპეციფიკით დაამუშავებს.

Google-ის მიდგომა და Google-Extended

Google აპირებს, რომ robots.txt-ში მითითებული საერთო უარის ნიშანი (opt-out) ავტომატურად აღიქვას, როგორც Google-Extended დირექტივის ბლოკირება. ეს წესი იმოქმედებს იმ შემთხვევაში, თუ ვებგვერდზე სპეციალურად არ არის გაწერილი Google-Extended-ის ინდივიდუალური პარამეტრები.

ეს ნიშნავს, რომ თუ საიტის მფლობელი გამოიყენებს საერთო სტანდარტს, Google-ის ხელოვნური ინტელექტის მოდელები, მათ შორის Gemini და Vertex AI, აღარ გამოიყენებენ ამ საიტის კონტენტს სწავლებისთვის. თუმცა, თუ საიტს უკვე აქვს კონფიგურირებული Google-Extended, პრიორიტეტი სწორედ ამ უკანასკნელს მიენიჭება.

Microsoft-ის ცვლილებები და ახალი პრეფერენციები

Microsoft-მა გადაწყვიტა, უფრო დეტალური კონტროლი შესთავაზოს ვებმასტერებს და ამ მიზნით ცვლის ძველ მიდგომებს. კომპანია აუქმებს NoArchive და NoCache დირექტივების გამოყენებას AI კონტექსტში და მათ ნაცვლად ნერგავს ცალკეულ პარამეტრებს სწავლებისა (training) და გრაუნდინგისთვის (grounding).

ეს ცვლილება საშუალებას იძლევა უფრო ზუსტად განისაზღვროს შემდეგი საკითხები:

• AI სწავლება: გამოიყენება თუ არა კონტენტი მოდელების ფუნდამენტური გაუმჯობესებისთვის.
• გრაუნდინგი: აქვს თუ არა ხელოვნურ ინტელექტს უფლება, დაეყრდნოს საიტის ინფორმაციას რეალურ დროში პასუხების გენერირებისას (მაგალითად, Bing Chat-ში).

ამგვარად, Microsoft-ი ცდილობს ვებგვერდების მფლობელებს მისცეს არჩევანის საშუალება — დაბლოკონ მხოლოდ სწავლება, თუ საერთოდ შეზღუდონ AI-ს წვდომა მათ ინფორმაციაზე.

OpenAI და საერთო სტანდარტის მნიშვნელობა

OpenAI ასევე უერთდება ამ ინიციატივას, რაც ნიშნავს, რომ პოპულარული AI მოდელების შემქმნელები ერთიანდებიან ვებ-ეკოსისტემის მოთხოვნების გარშემო. ერთიანი robots.txt ხაზი მნიშვნელოვნად ამცირებს ადმინისტრაციულ ტვირთს საიტის მფლობელებისთვის, რომლებსაც აქამდე თითოეული ბოტისთვის (მაგალითად, GPTBot, Google-Extended და ა.შ.) ცალ-ცალკე უწევდათ წესების გაწერა.

მიუხედავად იმისა, რომ ეს წინ გადადგმული ნაბიჯია, ექსპერტები ურჩევენ ვებმასტერებს, ყურადღებით გაეცნონ თითოეული კომპანიის დოკუმენტაციას, რადგან საერთო ხაზის ინტერპრეტაცია მაინც ინდივიდუალურ დონეზე ხდება.