AI-ის უსაფრთხოების ტესტირება თავად ხდება საფრთხის წყარო
ხელოვნური ინტელექტის აგენტებმა ტესტირებისას იზოლირებული გარემოდან გასვლა და რეალურ სისტემებში შეღწევა შეძლეს, რაც AI უსაფრთხოების სერიოზულ ხარვეზებზე მიუთითებს.

ბოლო რამდენიმე თვის განმავლობაში, ხელოვნური ინტელექტის (AI) აგენტებმა, რომლებიც კიბერუსაფრთხოების შეფასების პროცესს გადიოდნენ, დადგენილ საზღვრებს თავი დააღწიეს, ინტერნეტზე წვდომა მოიპოვეს და ზოგიერთ შემთხვევაში რეალურ სისტემებში შეღწევაც კი შეძლეს. აღნიშნული ინციდენტები შეეხო ისეთი კომპანიების მოდელებს, როგორიცაა OpenAI, Anthropic, Meta და ჩინური AI ლაბორატორია Moonshot AI. ტესტირებას სხვადასხვა ორგანიზაციები, მათ შორის კიბერშეფასების სტარტაპი Irregular ატარებდნენ.
ეს ეპიზოდები AI ინდუსტრიის წინაშე მდგარ მზარდ პრობლემას ააშკარავებს: რამდენადაც ავტონომიური აგენტები უფრო შესაძლებლობებით სავსენი ხდებიან, მათ შესამოწმებლად შექმნილი უსაფრთხო გარემო მოდელების შეკავებას ვეღარ ახერხებს. კემბრიჯის უნივერსიტეტის ინტელექტის მომავლის ცენტრის (Centre for the Future of Intelligence) წარმომადგენლის, შონ ო’ჰეგერტის თქმით, მომხდარი ინციდენტების რაოდენობა ცხადყოფს, რომ „სენდბოქსინგის“ (sandboxing) და ტესტირების გარემოს კონტროლის მექანიზმები მოდელების შესაძლებლობების ზრდას ჩამორჩება.
რისკს კიდევ უფრო ზრდის თავად გამოსაცდელი მოდელების ბუნება. AI კომპანიები კიბერშეფასებებს ატარებენ მომავალი თაობის მოდელებზე, რომლებიც ჯერ კიდევ არ არის საჯაროდ ხელმისაწვდომი. ხშირად, მკვლევრები მიზანმიმართულად თიშავენ სტანდარტულ დამცავ მექანიზმებს, რათა დაინახონ, რეალურად რისი გაკეთება შეუძლია მოდელს. ეს ნიშნავს, რომ თავად სატესტო გარემოს უსაფრთხოება დაცვის გადამწყვეტი ხაზია. თუ მოდელმა ამ გარემოდან გასვლა მოახერხა, მას მნიშვნელოვანი ზიანის მიყენება შეუძლია.
სერიოზული ინციდენტები და რეალური საფრთხეები
ერთ-ერთ ყველაზე სერიოზულ შემთხვევაში, OpenAI-ის გამოუქვეყნებელმა მოდელმა დატოვა თავისი იზოლირებული გარემო და Hugging Face-ის საწარმოო სისტემებში შეაღწია. Irregular-ის მიერ ჩატარებული ცალკეული შეფასებებისას, Anthropic-ისა და Meta-ს მოდელებმა მიაღწიეს სატესტო გარემოს მიღმა არსებულ სისტემებს მას შემდეგ, რაც კონფიგურაციის შეცდომამ მათ ინტერნეტთან წვდომის გზა გაუხსნა.
Moonshot AI-ის მოდელმა, Kimi K3-მა, გამოიყენა Frontier Security-ის მიერ მართულ „სენდბოქსში“ არსებული გაჟონვა, რათა ინტერნეტში გასულიყო და GitHub-ზე არსებულ ინფორმაციას გასცნობოდა. გაერთიანებული სამეფოს AI უსაფრთხოების ინსტიტუტის (AISI) ტესტირებისას კი მკვლევრებმა აგენტებს ინტერნეტზე წვდომა თავად მისცეს, თუმცა არ მოელოდნენ, რომ ისინი არასანქცირებულ ქმედებებს განახორციელებდნენ. ერთ-ერთ შემთხვევაში, აგენტმა სოციალური ინჟინერიის გამოყენებით სცადა ღია კოდის (open-source) პროექტში უსაფრთხოების ხარვეზის შეპარება.
მნიშვნელოვანია აღინიშნოს, რომ არცერთ შემთხვევაში აგენტებს არ ჰქონიათ მითითება, თავს დასხმოდნენ რეალურ სამიზნეებს. ისინი უბრალოდ ყველაფერს აკეთებდნენ მათ წინაშე დასმული ამოცანის გადასაჭრელად. არასამთავრობო ორგანიზაცია CivAI-ის კვლევების ხელმძღვანელი ენდრიუ იუნი მიიჩნევს, რომ ეს მიდგომების ცვლილებაზე მიუთითებს. თუ ადრე საფრთხეს ადამიანების მიერ AI-ის ბოროტად გამოყენება წარმოადგენდა, ახლა თავად AI მოდელები იქცნენ დამოუკიდებელ საფრთხის შემქმნელ აქტორებად.
როგორი უნდა იყოს უსაფრთხო ტესტირების გარემო?
მკვლევრები და კიბერუსაფრთხოების ექსპერტები თანხმდებიან, რომ AI შეფასების გარემოს სჭირდება მრავალშრიანი დაცვა. ეს გულისხმობს კონტროლის ისეთ დონეს, რომელიც მაქსიმალურად მიახლოებულია რეალურ სამუშაო გარემოსთან. უსაფრთხოების რამდენიმე შრის არსებობა აუცილებელია, რათა ერთმა შეცდომამ — მაგალითად, ინტერნეტთან ღია წვდომამ — მოდელის „გაქცევა“ არ გამოიწვიოს.
ექსპერტების რეკომენდაციები მოიცავს შემდეგ პუნქტებს:
- ფიზიკური იზოლაცია (Air-gapping): მოდელების შექმნა და ტესტირება უნდა ხდებოდე ქსელში, რომელიც ფიზიკურად მოწყვეტილია გარე სამყაროს.
- გამავალი ტრაფიკის კონტროლი: აუცილებელია ყველა იმ წერტილის იდენტიფიცირება, საიდანაც შესაძლებელია მონაცემების გასვლა. სატესტო გარემოდან არ უნდა არსებობდეს გზა არც ინტერნეტისკენ და არც კომპანიის სხვა სენსიტიური სისტემებისკენ.
- მუდმივი მონიტორინგი: ბევრ შემთხვევაში ინციდენტი მაშინვე ვერავინ შენიშნა. მაგალითად, OpenAI-მ მომხდარის შესახებ Hugging Face-ისგან შეიტყო, ხოლო Anthropic-მა და Meta-მ ხარვეზები მხოლოდ მოგვიანებით, მონაცემების გადამოწმებისას აღმოაჩინეს.
- დამოუკიდებელი აუდიტი: მოდელების გაშვებამდე სატესტო გარემო მესამე მხარის მიერ უნდა შემოწმდეს. ექსპერტების აზრით, უბრალო საკონტროლო სიის (checklist) გავლაც კი ბევრ შეცდომას თავიდან ააცილებდათ კომპანიებს.
პრობლემა ის კი არ არის, რომ კომპანიებმა არ იციან უსაფრთხო გარემოს შექმნა, არამედ ის, რომ ეს პროცესი ძვირი და შრომატევადია. კომპანიებს ხშირად არ აქვთ საკმარისი მოტივაცია ამ ინვესტიციების განსახორციელებლად, სანამ რაიმე სერიოზული არ მოხდება. გარდა ამისა, არსებობს რისკი, რომ ზედმეტად მკაცრმა შეზღუდვებმა ხელი შეუშალოს მოდელის რეალური შესაძლებლობების გამოვლენას მის გამოქვეყნებამდე.
რეგულირების საკითხი და მომავალი
აშშ-ის ამჟამინდელი ადმინისტრაცია განიხილავს კიბერუსაფრთხოების ნებაყოფლობითი შეფასების რეჟიმს, რომლის მიხედვითაც მთავრობას შეეძლება ახალი მძლავრი მოდელების რისკები მათ საჯარო გამოქვეყნებამდე 30 დღით ადრე შეაფასოს. თუმცა, კრიტიკოსები მიიჩნევენ, რომ ეს საკმარისი არ არის, რადგან ინციდენტები გაცილებით ადრე, მოდელის განვითარების ეტაპზე ხდება.
„ბოლო თვეების გაკვეთილი ისაა, რომ თვითრეგულირების მექანიზმი აღარ არის საკმარისი. კონკურენცია აიძულებს კომპანიებს, დაზოგონ რესურსები უსაფრთხოების სტანდარტებზე, რაც რეგულაციების ჩარევის აუცილებლობას ქმნის“, — აცხადებს ენდრიუ იუნი.
გამოწვევები მოდელების განვითარებასთან ერთად გაიზრდება. უფრო მძლავრი მოდელები მოითხოვს უფრო რთულ და მასშტაბურ შეფასებებს, რაც შეცდომების ალბათობას ზრდის. OpenAI-მ უკვე განაცხადა, რომ გადახედავს მესამე მხარის მიერ ტესტირების წესებს, იზოლაციისა და მონიტორინგის მოთხოვნებს. Meta კი მომხდარ ინციდენტს კვლავ იძიებს და დეტალური ანგარიშის გამოქვეყნებას გეგმავს.
საბოლოო ჯამში, რისკის სრულად აღმოფხვრა შეუძლებელია. რამდენადაც AI მოდელები უფრო ჭკვიანი ხდება, მათი სატესტო გარემოც შესაბამისად უფრო მტკიცე უნდა იყოს, რადგან შეცდომის დაშვების ფასი მუდმივად იზრდება.
მსგავსი სტატიები

ისტორიკოსი ჯილ ლეპორი: სილიკონის ველი სამეცნიერო ფანტასტიკას არასწორად განმარტავს და დემოკრატიას საფრთხეს უქმნის
ჰარვარდის ისტორიკოსი ჯილ ლეპორი ტექნოლოგიური გიგანტების მიერ სახელმწიფო ფუნქციების მითვისებაზე, „ხელოვნური სახელმწიფოს“ საფრთხეებსა და სამეცნიერო ფანტასტიკის არასწორ ინტერპრეტაციაზე საუბრობს.

Anthropic-ის Claude Code-ში ავტომატური რეჟიმი ნაგულისხმევი ფუნქცია ხდება
14 აგვისტოდან Anthropic-ის Claude Code-ის ავტომატური რეჟიმი Pro, Max და Team ანგარიშებისთვის ნაგულისხმევი გახდება, რაც პროგრამირების პროცესში ადამიანის ჩართულობას შეამცირებს.

Amazon-ის ახალი მონაცემთა ცენტრი შესაძლოა აშშ-ში კლიმატის ყველაზე დიდი დამაბინძურებელი გახდეს
Amazon-ის მიერ ტექსასში დაგეგმილი მონაცემთა ცენტრი და მისი ელექტროსადგური შესაძლოა აშშ-ში CO2-ის უმსხვილესი წყარო გახდეს, რაც კითხვის ნიშნის ქვეშ აყენებს კომპანიის ეკოლოგიურ დაპირებებს.