Veštačka inteligencija više nije samo pasivni čet-bot koji generiše tekst i odgovara na pitanja. Ušli smo u eru autonomnih AI agenata — softverskih sistema koji poseduju operativna ovlašćenja da samostalno izvršavaju kompleksne radnje: šalju elektronsku poštu, sprovode finansijske transakcije, modifikuju i izvršavaju programski kod i direktno upravljaju produkcionim bazama podataka.

Međutim, dok kompanije žure sa implementacijom ovih sistema kako bi optimizovale poslovanje, pravni i bezbednosni okviri ostaju nedefinisani. Kada autonomni agent donese pogrešnu odluku, izazove curenje podataka ili obriše kritičnu infrastrukturu, uspostavljanje pravne odgovornosti postaje izuzetno složen problem podjednako u pravnom sistemu SAD, Evropskoj uniji i domaćem zakonodavstvu.

Kada zaposleni napravi grešku ili počini krivično delo, pravni mehanizmi su jasni: primenjuje se odgovornost poslodavca za štetu koju zaposleni pričini trećem licu na radu, uz mogućnost daljeg odgovaranja samog pojedinca. Kod softvera, tradicionalni koncepti se suočavaju sa ozbiljnim pravnim prazninama.

Autonomni AI agenti funkcionišu u specifičnom prostoru:

Nedostatak pravnog subjektiviteta: AI agent u pravnom smislu nije fizičko ni pravno lice. On ne može stajati iza ugovora niti biti direktno tužen pred sudom.

Ograničenja zakona o odgovornosti za proizvode (Product Liability): Ako se softver definiše kao “proizvod”, proizvođač odgovara za nedostatke. Međutim, kada autonomni model donese nepredvidivu odluku usled nedeterminastičke prirode LLM-a (Large Language Models), teško je dokazati fabrički “defekt” u kodu.

Pitanje zastupništva (Agency Law): Tradicionalno pravo zastupništva zahteva da zastupnik ima sopstvenu svest i nameru da deluje u ime vlastodavca. Primena ove doktrine na algoritme stvara pravne apsurde.

Subjekat u lancuPotencijalni pravni osnovKljučni problem u dokazivanju
Developer / Proizvođač AIOdgovornost za proizvod, nemar u razvojuNepredvidivost stohastičkih modela (“crna kutija”)
Kompanija (Korisnik)Profesionalni nemar, nedovoljan nadzorAgent deluje autonomno van predviđenog scenarija
Sistem administrator / Prompt inženjerLjudska greška u definisanju dozvolaLoše definisane granice, ali bez zle namere

Mogući scenariji štete u produkcionom okruženju

Opasnosti od neželjenog ponašanja AI agenata nisu samo teorijske. U praksi se najčešće identifikuju četiri glavna vektora rizika:

1. Manipulacija kontekstom i “Prompt Injection” napadi

Napadne tehnike poput Indirect Prompt Injection omogućavaju napadačima da preuzmu kontrolu nad agentom. Ako AI agent čita neproverenu elektronsku poštu ili spoljne dokumente, skrivene instrukcije u tekstu mogu ga primorati da prosledi poverljive podatke sa servera na eksternu adresu.

2. Nebrisanje granica i destruktivne komande

Autonomni agent kom je povereno održavanje baza podataka ili CI/CD pajplajna može loše protačiti kontekst zadatka i izvršiti destruktivne komande poput DROP DATABASE ili masovnog brisanja resursa na cloud platformama (AWS, Azure, GCP).

3. Neovlašćene finansijske transakcije

Agenti integrisani sa payment gateway API-jima ili sistemima za nabavku mogu, usled algoritamske greške ili pogrešnog tumačenja tržišnih podataka, izvršiti neracionalne kupovine ili sklapanje nepovoljnih ugovora sa trećim stranama.

4. Narušavanje privatnosti i GDPR/GDPR-RS prekršaji

Slanje poverljivih podataka klijenata trećim licima ili nesmotrena obrada osetljivih informacija direktno dovodi do drastičnih novčanih kazni pred regulatornim telima za zaštitu podataka o ličnosti.

Tehničke i organizacione mere zaštite (Paper Trail)

Kada su pravni okviri nedovoljno precizni, dokumentovani dokazni trag (paper trail) i primena principa najmanjih privilegija (Principle of Least Privilege) predstavljaju primarnu liniju odbrane kompanije pred sudom i inspekcijskim organima.

1. Arhitektura prinudnih granica (Least Privilege Access)

Agentima nikada ne treba dodeljivati administrativne ili neselektivne API ključeve.

Izolacija okruženja: Rad agenata se mora odvijati u izolovanim okruženjima (sandbox, kontejneri) bez direktnog pristupa produkcionim mrežnim segmentima.

Čitanje umesto pisanja: Podrazumevani nivo pristupa mora biti Read-Only. Dozvole za upis i brisanje moraju se dodeljivati striktno za definisane endpointe.

Rute sa obaveznom potvrdom (Human-in-the-loop): Akcije visokog rizika (npr. transakcije iznad određenog iznosa, brisanje podataka, slanje spoljnih imejlova) moraju zahtevati eksplicitnu verifikaciju i odobrenje od strane operatera.

2. Sveobuhvatno centralizovano logovanje (Audit Logging)

Trag akcija mora biti imun na modifikacije od strane samog agenta. Neophodno je logovati:

Izvorne zahteve i ulazne kontekste (prompte).

Interne korake rezonovanja agenta (Chain of Thought).

Tačne API pozive, parametre i odzive servisa.

Vremenske oznake i identifikatore sesija.

Logovi se moraju prosleđivati u realnom vremenu na nezavisni syslog ili SIEM server sa definisanim Write-Once-Read-Many (WORM) politikama skladištenja.

3. Pravna i procesna dokumentacija

Pre puštanja u rad, svaki sistem mora imati jasnu tehničku i pravnu dokumentaciju:

Procena uticaja na zaštitu podataka (DPIA): Formalno dokumentovanje rizika pre implementacije.

Matrica odgovornosti (RACI): Jasno definisana lica odgovorna za nadzor i intervenciju u slučaju otkazivanja sistema.

SLA i ugovori sa dobavljačima AI modela: Pitanje garancija, limita odgovornosti i vlasništva nad podacima mora biti regulisano ugovorom sa vendorom.

Strategijski pregled implementacije bezbednog AI agenta

Strategija sigurne integracije zahteva balans između autonomije sistema i operativnih kontrola.

+——————————————————————-+

|                        KORISNIK / ZADATAK                         |

+——————————————————————-+

                                  |

                                  v

+——————————————————————-+

|                     AI AGENT (LLM REZONOVANJE)                    |

+——————————————————————-+

                                  |

                                  v

+——————————————————————-+

|                  BEZBEDNOSNI PROKSI / VALIDACIJA                  |

|  – Provera dozvola (RBAC)                                         |

|  – Detekcija Prompt Injection-a                                   |

|  – Provera limita transakcija                                     |

+——————————————————————-+

             |                                         |

             | (Bezbedne akcije)                       | (Rizične akcije)

             v                                         v

+————————+             +—————————-+

| AUTOMATSKO IZVRŠENJE   |             | HUMAN-IN-THE-LOOP ODOBRENJE |

| (Npr. Čitanje podataka)|             | (Npr. Pisanje / Kupovina)  |

+————————+             +—————————-+

             |                                         |

             +——————–+——————–+

                                  |

                                  v

+——————————————————————-+

|                  CENTRALIZOVANI NEIZMENJIVI LOG                   |

|                  (Audit Trail za pravnu zaštitu)                  |

+——————————————————————-+

Izgradnja dokumentovanog i kontrolisanog okruženja za rad AI agenata nije samo tehničko pitanje, već ključna strategija upravljanja poslovnim i pravnim rizikom. Kompanije koje na vreme uspostave strog nadzor i precizan trag odgovornosti biće jedine zaštićene kada se stvori prvi ozbiljan pravni presedan.

Leave a Reply