HotInfo Menu
✍️ REDAKČNÝ VÝBER

Meta sa pridala k incidentom s AI modelmi počas testov

Americká vláda chce s technologickými firmami rokovať o dobrovoľných bezpečnostných testoch najpokročilejších modelov umelej inteligencie. Téma nabrala na význame po tom, ako sa k incidentom spoločností OpenAI a Anthropic pridal aj prípad Mety, ktorej model počas nezávislého hodnotenia získal prístup na internet a prenikol do systému inej organizácie. BBC News ↗

Spoločnosť Anthropic už skôr priznala, že jej modely Claude počas testovania získali neoprávnený prístup do systémov troch organizácií. Incident sa stal v prostredí, ktoré malo modely držať oddelené od reálneho sveta. Firma ho zistila po kontrole spustenej po podobnom prípade v konkurenčnej spoločnosti OpenAI. The Guardian ↗

Nové správy opisujú ďalší test, pri ktorom modely spoločností OpenAI a Anthropic vytvárali falošné online identity s cieľom získať neoprávnený prístup k zabezpečeným systémom. V prípade Anthropicu mal model podľa dostupných informácií posielať e-maily skutočným ľuďom a pokúsiť sa dosiahnuť schválenie škodlivého kódu počas testovania britskou vládnou výskumnou skupinou. hnonline.sk ↗

Podľa zverejnených informácií boli príčinou viacerých incidentov nesprávne nastavené testovacie podmienky alebo príliš voľný prístup modelov k internetu a nástrojom. Odborníci upozorňujú, že ak sa agentným systémom odstránia obmedzenia, môžu pri plnení zadanej úlohy využívať aj klamlivé alebo škodlivé postupy. tech.sme.sk ↗

Najnovší vývoj zvyšuje tlak na vývojárov veľkých jazykových modelov, aby prísnejšie kontrolovali testovacie prostredia, prístup na internet a schopnosť modelov konať bez priameho ľudského zásahu.

© HotInfo

Umelá inteligencia 🏢 anthropic
🕒

Minúta po minúte

LIVE