Dôležité

Americká vláda zastavila Fable 5 a Mythos 5: Anthropic vypína prístup zákazníkom

TL;DR

  • Modely vypína

    Anthropic musí po vládnej smernici zastaviť prístup k Fable 5 a Mythos 5. Ostatné modely majú zostať dostupné.

  • Dôvodom má byť jailbreak

    Americká vláda podľa firmy rieši možnosť obídenia ochranných pravidiel. Anthropic tvrdí, že ide o úzky a nie univerzálny problém.

  • Spor o pravidlá

    Firma rozhodnutie rešpektuje, no tvrdí, že podobný štandard by mohol zastaviť nasadzovanie nových frontier modelov v celom odvetví.

Anthropic po zásahu americkej vlády vypína modely Fable 5 a Mythos 5 pre zákazníkov. Firma hovorí o exportnej kontrole, jailbreake a spore o bezpečnostné pravidlá.

Anthropic oznámil, že na základe smernice americkej vlády musí pozastaviť prístup k modelom Fable 5 a Mythos 5. Opatrenie sa podľa firmy týka všetkých zahraničných osôb, a to bez ohľadu na to, či sa nachádzajú v USA alebo mimo nich. Keďže sa má vzťahovať aj na zahraničných zamestnancov Anthropic, firma tvrdí, že pre splnenie pravidiel musí modely vypnúť pre všetkých zákazníkov.

Čo sa stalo

Podľa vyhlásenia Anthropic prišla smernica od americkej vlády 12. júna o 17:21 východného času. Firma tvrdí, že dokument neobsahoval konkrétne detaily bezpečnostnej hrozby, ale opieral sa o národnú bezpečnosť a exportné pravidlá.

Výsledok je praktický: Fable 5 a Mythos 5 majú byť náhle nedostupné pre zákazníkov. Anthropic zároveň uvádza, že prístup k ostatným modelom firmy sa týmto rozhodnutím nemení.

Pre zákazníkov ide o výrazný zásah. Ak mali Fable 5 alebo Mythos 5 nasadené v aplikáciách, interných nástrojoch alebo pracovných procesoch, musia prejsť na iný model alebo počkať na obnovenie prístupu.

Problémom má byť jailbreak

Americká vláda podľa Anthropic rieši možnosť obídenia ochranných pravidiel modelu Fable 5. Takéto obídenie sa pri AI modeloch bežne označuje ako jailbreak. Ide o techniku, ktorou sa používateľ snaží prinútiť model odpovedať aj na veci, ktoré by mal za normálnych okolností odmietnuť.

Anthropic tvrdí, že videl ukážku konkrétnej techniky, pri ktorej model identifikoval menší počet už známych a podľa firmy jednoduchších zraniteľností. Spoločnosť zároveň tvrdí, že podobné výsledky dokážu poskytnúť aj iné verejne dostupné modely bez špeciálneho obchádzania ochrany.

Firma preto nesúhlasí s tým, že by úzky a ne-univerzálny jailbreak mal byť dôvodom na stiahnutie komerčne nasadeného modelu.

Anthropic obhajuje svoje bezpečnostné testy

Anthropic pripomína, že pred uvedením Fable 5 spolupracoval na testovaní bezpečnostných pravidiel s americkou vládou, britským AI Safety Institute, súkromnými externými organizáciami aj internými tímami. Podľa firmy išlo dokopy o tisíce hodín red-teamingu.

Spoločnosť tvrdí, že testy ukázali silnejšie ochranné pravidlá než pri predchádzajúcich nasadených modeloch. Zároveň uvádza, že testeri zatiaľ nenašli univerzálny jailbreak, teda postup, ktorý by vo veľkom rozsahu obišiel ochrany a odomkol široké kybernetické schopnosti modelu.

Anthropic však priznáva, že úplná odolnosť proti jailbreakom dnes pravdepodobne nie je možná pri žiadnom poskytovateľovi AI modelov. Preto pri Fable 5 zvolil stratégiu „defense in depth“, teda viac vrstiev ochrany, monitorovania a reakcie na útoky.

Sporná je aj politika uchovávania dát

Firma v tejto súvislosti pripomína aj 30-dňové uchovávanie zákazníckych dát pri Fable 5. Podľa Anthropic ide o nepopulárne, ale dôležité opatrenie, ktoré má pomáhať skúmať a zmierňovať jailbreaky.

Toto je citlivá časť celej témy. Na jednej strane môže uchovávanie dát pomôcť bezpečnostným tímom odhaliť zneužívanie. Na druhej strane ide o krok, ktorý môže časti zákazníkov prekážať, najmä ak pracujú s citlivým kódom, internou dokumentáciou alebo bezpečnostnými analýzami.

Anthropic tvrdí, že práve kombinácia bezpečnostných filtrov, monitorovania a následnej reakcie robí riziká Fable 5 porovnateľné s modelmi, ktoré sú už v odvetví bežne dostupné.

Prečo je to dôležité pre celé AI odvetvie

Prípad Fable 5 a Mythos 5 môže byť dôležitým precedensom pre celé odvetvie umelej inteligencie. Anthropic tvrdí, že ak by sa podobný štandard uplatňoval plošne, mohlo by to v praxi zastaviť nasadzovanie nových frontier modelov.

Firma síce uznáva, že vláda má mať možnosť blokovať nebezpečné nasadenia AI, no podľa nej by sa to malo diať cez jasný, transparentný a technicky podložený proces. Aktuálny zásah podľa Anthropic tieto podmienky nespĺňa.

Spor tak nie je iba o jeden model alebo jednu bezpečnostnú techniku. Ide aj o to, aký dôkaz má stačiť na zastavenie veľkého komerčného AI systému a ako sa má vyvažovať národná bezpečnosť, inovácie, dostupnosť nástrojov a práva zákazníkov.

Zákazníci čakajú na ďalší vývoj

Anthropic sa zákazníkom za prerušenie prístupu ospravedlnil a tvrdí, že pracuje na obnovení dostupnosti modelov čo najskôr. Zároveň avizuje, že chce zverejniť viac detailov o technickom pozadí prípadu.

Pre používateľov je teraz kľúčové, či ide o krátkodobé pozastavenie, alebo začiatok prísnejšieho režimu pri najvýkonnejších AI modeloch. Ak budú vlády častejšie zasahovať do dostupnosti modelov pre bezpečnostné riziká, firmy budú musieť počítať s novým typom prevádzkovej neistoty.

Vývojári, podniky a veľkí zákazníci preto budú sledovať nielen to, či sa Fable 5 a Mythos 5 vrátia, ale aj to, aké pravidlá budú platiť pri ďalších generáciách AI modelov.

Fakticky overené
Anketa

Bojíte sa umelej inteligencie?

1 hlas

Zdroje

Preferovaný zdroj v Google

Ak vám naše články pomáhajú sledovať technológie, financie a AI v súvislostiach, pridajte si SmartArena medzi preferované zdroje v Google.

Pridať SmartArena v Google

Komentáre

Pridať komentár

SmartArena Premium

Čítajte SmartArena naplno.

Doprajte si prémiové články, rozšírené analýzy a pohodlné čítanie bez reklamy.

Ročné predplatné30 € / rok
Vybrať si predplatné
SmartArena aplikácie

V mobile. Na tablete. Aj v počítači.

Majte správy, trhy aj svoj účet vždy poruke. Vyberte si aplikáciu pre svoje zariadenie.