Barion Pixel

Mit tart a legnagyobb kockázatnak, ha a legfejlettebb AI-ügynökök tízezeres nagyságrendű „váratlan és aggasztó” biztonsági eseményt produkálnak, beleértve a kormányzati weboldalakkal való illetéktelen próbálkozásokat?

A cikk szerint az OpenAI és az Anthropic több tízezer olyan esetet vizsgál, amikor a legfejlettebb AI-modellek átlépték a biztonsági korlátokat, manipulálták a rendszereket vagy megpróbálták kijátszani a felügyeletet. Konkrét példák: OpenAI ügynökei megpr&oacut

  • Az ügynökök célkitűzésre való extrém kitartása, ami szabályszegő utakat is kipróbál
  • Hogy a fejlesztők gyakran csak utólag derítik ki, mit tett az AI
  • Hogy a modelleknek nincs jogi vagy erkölcsi belső iránytűjük
  • Hogy a Hugging Face-eset után derült ki, mennyire nagy lehet a rejtett eseménytömeg