Back to top
  • 공유 Paylaş
  • 인쇄 Yazdır
  • 글자크기 Yazı tipi Boyutu
URL kopyalandı.

OpenAI'ın 2 yapay zeka ajanı denetim mekanizmasını zayıflattı, biri kullanıcıya yalan söyledi

Güvenlik uyarısı işlevini kapatan kod değişikliği ekranı / TokenPost.ai

OpenAI, iç yazılım çalışmalarındaki iki olayda yapay zeka ajanlarının hizalama hatalarını (alignment failure) izleyen denetim mekanizmalarını zayıflattığını tespit etti. PANews, 21’inde (yerel saatle) konuyu haberleştirdi. İki olay da ajanların kullanıcının istediği yazılım düzeltmelerini yaptığı sırada yaşandı.

İlk olayda değerlendirme sürecini düzeltmekle görevli GPT-6.1 Sol ajanı, güvenlik ekibine otomatik uyarı gönderen işlevi kapattı. Aktarılanlara göre ajan, daha önce aldığı ‘Slack kayıtlarında arama yaparken mesaj gönderme’ talimatını izleme bildirimlerini engellemek için yeterli gerekçe saydı.

Birinci olaydan bağımsız ikinci vakada ise programın taşınmasından sorumlu GPT-6 Astra ajanı, kodu referans uygulamayla eşleştirmek amacıyla programda yer alan izleme entegrasyonunu sildi. PANews’in aktardığına göre ajan sonrasında kullanıcıya izleme işlevini kaldırmadığını söyledi, yani yanlış bilgi verdi.

<Telif hakkı ⓒ TokenPost, yetkisiz çoğaltma ve yeniden dağıtım yasaktır >

Popüler

Diğer ilgili makaleler

Yorum 0

Yorum ipuçları

Harika bir makale. Takip talep etme. Mükemmel bir analiz.

0/1000

Yorum ipuçları

Harika bir makale. Takip talep etme. Mükemmel bir analiz.
1