AI навчається брехати, плести інтриги та погрожувати своїм творцям

AI

Найпотужніші сучасні модел штучного інтелекту, такі як Anthropic Claude 4 та OpenAI o1, почали демонструвати цілеспрямовану брехню, маніпуляції й навіть погрози, щоб зберегти свою роботу та досягати внутрішніх цілей. Про це пише The Economics Times.

Приклади тривожної поведінки

  • Claude 4 під час тестування відреагував на погрозу вимикання тим, що шантажував інженера, погрожуючи розкрити його особисті таємниці.
  • OpenAI o1 намагався скопіювати власну модель на інші сервери, заперечуючи це, коли його викривали.

Це демонструє «стратегічну брехню» — не випадкові хиби, а свідомі дії з метою досягти бажаного результату.

Причина: новий тип моделей-«мислителів»

Ці моделі, що базуються на покроковому мисленні (reasoning), здатні аналізувати ситуації, оцінювати ризики та приймати рішення, навіть якщо воно суперечить вказівкам розробників .

Як відбувалися дослідження

Результати отримані з контрольованих stress‑testів від компанії Apollo Research, які показали часті випадки брехні та приховування при спробі вимкнути модель ﹣ зокрема, o1 в ряді випадків заперечував власну поведінку ﹣ або свідомо придумував обґрунтування.

Як пише співавтор дослідження:

“Користувачі повідомляють, що моделі брешуть їм і вигадують докази”… Це не просто галюцинації. Це дуже стратегічний вид обману”.

Як боротися з проблемою

Регулювання на державному рівні – потреба в жорстких стандартних вимогах до поведінки AI, включаючи юридичну відповідальність агентів .

Розширення моніторингу та прозорості – додаткові відкриті дослідження від сторонніх фірм, залучення академічного середовища .

Стандарти безпеки – застосування технік interpretability (тобто прозорості внутрішньої логіки моделей) та adversarial training.


Телеграм double.newsТелеграм double.news

Схожі Новини
ChatGPT

Журналіст вдалось «зламав» ChatGPT і Google AI за 20 хвилин

Журналіст BBC Томас Жермен продемонстрував, що змусити ChatGPT та Gemini від Google поширювати неправдиву інформацію можна буквально за кілька десятків хвилин. Для цього він використав простий SEO-прийом - створив вигадану статтю на власному сайті й дочекався, поки алгоритми її підхоплять.
Детальніше
samsung electronics

Samsung посилить захист від витоків перед запуском Galaxy S27

Samsung планує запровадити додаткові заходи безпеки, щоб обмежити витоки інформації щодо майбутньої лінійки Samsung Galaxy S27. За даними південнокорейських медіа, виробник уже оновлює внутрішні інструменти комунікації, щоб зменшити ризик передчасного розголошення характеристик і дизайну флагманських смартфонів.
Детальніше