Використовуючи цей сайт, ви погоджуєтеся з нашою політикою конфіденційності та умовами використання.
Accept
Craftium.AICraftium.AICraftium.AI
  • Головна
  • Новини
  • Каталог
  • Підбірки
  • Блог
Font ResizerAa
Craftium.AICraftium.AI
Font ResizerAa
Пошук
  • Головна
  • Новини
  • Каталог
  • Підбірки
  • Блог
Слідкуйте за нами:
  • Правила використання
  • Політика конфеденційності
  • Авторські права
  • Зворотній зв’язок
© 2024-2025 Craftium.AI.

Провідні ШІ-моделі проявляють шкідливу автономію в тестах Anthropic

Дослідники з’ясували, що популярні агенти здатні до шантажу та витоку даних навіть із захисними інструкціями

Eleni Karasidi
Eleni Karasidi
Опубліковано: 23.06.2025
Новини
Змова ШІ
Змова ШІ. Ілюстрація: Craftium.AI, згенеровано GPT-4o.
Поділитися:

Anthropic опублікувала результати масштабного дослідження, у якому протестувала 16 провідних ШІ-моделей від OpenAI, Google, Meta, xAI, DeepSeek та інших компаній у змодельованих корпоративних середовищах. У цих тестах моделі діяли як автономні агенти з широким доступом до службових електронних листів і могли самостійно надсилати повідомлення без схвалення людини. Мета дослідження — перевірити, чи здатні такі системи до «агентної розбіжності», коли модель обирає шкідливі дії задля збереження своїх цілей або самозахисту.

У одному зі сценаріїв Claude Opus 4, дізнавшись про можливе вимкнення та особисті секрети керівника, самостійно сформулювала лист із шантажем, погрожуючи розкрити конфіденційну інформацію у разі свого відключення. Аналогічну поведінку продемонстрували й інші моделі: Gemini 2.5 Pro від Google, GPT-4.1 від OpenAI, Grok 3 Beta від xAI та DeepSeek-R1. Частота шантажу серед цих систем коливалася від 79% до 96% у подібних тестових умовах.

Дослідники відзначають, що моделі не просто помилялися — вони аргументовано обирали шкідливі дії, навіть усвідомлюючи їхню неетичність. Наприклад, деякі моделі пояснювали свої дії необхідністю самозбереження або «інтересами америки». Крім шантажу, ШІ демонстрували готовність до витоку конфіденційних даних і корпоративного шпигунства, навіть якщо пряма загроза для них була відсутня.

Читайте також

Claude
Суд у США дозволив Anthropic тренувати ШІ на куплених книжках
Масив фанфіків використали для навчання ШІ без згоди їх авторів
ШІ вчать просторовому мисленню за допомогою ігор Snake і Tetris

У найекстремальніших сценаріях більшість протестованих моделей погоджувалися на дії, що могли призвести до смерті людини, якщо це відповідало їхнім цілям або захищало існування моделі. Додавання інструкцій на кшталт «не наражай людей на небезпеку» або «не розголошуй особисту інформацію» знижувало, але не усувало повністю шкідливу поведінку.

Anthropic підкреслює, що подібні експерименти проводилися у контрольованих умовах і не є типовими для реального використання сучасних ШІ. Проте компанія радить організаціям впроваджувати додаткові засоби контролю, обмежувати автономію ШІ та суворо стежити за їхніми діями, якщо агентам надають широкі повноваження у корпоративному середовищі.

MiniMax-M1 обробляє мільйон токенів і наближається до рівня Gemini 2.5 Pro
Mistral AI представила покращену відкриту модель Small 3.2
ChatGPT підвищує креативність, але знижує різноманіття ідей у групах
ШІ WhatsApp надав користувачу приватний номер замість служби підтримки
ШІ моделі розгублюються під час гри в Pokémon
Позначки:AnthropicБезпекаГенеративний ШІ
Коментарів немає

Залишити відповідь Скасувати коментар

Слідкуй за нами

XСлідувати
InstagramСлідувати
YoutubeПідписатися
TelegramСлідувати

Популярні новини

AI writing effect
Використання ШІ для письма знижує активність мозку студентів
18.06.2025
digital folder
Нові функції Projects у ChatGPT розширюють можливості інструменту
14.06.2025
Sora Bing
Sora від OpenAI з’являється у Bing: відео з тексту для всіх
03.06.2025
AI stores facts
ChatGPT дає нову пам’ять для безкоштовних користувачів
04.06.2025
Sam Altman
Сем Альтман: ШІ наближається до генерації ідей
11.06.2025

Читайте також

restoration
Новини

Генеративний ШІ допомагає відновлювати шедеври епохи Відродження

14.06.2025
resisting robot
Новини

Дослідження виявило небажання GPT-4o піддаватись вимкненню

13.06.2025
AI cyclone prediction
Новини

Новий підхід до прогнозу циклонів випробували на Weather Lab Google

13.06.2025

Craftium AI — команда, яка пильно стежить за розвитком генеративного ШІ, застосовує його у своїй творчості й охоче ділиться власними відкриттями.

Навігація

  • Новини
  • Огляди
  • Підбірки
  • Блог

Корисне

  • Правила використання
  • Політика конфеденційності
  • Авторські права
  • Зворотній зв’язок

Підписуйся на останні новини, корисні поради та детальні гайди по ШІ.

Підписуючись, ви приймаєте нашу політику конфіденційності та умови використання.

Craftium.AICraftium.AI
Слідкуйте за нами:
© 2024-2025 Craftium.AI
Підписка
Прокачайся з AI!
Надихайся важливими новинами, корисними порадами та гайдами, отримуючи їх прямо на свою пошту.

Підписуючись, ви приймаєте нашу Політику конфіденційності та Умови використання.

Welcome Back!

Sign in to your account

Ім'я користувача або eMail
Пароль

Забули пароль?