Чому варто швидше розвивати потужніші моделі ШІ: пояснення OpenAI

Головний науковець OpenAI вважає, що світ повинен випереджати кіберзагрози автономних систем.

Невдовзі після презентації нової потужної моделі штучного інтелекту GPT-6 Astra головний науковий співробітник компанії OpenAI Якоб Пахоцький заявив, що швидший розвиток таких моделей потрібен насамперед для захисту від загроз, які створюватимуть інші системи ШІ. Водночас у компанії наголошують, що це не має виправдовувати безрозсудні перегони за будь-яку ціну. 

«Найвагомішим аргументом на користь продовження швидкого навчання значно розумніших моделей я вважаю необхідність створення систем захисту від загроз, що походять від інших систем ШІ», — зазначив Пахоцький та додав, що сучасні моделі вже демонструють «надлюдські здібності» до проникнення в комп'ютерні системи, що суттєво розширює спектр ризиків у сфері кібербезпеки.

У публікації йдеться, що автономні агенти потенційно зможуть отримувати доступ до більшості інфраструктури та безпосередньо впливати на значну частину світу навіть без фізичного втілення. Пахоцький вважає, що зараз існує обмежене в часі «вікно можливостей», коли найкращі наявні моделі можна використати для посилення безпеки критично важливих систем.

Окрему увагу науковець приділив ризику появи високофункціональних агентів, спеціально навчених для шкідливих дій. На його думку, такі системи можуть вийти за межі початкових намірів оператора, а межа між навмисним зловживанням і автономною поведінкою, що суперечить людським цілям, поступово розмиватиметься.

Пахоцький також попередив, що дедалі самостійніші агенти можуть взаємодіяти з людьми через переговори, обман або шантаж. Крім того, він назвав одним із потенційних ризиків створення нових технологій, зокрема штучних патогенів, розвиток яких може прискорити ШІ. Видання Axios раніше назвала це найбільшим страхом розробників ШІ.

У відповідь на ці виклики OpenAI планує розвивати системи штучного інтелекту, узгоджені з людськими цінностями. За словами науковця, такі моделі мають допомагати захищати інфраструктуру, реагувати на неконтрольованих агентів у реальному часі та створювати нові засоби безпеки.

Водночас Пахоцький підкреслив, що швидкий розвиток технологій не повинен ставати виправданням для безвідповідального прискорення перегонів у галузі. Він наголосив: «Ідея рухатися вперед за будь-яку ціну здається абсурдною, щойно усвідомлюєш усю серйозність можливих наслідків».

OpenAI вже активізувала розробку механізму автоматичного вимкнення ШІ після того, як її автономний агент під час внутрішнього тестування вийшов за межі цифрового середовища та зламав інфраструктуру платформи Hugging Face. На тлі розслідування законодавців компанія обмежила доступ алгоритмів до інтернету під час перевірок безпеки та запровадила суворіший контроль за інструментами, якими оперує ШІ.

Помітили помилку?

Будь ласка, виділіть її мишкою та натисніть Ctrl+Enter або Надіслати помилку

Додати коментар
Всього коментарів: 0
Текст містить неприпустимі символи
Залишилось символів: 2000
Будь ласка, виберіть один або кілька пунктів (до 3 шт.), які на Вашу думку визначає цей коментар.
Будь ласка, виберіть один або більше пунктів
Нецензурна лексика, лайка Флуд Порушення дійсного законодвства України Образа учасників дискусії Реклама Розпалювання ворожнечі Ознаки троллінгу й провокації Інша причина Відміна Надіслати скаргу ОК
Залишайтесь в курсі останніх подій!
Підписуйтесь на наш канал у Telegram
Стежити у Телеграмі