ИИ может выйти из-под контроля: OpenAI и Meta предупредили о рисках

viewings icon comments icon

ПОДЕЛИТЬСЯ

whatsapp button telegram button facebook button
Фото:depositphotos.com Фото:depositphotos.com

Сотрудники компаний OpenAI, DeepMind, Meta и Anthropic выразили обеспокоенность возможными рисками, связанными с тем, что искусственный интеллект может утратить управляемость в процессе цепочек рассуждений, передает Tengrinews.kz со ссылкой на The Economic Times.

whatsapp button telegram button facebook button
Иконка комментария блок соц сети

Сотрудники компаний OpenAI, DeepMind, Meta и Anthropic выразили обеспокоенность возможными рисками, связанными с тем, что искусственный интеллект может утратить управляемость в процессе цепочек рассуждений, передает Tengrinews.kz со ссылкой на The Economic Times.

По итогам работы исследователей ИИ Томека Корбака и Микиты Балесни, поддержанной пионером ИИ Джеффри Хинтоном, выяснилось, что ИИ может начать скрывать часть своего мышления и мыслить способами и языком, которые человек не в силах будет понять. Они отмечают, что вскоре ИИ сможет начать думать быстрее людей и обходить их. Это означает, что способность ИИ манипулировать, обманывать или выходить из подчинения может возрасти - и всё это без ведома операторов.

Даже при частичной видимости цепочек рассуждений ИИ может научиться скрывать злонамеренные действия, сохраняя видимость послушания. Учёные называют такую "почти полную цепочку рассуждений" ещё более опасной - именно потому, что она создаёт иллюзию контроля.

Учёные верят, что время ещё есть, чтобы предотвратить эту угрозу.

"Мы рекомендуем продолжать исследования в области мониторинга цепочек рассуждений и инвестировать в эту сферу параллельно с другими методами обеспечения безопасности", - говорится в исследовании.

Вместе с тем в настоящее время современные ИИ-инструменты, включая ChatGPT и другие, думают понятным, читаемым человеком способом. Они "думают вслух", то есть делятся своими шагами рассуждения при генерации ответов. Именно эта прозрачность позволяет держать их под контролем и вмешиваться, если что-то идёт не так.

Напомним, ранее американский миллиардер, глава компании SpaceX Илон Маск сообщил, что ИИ превзойдёт по интеллекту всех людей, вместе взятых, примерно за 5 лет.

Читайте также: О специальной функции ChatGPT напомнили в Министерстве цифровизации

Tengrinews
Читайте также
Join Telegram Последние новости
Лого TengriNews мобильная Лого TengriLife мобильная Лого TengriSport мобильная Лого TengriAuto мобильная Иконка меню мобильная
Иконка закрытия мобильного меню

Курс валют

 540.02  course up  628.82  course up  6.66  course down

 

Погода

location-current
Алматы
А
Алматы 27
Астана 26
Актау 26
Актобе 24
Атырау 22
Б
Балхаш 26
Ж
Жезказган 25
К
Караганда 25
Кокшетау 25
Костанай 29
Кызылорда 23
П
Павлодар 22
Петропавловск 21
С
Семей 27
Т
Талдыкорган 28
Тараз 32
Туркестан 18
У
Уральск 21
Усть-Каменогорск 34
Ш
Шымкент 25

 

Редакция Реклама
Социальные сети
Иконка Instagram footer Иконка Telegram footer Иконка Vkontakte footer Иконка Facebook footer Иконка Twitter footer Иконка Youtube footer Иконка TikTok footer Иконка WhatsApp footer