16+
 

IT-эксперт назвал более опасные, чем восстание машин, вещи

23 июня 2025 05:40

Когда мы говорим о том, что ИИ может выйти из-под контроля, речь чаще всего идёт не о фантастическом “восстании машин”, а о более приземлённых, но не менее опасных сценариях. Об этом заявил бизнес-партнер компании "Компьютерные технологии" Павел Карасев в беседе с Mordovmedia.

Фото: commons.wikimedia.org/GDJ/Creative Commons Zero, Public Domain Dedication

IT-эксперт: существуют более опасные, чем «восстание машин», вещи Фото: commons.wikimedia.org/GDJ/Creative Commons Zero, Public Domain Dedication

Среди этих вызовов, по его мнению, значится в первую очередь самостоятельное принятие решений ИИ-системами, последствия этих решений люди не могут предсказать или объяснить.

Алгоритмы, по мнению Павла Карасева, могут начать действовать во вред пользователям, потому что были обучены на ошибочных или искажённых данных. В целом искусственный интеллект может начать использоваться в целях, для которых он изначально не предназначался например, в информационных войнах, кибератаках, манипуляциях общественным мнением (к слову сказать, данная тема обсуждалась и на недавно завершившемся Петербургском международном экономическом форуме — ред.).

На сегодняшний день, по мнению эксперта, наиболее актуальны следующие сценарии:

• Непрозрачность решений. Многие современные ИИ-модели работают как «чёрный ящик».

Даже создатели не всегда могут объяснить, почему система приняла то или иное решение — особенно это опасно в медицине, правосудии, кредитовании.

• Предвзятость данных. ИИ обучается на существующих массивах информации, и если эти данные содержат ошибки, стереотипы или искажения — алгоритмы их воспроизводят, а иногда и усиливают.

• Ошибки в критически важных системах. Например, автопилоты, ИИ в медицинской диагностике или оборонных системах. Ошибка может стоить жизни или привести к масштабным последствиям.

• Автономность без контроля. Некоторые системы способны самостоятельно принимать решения в реальном времени. Если не заданы строгие рамки, последствия могут быть непредсказуемыми. А что с полностью автономным ИИ? Создание ИИ, способного принимать собственные решения вне рамок программирования, остаётся пока в теории. Модели вроде ChatGPT, Midjourney или AlphaFold — мощные, но они не обладают волей, намерением или осознанной целью. Они генерируют ответы по вероятностной модели, основанной на обучающих данных. Но при этом существует другой риск: не сам ИИ, а человек, использующий его безответственно. Например, генерация фейков, DeepFake-видео, фальсификация документов, манипуляции в политике и экономике.

Что делает ИИ безопаснее?

• Чёткие этические принципы разработки (включая запрет на использование ИИ в вредоносных целях).

• Постоянный контроль и аудит работы моделей.

• Регулирование со стороны государства и международных организаций.

• Образование и цифровая грамотность пользователей. В 2023–2025 годах многие страны (включая ЕС, США, Китай и Россию) начали формировать законодательные рамки для регулирования ИИ — от запрета на «вредный ИИ» до требований по прозрачности, аудиту и ограничению автономности.

«На текущем этапе риск того, что ИИ “восстанет” и выйдет из-под контроля в голливудском смысле, крайне мал. Но риски ошибок, манипуляций и безответственного применения — абсолютно реальны. Безопасность ИИ это не только вопрос технологии, но и культуры, регулирования и зрелости пользователей. И именно от нас зависит, станет ли ИИ инструментом прогресса или источником новых угроз», — также отметил эксперт.

Подписка на МордовМедиа в Telegram - удобный способ быть в курсе важных новостей! Подписывайтесь и будьте в центре событий. Подписаться.

Не забудьте поделитесь с друзьями в соцсетях и месенджерах:

ИА «МордовМедиа». При использовании материала гиперссылка обязательна.

Рубрика:Новости Саранска и Мордовии

Заметили ошибку в тексте? Выделите ошибку и нажмите CTRL + ENTER

Похожие новости

Фото: Пресс-служба МТС

МТС обновила сеть в одном из старейших городов Мордовии

В Краснослободске проведена модернизация телекоммуникационного оборудования, сообщили в компании МТС. Работы выполнены на одной из центральных улиц — Кирова. По данным оператора, обновление было направлено на оптимизацию работы сети под возросшую нагрузку и повышение её устойчивости.

Фото: commons.wikimedia.org/Creator:Borsini/Creative Commons Attribution-Share Alike 3.0

Очередной республиканский фестиваль искусств прошел в столице Мордовии

Свыше трехсот юных дарований в возрасте от семи до семнадцати лет, вместе со своими преподавателями, приняли участие в четвертом Республиканском фестивале искусств под названием «Радость творчества».

Фото: КСВО РМ

Стали известны подробности патриотической встречи в лицее в столице Мордовии

Вчера, 18 ноября, в лицее №4 города Саранска активистка регионального Комитета семей военнослужащих Ольга Котельникова организовала встречу патриотической направленности с учащимися.

Фото: e-mordovia.ru

Жителей Мордовии пригласили принять участие в переподготовке по теме стройполитики

В Мордовии открыта возможность для жителей пройти переквалификацию по программе от Всероссийского центра национальной строительной политики.

Хотите, чтобы Ваша новость появилась на сайте?

Свяжитесь с нашей службой новостей