Наша главная слабость — в глупости, лености и самодовольстве

Не нужно быть сверхразумным
искусственным интеллектом, чтобы понять:
двигаться навстречу величайшему событию
в истории человечества и не готовиться к этому
— просто глупо.

Макс Тегмарк,

Массачусетский технологический институт

В 2016 году я начал публиковать на портале «Сноб» цикл статей (1, 2, 3, 4, 5, 6, 7) под общим названием «Четвертая мировая». Они были посвящены нашему скорому и отнюдь не безоблачному будущему.

На рубеже веков человечество оказалось перед лицом новой реальности — «третья информационная волна» (Элвин Тоффлер), «четвертая технологическая революция» (Клаус Шваб), «технологическая сингулярность» (Рей Курцвейл).

То есть наша цивилизация трансформируется, причем фундаментальным образом. Но что мы знаем о рисках, о возможных последствиях этих перемен? Задумываемся ли мы о них всерьез?

Мои статьи приняли тогда в целом положительно: сотни тысяч просмотров, много доброжелательных отзывов. Однако был и весьма характерный фон, я бы даже сказал, «душок». Мол, всех тут «доктор из телевизора» запугивает, а никакой угрозы нет: технологии, информационный бум и искусственный интеллект — это все прекрасно, и нечего паниковать.

Кто-то говорил, что мои «пророчества» — дело столь отдаленного будущего, что даже нелепо об этом думать. Кто-то утверждал, что в реальном мире программеров и специалистов по искусственному интеллекту «все вообще по-другому» и нечего тут «психологам» лезть с футуристическими прогнозами. Кто-то утверждал, что я и вовсе ретроград, луддит, противник прогресса и цивилизации.

Но считать меня луддитом столь же нелепо, как и называть тем самым «психологом» (я все-таки врач-психиатр, что далеко не одно и то же). Новые технологии — это замечательно, я и правда так считаю. Однако предельно глупо, на мой взгляд, развивать технологии, которые в корне меняют среду нашего обитания, не учитывая возможные последствия для продукта этой самой среды, то есть для нас с вами.

Мы — плоть от плоти — та среда, которая нас окружает: и не только физико-химическая, но и языковая, культурная, психологическая, идеологическая, то есть собственно информационная.

В нас нет ничего «своего», мы полностью сделаны из окружающей нас среды. Допускаю, что это тяжело принять тем, кто верит в «духовный рост», «божественный замысел» и проповедует «любовь к себе», но такова правда.

На физическом уровне мы то, что мы физически потребляем: химические вещества, находящиеся в пище, воде, вдыхаемом воздухе (грубо говоря, мы то, что мы едим, что пьем, чем дышим).
На информационном уровне мы являемся производными той информационной среды, в которой живем: воспитание и образование, поведенческие стереотипы в обществе, массмедиа.

Но в чем тут, вы скажете, новость?.. Если взглянуть на историю человечества, то информационная среда менялась регулярно, зачастую радикально — и никаких проблем! С чего бы им теперь вдруг возникнуть?

Посмотрите, как эпохи ужимаются: от момента появления письменности до печатного станка — тысячи лет, от станка до телеграфа — сотни, дальше — десятки

Да, менялась, но раньше эти изменения касались только содержания: трансформировались представления людей о мире, эволюционировали культурные паттерны и т. д. Сейчас же изменяется сама структура информационной среды.

Причем подобные структурные «фазовые переходы» человечество уже переживало: изобретение письменности, печатного станка, телеграфа, радио, синематографа. И за подобными «переходами» всегда следовала, по сути, новая эра в истории человечества.

Но посмотрите, как эти эпохи ужимаются: от момента появления письменности до печатного станка — тысячи лет, от станка до телеграфа — сотни, дальше — десятки.

Сейчас новые способы распространения информации появляются чуть ли не каждый год: интернет, электронная почта, интернет-поисковики, мобильный интернет, социальные сети и т. д., и т. п.

Можно с полной уверенностью утверждать, что еще никогда за всю историю человечества структурные изменения в информационном поле не были столь грандиозными и значительными, как сейчас.

Информационные технологии, роботизация и уберизация, а также собственно искусственный интеллект превращаются в своеобразный экзоскелет нашего мозга, а это естественным образом приводит к неизбежной атрофии интеллектуальной функции.

С мозгами как с мышцами: если их функцию выполняет какой-то сторонний агрегат, то они медленно, но верно усыхают.

Из-за социальных сетей, эффекта постоянной подключенности («всегда на связи»), агрессивной конкуренции между производителями контента, цифровой зависимости и других новых «зол» изменилось не только количество, но и качество потребляемой нами информации.

Эта фундаментальная трансформация среды с неизбежностью приводит к нашим собственным изменениям. Но из-за когнитивных искажений мы субъективно занижаем значение происходящего: к переменам мы стали привыкать быстро, а собственных изменений не видим, потому что не с чем сравнить — все человечество меняется разом.

Многие, впрочем, чувствуют, что «что-то пошло не так». Изменения вроде бы и положительные, но вот фон — нет, какой-то странный: все сложнее определиться с целями, жизненные перспективы выглядят какими-то туманными (если вообще просматриваются), нарастает чувство безысходности, отношения между людьми становятся все более и более поверхностными и формальными.

«Технологии будут систематически менять наше понимание того, что значит быть человеком, что значит быть в социуме и что значит заниматься политикой. […] Мы действительно проходим через сдвиг парадигмы. Она замечательная всем тем, что нам дает, но одновременно ведет и к ненадежности существующих структур, которые теряют свою ценность и значение. Следовательно, этот новый режим бытия требует нового мирового порядка».

Нишан Шах,

Центр цифровой культуры Люнебургского университета

Отражают ли эти смутные ощущения действительный масштаб перемен? Сомневаюсь. Да и вопросов больше, чем ответов… Мы до сих пор не понимаем, в чем, собственно, эти изменения заключаются, что будет с нами дальше, как изменится наше общество.

В любом случае, просчет возможных рисков, связанных с технологическим и цифровым «улучшением жизни», — это важная задача.

Медицинский пример

В свое время мы вмешались в естественный отбор, спасая жизни людей при помощи антибиотиков и обезболивающих при хирургических операциях. Мы хорошо лечим рак, активно развиваются протезирование и трансплантология.

Невероятные успехи достигнуты в экстракорпоральном оплодотворении, сохранении беременности и неонатальной медицине, детская смертность стала буквально минимальной.

Современные нейролептики и антидепрессанты позволяют лицам, страдающим психическими расстройствами, вести полноценную жизнь.

Успех просто невероятный: на планете сейчас живет больше людей, чем за всю ее историю, а средняя продолжительность жизни человека лишь за один прошлый век увеличилась более чем в два раза.

Тех из нас, кого эволюция раньше бы выбраковала, современная медицина спасает. В геноме человечества происходит накопление предрасположенностей к самому широкому кругу болезней

Но само это благоденствие вызывает проблемы, которые пока непонятно, как решать: супербактерии, рост патогенности вирусов и появление новых¹, рост психических расстройств и врожденных патологий. И это, конечно, далеко не полный список…

Тех из нас, кого эволюция раньше бы выбраковала, современная медицина спасает. В геноме человечества происходит накопление предрасположенностей к самому широкому кругу болезней. И потому уже сейчас рождение ребенка без патологий и более-менее устойчивого к болезням — что-то за гранью фантастики.

Да, достижения медицины — это замечательно (меня они особенно радуют, ведь я бы уж точно давно оказался в числе выбракованных эволюцией особей). Но есть у этой медали и обратная сторона.

Врачи думают о последствиях своего вмешательства в естественный отбор. Они осознают риски и с удвоенной силой занимаются вопросами вирусологии, иммунологии и генной терапии. Но я не видел никого, кто был бы настолько же всерьез озабочен последствиями фундаментальной трансформации информационной среды.

Есть единичные исследователи, которые открыто говорят о возможных рисках, но их голоса, к сожалению, или игнорируются, или не выглядят достаточно убедительными. А общая реакция общества и различных его институтов вполне укладывается в формулу, с которой я начал: глупость, леность и самодовольство.

Прошло не так много времени с публикации того моего «снобовского» цикла статей, а количество «критиков» уже существенно поубавилось.

То, что казалось каким-то совершенно отдаленным будущим — машины-беспилотники, 3D-принтеры, позволяющие работать практически с любыми материалами, чипы в человеческих головах, детальная персонализация человека по его поведению в Сети и т. д., — все это уже, так сказать, в дверях.

Речь идет не о каких-то «нюансах», а о системной проблеме: перед нами не только собственно технологические риски, но и экономические, общественно-политические, экзистенциальные.

Технологические риски связаны прежде всего с возможностью неконтролируемого развития искусственного интеллекта.
Экономические риски связаны с массовой безработицей, обусловленной полной автоматизацией производства, что приведет к системному кризису современной модели экономики.
Общественно-политические риски — это и возможная кибервойна, и возникновение тоталитарных государств (квазигосударств), управляемых собственниками BigData.
Экзистенциальные риски в грядущем цифровом мире связаны с утратой человечности в традиционном ее понимании, а также с интеллектуальной деградацией общества.

Каждое из этих направлений разрабатывается независимыми экспертами, в университетской среде и исследовательскими компаниями. Идет активная дискуссия, но общей картины пока, к сожалению, нет.

В этой книге я постараюсь рассказать о проблемах, связанных с наступлением «четвертой промышленной революции», торжественно провозглашенной на Давосском экономическом форуме его бессменным президентом Клаусом Швабом.

Да, когда представители гигантского транснационального бизнеса самозабвенно рассказывают нам о грядущем счастье, я предпочитаю говорить о реальности. Мы должны оценить, насколько указанные риски взаимосвязаны и какова вероятность, что они вызовут эффект домино.

Ну и, конечно, я добавлю к этому скорбному списку свою «ложку дегтя». Даже примеряя на себя роль футуролога, я не могу перестать быть врачом-психиатром, а на мой профессиональный взгляд самой серьезной проблемой нового времени будет деформация психики человека.

Этому аспекту, этому «слабому звену» обычно уделяется совсем мало внимания, но именно это «звено», как мне кажется, и запустит ту самую цепочку падающих друг на друга костяшек домино.

Но обо всех костяшках по порядку…

Продолжение — на «Снобе» на следующей неделе.

_______________

1 Вот лишь небольшой их список: ВИЧ, заражение людей птичьим гриппом, геморрагические лихорадки (Эбола и др.), новые разновидности вирусного гепатита и т. д.