На краю пропасти. Экзистенциальный риск и будущее человечества
Шрифт:
Можно определить экзистенциальный риск через наш остаточный потенциал, и тогда человечество может столкнуться с несколькими последовательными экзистенциальными катастрофами, а можно определить его через наш изначальный потенциал, и тогда в расчет пойдет лишь первая катастрофа. Я не знаю, какое из определений лучше, поэтому оставляю этот вопрос открытым. Обратите, однако, внимание, что ничего из написанного в этом разделе из за этого не меняется. Даже если люди смогут научиться на ошибках первой экзистенциальной катастрофы, это позволит им сохранить лишь остатки ценности, а значит, первая катастрофа безгранично важнее, и при этом сталкиваются с ней люди, в представлении которых она имеет беспрецедентный характер.
523
См. Groenewold (1970)
524
Эти меры могут быть направлены на любую стадию катастрофы – предупреждать ее начало, ограничивать ее распространение, создавать устойчивость к ее воздействию, – но выделять ресурсы, собирать информацию и планировать действия все равно нужно заранее.
525
Я взял эту мысль у Бустрёма (Bostrom, 2013, p. 27).
526
Иногда эту ситуацию называют “Найтовой неопределенностью” или просто “неопределенностью” и отличают от ситуаций “риска”, в которых у нас есть доступ к вероятностям (Knight, 1921). Существует несколько способов провести такое различение, например применять понятие “неопределенность” только к ситуациям, когда мы не обладаем никакой поддающейся количественной оценке информацией о том, случится ли событие.
Я не стану использовать такую терминологию на страницах этой книги и продолжу называть экзистенциальные риски “рисками”. Обратите внимание, что почти всегда я говорю о “рисках” применительно к ситуациям, объективная вероятность которых нам неизвестна, но у нас есть хотя бы какие то количественные данные о том, случится ли катастрофа (например, то, что вероятность начала ядерной войны в следующую минуту составляет менее 50 %).
527
Обзор попыток и методик оценки экзистенциального риска см. в Rowe and Beard (2018).
528
Lepore (2017).
529
Дерево ошибок – это схема логических связей между событиями, в частности связей, приводящих к провалу. Оно позволяет выявить возможные источники провалов – последовательности и комбинации событий, которые должны случиться, чтобы дело окончилось неудачей, и оценить их вероятность.
530
Вопрос об антропных эффектах отбора при оценке риска был поднят в Leslie (1996, pp. 77, 139–141) и изучен в Bostrom (2002a). См. работу Cirkovic, Sandberg & Bostrom (2010), где тщательно анализируется “антропная тень”: цензурирование исторических данных о различных событиях, связанных с риском вымирания.
531
Испытание термоядерной бомбы США на атолле Бикини в 1954 году, когда мощность и последствия взрыва оказались значительно выше, чем было запланировано, из-за непредвиденных дополнительных реакций. – Прим. науч. ред.
532
Это подчеркивается, с привязкой к Большому адронному коллайдеру, в работе Ord, Hillerbrand & Sandberg (2010). Разобраться, в чем проблема, поможет байесовский подход. У нас есть априорное представление об объективной вероятности, а также некоторые данные, подкрепляющие расчеты ученых. Следовательно, наша апостериорная оценка должна находиться в промежутке между априорной оценкой и оценкой ученых. Когда ученые дают чрезвычайно низкую оценку, апостериорная оценка, как правило, оказывается выше.
Эта проблема затрагивает все риски
533
Это связано с тем, что в случае с маловероятными рисками с высокими ставками истинная вероятность скорее окажется выше, а не ниже оценки. Например, если вероятность оценивается в один на миллион и шансы того, что истинная вероятность окажется в десять раз выше или в десять раз ниже, равны, то первое сильнее влияет на ожидаемую истинную вероятность, повышая ее. Иными словами, если вы еще не сделали поправку на этот эффект, ваша точечная оценка базовой вероятности часто оказывается ниже ожидаемой, но при принятии решений важна именно ожидаемая оценка.
534
Для начала можно, например, создать орган по образцу МГЭИК и поручить ему оценку экзистенциального риска в целом. Этот новый международный консультационный совет под эгидой ООН будет собирать данные о том, каков сложившийся научный консенсус по вопросу об экзистенциальном риске, и объяснять его.
535
Beck (2009), p. 57.
536
Герберт Уэллс почти всю жизнь активно призывал к созданию мирового правительства (Wells, 1940, pp. 17–18; перевод А. Биргера): “Именно система националистического индивидуализма и некоординированного предпринимательства является мировой болезнью, и именно вся система должна уйти. […] Поэтому первое, что нужно сделать при осмыслении основных проблем мира во всем мире, – это осознать, что мы живем в конце определенного периода Истории, периода суверенных государств. Как мы говорили в восьмидесятые годы со все возрастающей правдивостью: “Мы находимся в переходном возрасте”. Теперь мы получаем некоторую меру остроты перехода. Это фаза человеческой жизни, которая может привести, как я пытаюсь показать, либо к НОВОМУ ОБРАЗУ ЖИЗНИ для нашего вида, либо к более длительному или короткому периоду насилия, страданий, разрушения, смерти и вымирания человечества.”.
Бертран Рассел (1951) писал: “До конца текущего столетия, если не случится ничего непредвиденного, реализуется одна из трех возможностей. Они таковы:
1. Уничтожение человеческой жизни, а возможно, всей жизни на планете.
2. Возврат к варварству после катастрофического сокращения численности населения Земли.
3. Объединение мира под властью одного правительства, обладающего монополией на все основные средства ведения войны”.
В наши дни Ник Бустрём призывает к формированию того, что он называет “синглтоном” (2006). Это может быть особый тип мирового правительства, но это необязательно. Насколько я понимаю его мысль, человечество становится синглтоном, если оказывается в ситуации, в которой ведет себя практически как единый агент. В таком случае человечество избегает исходов, не оптимальных, по Парето, в интуитивном представлении людей по всему миру (например, конфликтов с отрицательной суммой, таких как война). Но наличие единого политического центра, осуществляющего управление, при этом не требуется.
537
Einstein (1948), p. 37. Эйнштейном двигало стремление устранить риск вымирания, но в его представлении механизм этого риска немного отличался от того, который особенно волнует меня. Если я указал на проблему появления злоумышленников и несоблюдения мораториев в отдельных странах, то Эйнштейна главным образом заботила необходимость сделать так, чтобы страны лишились возможности вести войну друг с другом, как только методы ведения войн станут грозить человечеству вымиранием.