- •Препринт
- •Часть 1. Общие обзоры темы 6
- •Часть 2. Оценка вероятности глобальной катастрофы 201
- •Часть 3. Глобальные риски и новые технологии 374
- •Часть 4. Глобальные риски, связанные с природными катастрофами 545
- •Предисловие
- •Часть 1. Общие обзоры темы глобальных рисков Билл Джой. Почему мы не нужны будущему
- •Вернор Виндж. Технологическая Сингулярность
- •Введение
- •Типология рисков
- •Ник Бостром. Угрозы существованию: Анализ сценариев человеческого вымирания и других подобных опасностей.
- •Риски существованию
- •Уникальность проблемы угроз существованию
- •4. Классификация рисков существованию
- •5. Взрывы
- •5.1. Преднамеренное злоупотребление нанотехнологиями
- •5.2. Ядерный холокост
- •5.3. Мы живем в симуляции, и она выключается
- •5.5. Генетически сконструированный биологический объект
- •5.6. Ошибочное применение опасных нанотехнологий («серая слизь»).
- •5.7. Нечто непредвиденное
- •5.8. Катастрофы в результате физических экспериментов
- •5.9. Естественно возникшее заболевание
- •5.10. Столкновение с астероидом или кометой
- •5.11. Неудержимое глобальное потепление
- •6. Сужения
- •6.1. Истощение ресурсов или разрушение экологии
- •6.2. Сбившееся с курса мировое правительство или другое неподвижное социальное равновесие остановит технологический прогресс
- •6.3. Давление «вырождения»
- •6.4. Технологическая остановка
- •7. Скрипы
- •7.2. Сверхинтеллект с ошибкой
- •7.3. Глобальный репрессивный тоталитарный режим
- •7.4. Нечто непредвиденное1
- •8. Всхлипы
- •8.1. Наш потенциал и даже наши базовые ценности разъедаются развитием в ходе эволюции
- •8.2 Уничтожение внеземной цивилизацией
- •9.2 Парадокс Ферми
- •9.3 Эффекты наблюдательной селекции
- •9.4 Рассуждение о Симуляции
- •9.5 Когнитивные искажения
- •9.6 Оценка собранных данных
- •10. Рекомендации, касающиеся стратегии и этики
- •10.1. Поднимать известность проблемы рисков существованию
- •10.2 Создать структуру для международных действий
- •10.3 Сохранять готовность к превентивному действию в качестве последнего средства
- •10.4 Регулирование скорости развития технологий
- •10.5 Программы, направленные на прямое уменьшение конкретных угроз существованию
- •10.6. Максипок: эмпирическое правило для этичных поступков
- •Выражения признательности
- •Приложение: очерк эволюционного «всхлипа»
- •Библиография
- •Елиезер Юдковски. Когнитивные искажения, влияющие на оценку глобальных рисков
- •Введение
- •1. Доступность информации
- •2. Когнитивные искажения, связанная со знанием «задним числом».
- •3. Черные лебеди
- •4. Ошибочное включение лишнего элемента
- •5. Ошибочность рассуждений, вызванная эффектом подтверждения
- •6. Якорение, настройка и загрязнение
- •7. Рассуждения, обусловленные аффектом
- •8. Пренебрежение масштабом
- •9. Калибровка и сверхуверенность
- •10. Апатия прохожего
- •Последнее предупреждение
- •Заключение
- •Рекомендуемое чтение
- •Библиография
- •Дэвид Брин. Сингулярность и кошмары
- •А.А. Кононов.Идеологические начала общей теории неуничтожимости человечества
- •Угрозы уничтожения человечества
- •Неуничтожимость как главная сверхзадача цивилизации
- •Качества неуничтожимой цивилизации
- •О необходимости разработки теоретических основ решения задач неуничтожимости человечества
- •Робин Хансен. Катастрофа, социальный коллапс и человеческое вымирание
- •Алексей Турчин. Процессы с положительной обратной связью как основной механизм глобальных катастроф
- •Часть 2. Оценка вероятности глобальной катастрофы Ник Бостром1, Макс Тегмарк2. Насколько невероятна катастрофа судного дня?
- •Ник Бостром. Рассуждение о Конце Света для начинающих
- •Ник Бостром. Doomsday Argument жив и брыкается
- •Ник Бостром Доказательство симуляции
- •1.Введение
- •2. Предположение о независимости от носителя
- •3.Технологические пределы вычислений
- •4. Ядро доказательства о симуляции
- •5. Мягкий принцип равнозначности
- •6. Интепретация
- •7. Заключение
- •Введение: угрозы существованию и эффекты наблюдательной селекции
- •«Карманная» модель антропного искажения1
- •Обобщение модели
- •Антропное искажение: недооценка естественных угроз
- •Какие угрозы существованию подвержены антропной тени?
- •Антропные тени и риски физических экспериментов
- •Заключение
- •Приложение: словарь
- •Благодарности
- •Алексей Турчин. Природные катастрофы и антропный принцип
- •Введение
- •1. Антропный принцип. Эффект наблюдательной селекции. Результаты Бострома и Тегмарка
- •2. Природные катастрофы
- •3. Применение антропного принципа для анализа частоты природных катастроф
- •4. Нарушение устойчивости природных систем, находящихся на грани равновесия, в связи с человеческой деятельностью
- •5. Быстрая эволюция разума в периоды высокой интенсивности природных катастроф
- •6. Заключение
- •Приложение a. Плотность наблюдателей во вселенной, частота катастроф и антропный принцип
- •Литература:
- •Тоби Орд, Рафаела Хиллербранд, Андрес Сандберг. Проверяя непроверяемое: методологические вызовы в оценке рисков с низкой вероятностью и высокими ставками
- •Введение
- •Оценка вероятностей
- •3. Теории, модели и вычисления
- •4. Применение нашего анализа к рискам экспериментов на ускорителях
- •5. Заключение
- •Эдриан Кент. Критический обзор оценок рисков глобальных катастроф
- •Часть 3. Глобальные риски и новые технологии Eлиезер Юдковски. Искусственный интеллект как позитивный и негативный фактор глобального риска
- •1. Систематическая ошибка, связанная с антропоморфизмом
- •1.1: Широта пространства возможных устройств ума
- •2: Предсказание и устройство
- •4: Способности и мотивы
- •4.1: Процессы оптимизации
- •4.2: Наведение на цель
- •5: Дружественный ии
- •6: Техническая неудача и философская неудача
- •6.1: Пример философской ошибки
- •6.2: Пример технической неудачи
- •7: Темпы усиления интеллекта
- •8: Оборудование
- •9: Угрозы и перспективы
- •10: Локальные стратегии и стратегии большинства
- •11: Ии и усиление человеческого интеллекта
- •12: Взаимодействие ии и других технологий
- •13: Ход прогресса в области Дружественного ии
- •Роберт Фрейтас. Проблема Серой Слизи
- •Crn. Опасности молекулярного производства
- •М. Вассер, р.Фрайтас. Проект «Нанощит»
- •Алексей Карнаухов. Парниковая катастрофа.
- •Милан Чиркович, Ричард Каткарт. Гео-инженерия, пошедшая насмарку: новое частное решение парадокса Ферми
- •1. Введение
- •2. Макроинженерия и сценарий катастрофы
- •3. Миссия к центру Земли
- •4.Начало процесса вымирания
- •5.Применение сказанного к проблемам астробиологии
- •6. Культурологические и климатологические аспекты
- •7.Заключение
- •Ричард Керригэн. Следует ли обеззараживать сигналы seti?
- •А.В.Турчин. Глобальные риски, связанные с программой seti
- •1. История вопроса
- •2. Сценарий возможной атаки
- •3. Анализ возможных целей атаки
- •4. Возражения
- •П.Д. Смит. Кобальтовая бомба (отрывок из книги «Люди судного дня»)
- •Часть 4. Глобальные риски, связанные с природными катастрофами Владислав Пустынский. Последствия падения на Землю крупных астероидов
- •Уильям Нейпьер. Опасность комет и астероидов
- •1. Нечто вроде огромной горы
- •2.Как часто по нам бьют?
- •2.1 Ударные кратеры
- •2.2. Поиск околоземных объектов
- •2.3. Динамический анализ
- •3. Эффекты столкновения
- •4. Роль пыли
- •5. Наземная проверка?
- •6. Неопределённости
- •Майкл Рампино. Супервулканизм и другие катастрофические геофизические процессы
- •3. Вулканическая зима
- •4. Возможные последствия сверхизвержения для окружающей среды
- •5. Сверх-извержения и человеческая популяция
- •6. Частота сверхизвержений
- •7. Влияние сверхизвержения на цивилизацию
- •8. Сверхизвержения и жизнь во Вселенной
- •Арнон Дар. Влияние сверхновых, гамма-всплесков, солнечных вспышек и космических лучей на земную окружающую среду
- •1. Введение
- •2. Радиационные угрозы
- •2.1 Достоверные угрозы
- •2.2. Солнечные вспышки
- •2.3. Солнечная активность и глобальное потепление
- •2.4 Вымирание в результате солнечной активности
- •2.5 Излучение от взрывов сверхновых
- •2.6 Гамма-всплески
- •3. Угрозы от космических лучей.
- •3.1 Изменения магнитного поля Земли
- •3.2 Солнечная активность, космические лучи и глобальное потепление
- •3.3 Прохождение через галактические спиральные рукава
- •3.4 Космические лучи от недалёкой сверхновой
- •3.5. Космические лучи от гамма-всплесков.
- •4. Причины крупнейших массовых вымираний
- •5. Парадокс Ферми и массовые вымирания
Неуничтожимость как главная сверхзадача цивилизации
Наличие большого числа угроз существованию цивилизации ставит в качестве главной задачи, а скорее, с учетом масштаба и важности, – главной сверхзадачи – неуничтожимость цивилизации. Другие общецивилизационные сверхзадачи и задачи, такие как, продление человеческой жизни, избавление человечества от болезней, голода, глубокого социального неравенства (нищеты, бедности), преступности, терроризма – во многом теряют смысл и свой этический потенциал, если не решается главная сверхзадача – неуничтожимость цивилизации. Игнорирование этой сверхзадачи – означает демонстративное равнодушие к судьбе цивилизации, к судьбе будущих поколений и таким образом, лишает живущие поколения этического фундамента в виду имморализма и жестокости (по отношению к будущим поколениям, обрекаемым таким образом на гибель) подобного выбора.
Итак, какие же возможны пути решения этой главной сверхзадачи цивилизации.
Вообще говоря, сложившаяся практика отражения угроз предполагает нахождение решений по защите от каждой из них. Но количество и масштаб угроз уничтожения цивилизации, а так же принципиальная невозможность защититься от них иным путем, как только преодолеть зависимость судьбы цивилизации от тех мест, в которых эти угрозы существуют, позволяют сделать вывод, что относительно надежные (относительно других возможных решений, например, создания защитных оболочек или ковчегов) решения задачи неуничтожимости цивилизации могут быть получены только путем космической экспансии. С учетом же того, что во всей Вселенной, а возможно и во всем Мироздании, не существует абсолютно безопасных мест, задача спасения цивилизации состоит в стремлении к максимально распределенному существования сохраняющей единство цивилизации на максимально большом числе пространств с обладанием большими эвакуационными потенциалами в каждом из них.
Итак, развитие космической экспансии цивилизации должно идти по пути преодоления зависимости цивилизации от тех мест обитания, которые могут быть уничтожены. И первая задача в этом направлении – это преодоление зависимости человечества от условий жизни на планете Земля и от судьбы Земли. Она решается путем целенаправленной колонизации Солнечной системы. То есть путем создания технологически автономных колоний на всех планетах или их спутниках, где это возможно, и создания автономных, готовых к полной технологической независимости от Земли межпланетных станций.
При этом должен осуществляться постепенный вынос всех критических для судьбы цивилизации, а также опасных для экологии Земли производств за пределы нашей планеты и распределение их по Солнечной системе. За планетой Земля, постепенно должна закрепляться роль экологически чистой рекреационной зоны, предназначенной для отпусков и жизни после выхода на пенсию.
Можно предположить, что на решение этой задачи – создания технологически независимых от Земли колоний и выноса критических производств за пределы Земли может понадобиться около 1000 лет. Хотя история XX-го века, показала сколько неожиданных технологических сюрпризов может принести себе человечество только в течение каких-то 100 лет. И это при том, что в течение этих 100 лет его спокойному развитию мешали катастрофические по своим масштабам и последствиям 2 мировые и бесчисленные гражданские войны и кровавые конфликты. Возможно, технологические прорывы при мирной и целенаправленной деятельности позволят решать задачи преодоления зависимости цивилизации от судьбы Земли, Солнечной системы и далее в значительно более высоком темпе, чем это можно сейчас представить.
Попытаемся определить отдельные этапы возможной дальнейшей космической экспансии, которые будут означать значительное повышение неуничтожимости цивилизации.
После решения задачи преодоления зависимости судьбы человечества от судьбы Земли следующей в этом направлении должна стать задача преодоления зависимости судьбы цивилизации от судьбы Солнечной системы. Это задача должна будет решаться путем колонизации пространств на безопасном удалении от Солнечной системы. Ожидаемый срок осуществления (если не будет невероятных с современной точки зрения научно-технологических прорывов) десятки тысяч лет.
Далее должны решаться задачи преодоление зависимости судьбы цивилизации от судьбы отдельных внутригалактических пространств и от судьбы галактики Млечный путь и Метагалактики. Очевидно, что возможность решения этих задач будет определяться только возможностью появления новых непредсказуемых на сегодняшний день технологий.
Тоже касается и решения последующих задач, например, преодоления зависимости судьбы цивилизации от судьбы Вселенной. На сегодняшний день представляется, что решение такого рода задач будет возможно либо через контроль всех критических процессов во Вселенной, либо через обретение технологий перемещения в другие вселенные (если таковые существуют) или обретения технологий создания новых вселенных, пригодных в качестве новых резервных (эвакуационных) жизненных пространств цивилизации .
Абсолютную же гарантию безопасности и неуничтожимости цивилизации может дать только контроль над Мирозданием, если он в принципе достижим и возможен. Но именно к нему должна стремиться любая цивилизация в Космосе, чтобы быть полностью уверенной в своей неуничтожимости.
Предположим, что Человечество не единственная цивилизация, которая ставит перед собой сверхзадачу неуничтожимости. Что будет при встрече с другими цивилизациями, ставящими перед собой аналогичные задачи?
В этой точке рассуждений можно с высокой степенью уверенностью предположить существование в природе объективного закона, который можно назвать Законом этического фильтра.
Закон этического фильтра1: Развиться до уровня цивилизации, способной к космической экспансии в межзвездном и межгалактическом масштабе, могут только цивилизации с весьма высоким этическим потенциалом, не позволяющим им самоуничтожиться при обладании технологиями способными стать средствами массового уничтожения во внутрицивилизационных конфликтах.
Иными словами, цивилизации, не научившиеся себя правильно вести при обладании высокими технологиями, либо самоуничтожаются, либо уничтожаются, как и любые недостаточно развитые цивилизации, природными катаклизмами, потенциалы для преодоления которых они не успели обрести, возможно, не в последнюю очередь, по причине растраты сил и отведенного им времени на самоистребление (войны).
При двух и более ставящих перед собой цель неуничтожимости и прошедших этический фильтр космических цивилизаций, вероятно наиболее продуктивным путем их сосуществования может быть их постепенное единение в решении задач неуничтожимости всех прошедших этический фильтр цивилизаций.
Можно допустить возможность существования тоталитарных цивилизаций, способных обойти указанный фильтр, поскольку у них не было проблемы угрозы самоуничтожения в виду их изначального единства. Но как показывает исторический опыт человечества тоталитарные цивилизации (режимы) склонны к значительному подрыву собственного, условно говоря, человеческого потенциала в виду репрессивных механизмов на которых они держатся, и не способны к созданию эффективных стимулов прогрессивного развития, прежде всего технологического. То есть, они в принципе нежизнеспособны.
Поэтому возможные специфические принципы взаимодействия с подобными тоталитарными космическими цивилизациями должны будут отрабатываться при возникновении такого рода проблем, если станет понятно, что они реально могут возникнуть. Пока же можно относиться к возможности столкновения с подобными цивилизациями, которые могут оказаться враждебно настроены по отношению к человечеству, как к любой другой космической угрозе, возможность отражения которой будет определяться достаточностью необходимых для решения такого рода задач потенциалов цивилизации.
