Поскольку ассемблеры будут создавать объекты по точным спецификациям, непредсказуемости оптовой технологии можно будет избежать. Разработчики (будь то человеческий разум или ИИ) далее будут экспериментировать только тогда, когда проведение эксперимента быстрее или дешевле чем вычисление, или (более редкий случай), когда отсутствует базовое знание.

Системы ИИ с доступом к наномашинам многие эксперименты будут выполнять стремительно. Они разработают устройство за секунды, а воспроизводящиеся ассемблеры его построят без многих задержек (заказ специальных частей, их отгрузка и т. п.), которые являются бедой проектов сегодня. Построить экспериментальное устройство масштаба ассемблера, нанокомпьютера или живой клетки будет занимать лишь минуты, а наноманипуляторы будут делать миллион движений в секунду. выполнение миллиона обычных экспериментов одновременно будет легко. Таким образом, вопреки задержкам с экспериментированием, системы автоматизированного проектирования будут продвигать технологию вперёд с ошеломительной скоростью.

От прошлого к будущему, тогда, вероятный рисунок приближающейся способности выглядит примерно так. На протяжение целых временных эпох, жизнь продвигалась вперёд растянутым во времени, медленным темпом, который определялся эволюцией генов. Разум с языком подхватили темп, ускоренный гибкостью мимов. Изобретение методов науки и технологии ещё ускорило продвижение, заставив мимы эволюционировать быстрее. Рост богатства, образования и населения – лучшие физические и интеллектуальные инструменты, продолжили эту тенденцию ускорения на протяжение нашего века.

Автоматизация разработки ускорит темп еще больше. Автоматизированное проектирование улучшится, помогая людям-инженерам генерировать и проверять идеи быстрее, чем когда-либо. Преемники EURISKO сократят сроки проектирования, предлагая проекты и заполняя детали инноваций, вносимых человеком. С какого-то момента полностью автоматизированные системы проектирования станут двигаться вперёд сами по себе.

Параллельно, молекулярная технология разовьется и вызреет, чему будут помогать продвижения в автоматизированном проектировании. Тогда системы ИИ, построенные ассемблерами, дадут еще более стремительное автоматизированную разработку, развивая технологические идеи в темпе, устанавливаемом системами в миллион раз более быстрыми, чем человеческий мозг. Скорость продвижения технологии вперёд тогда ускорится огромнейшим скачком вперёд: за короткое время многие области технологии пододвинутся к своим ограничениям, установленным законом природы. Тогда продвижение в этих областях остановится на очень высоком уровне достижений.

Эта трансформация – головокружительная перспектива. За ней, если мы выживем, лежит мир воспроизводящихся ассемблеров, способных делать всё, что им говорят делать, без необходимости в человеческом труде. За ней, если мы выживем, лежит мир с системами автоматизированного проектирования, способными направить ассемблеры создавать устройства, на пределе возможного, близко к конечным границам технического совершенства.

В конечном счете, некоторые ИИ системы будут иметь и большие технические способности и социальные способности, необходимые, чтобы понимать человеческую речь и желания. Если ей дать достаточно энергии, материалов и ассемблеров, такая система могла бы вероятно называться «машиной-джином» Она произведёт всё, что вы просите, арабская сказка и "О чем вы просите, это произведет, Аравийская легенда и универсальный здравый смысл подсказывают, чтобы мы воспринимали опасности таких машин создания действительно очень серьезно.

Появление решающих крупных достижений в техническом и социальном ИИ займёт годы. Как сказал Марвин Мински, "умеренно "умеренноинтеллектуальные машины ближайшего будущего обещают только давать нам богатство и комфорт неустанных, послушных и недорогих слуг." Большинство систем, называемых ИИ, не думают и не учатся, они являются только грубой выжимкой из знаний и умений экспертов, сохраненных, упакованных и распространяемых для консультаций.

Но прибудет и подлинный ИИ. Удерживать его вне наших ожиданий означало бы жить в мире фантазии. Ожидать ИИ – ни оптимистично, ни пессимистично: как всегда, оптимизм исследователей – пессимизм технофоба. Если мы не готовимся к их прибытию, системы социального ИИ могли бы поставить серьёзную угрозу: подумайте об ущербе, причиняемом всего лишь человеческим интеллектом террористов и демагогов. Подобным образом системы технического ИИ могли бы дестабилизировать мировой баланс в военной сфере, давая одной стороне неожиданное и огромное преимущество. С надлежащей подготовкой, однако, искусственный интеллект мог бы помочь нам строить будущее, которое работает – для Земли, для людей, и для продвижения интеллекта во вселенную. Глава 12 подсказывает подход как часть более общего вопроса управления трансформацией, которую принесут ассемблеры и ИИ.

Зачем нужно обсуждать опасности сегодня? Потому что уже не слишком рано начать разрабатывать институты, способные иметь дело с такими вопросами. Технический ИИ появляется сегодня и каждое его продвижение вперёд ускорит гонку технологий. Искусственный интеллект – всего лишь одна из многих мощных технологий, которыми мы должны научиться управлять, каждая из которых добавляет что-то к сложной смеси угроз и возможностей.

Глава 6. МИР ВНЕ ЗЕМЛИ

Новая космическая программа

Космос и усовершенствованная технология

Изобилие

Общество с положительной суммой

ЗЕМЛЯ – лишь маленькая часть мира, а остальная часть мира будет важна для нашего будущего. В терминах энергии, материалов и пространства для роста космос – это почти всё. В прошлом инженерные проекты как правило завершались завоеванием нового пространства. В будущем открытые границы космоса расширят человеческий мир. Успехи в ИИ и нанотехнологии будут играть решающую роль.

Чтобы понять космос как границу, для людей это заняло века. Наши предки когда-то видели ночное небо, как черный купол с крошечными искорками, светом, который посылают боги. Они не могли себе представить космическое путешествие, потому что они даже не знали, что космос существует.

Мы теперь знаем, что космос существует, но немного людей уже понимают его ценность. Едва ли это удивительно. Наши умы и культуры развивались на этой планете, и мы только начали воспринимать идею границы дальше неба.

Только в этом столетии такие мечтательные конструкторы как Герман Оберт и Роберт Годдард показали, что ракеты могли бы достичь космоса. Они были в этом уверены, потому что имели достаточно знаний о топливе, двигателях, емкостях и конструкциях, чтобы вычислить, что могли бы делать многоступенчатые ракеты. Однако в 1921 году в Нью-Йорк Таймз журналист в передовой статье упрекал Годдарда за идею, что ракеты могли бы летать через пространство без воздуха, от которого они бы отталкивались, и не далее как в 1956 году британский Королевский астроном фыркал, что "Космические путешествия – полная чепуха." Это лишь показало, что журналисты, пишущие передовицы и астрономы не теми экспертами, которых надо было спрашивать о космических аппаратах. В 1957 году первый спутник вышел на орбиту Земли, за которым последовал Юрий Гагарин. В 1969 году мир стал свидетелем высадки на Луну.

Однако мы заплатили цену за невежество. Так как пионеры космической технологии испытали недостаток в том, чтобы каким-то образом публично выставить свои доказательства, они были вынуждены утверждать отправные пункты снова и снова ("Да, ракеты будут работать в вакууме … Да, они действительно достигнут орбиты…"). Занятые защитой самых основ полётов в космос, у них было мало времени обсудить их последствия. Таким образом, когда Спутник поразил мир и привёл в замешательство Соединённые Штаты, люди были неподготовлены: на тот момент не было широких дебатов, чтобы сформировать стратегию для космического пространства.