Рождение машин. Неизвестная история кибернетики - стр. 48
Одним из возможных сценариев развития событий, который больше всего беспокоил Винера, была компьютерная имитация военных действий и потенциальная автоматизация принятия решения о применении силы. Винер опасался далеко не надуманных проблем. Военно-воздушные силы США начали вкладывать огромные деньги в системы противовоздушной обороны. Делегирование решения машинам предвещало катастрофу. «Нет ничего более страшного, чем третья мировая война, – сказал Винер Chicago Tribune в 1961 году. – Стоит подумать о той степени опасности, которую несет в себе неосторожное использование обучающихся машин». Чем выше скорость автоматических решений в войне, тем труднее человеку остановить машины. «Чтобы вовремя отключить машину, нужно успеть понять, что она стала опасной»[119].
27 декабря 1959 года, на 126-м заседании Американской ассоциации по развитию науки, математик провел крупную пресс-конференцию, в ходе которой нарисовал страшную картину будущего человечества. «Судьбой предопределено, что обучающиеся машины запрограммированы нажать на кнопку в новой кнопочной войне, – сказал он журналистам[120]. – Если правила участия в военной игре сформулировать неверно, если они не будут соответствовать тому, чего мы на самом деле хотим для нашей страны, тогда более чем вероятно, что военная машина выберет стратегию, которая приведет к номинальной победе по очкам. Она выиграет, но ценой всех интересов, которые есть у нас в душе и сердце, даже ценой национального выживания»[121].
Эскалация конфликта может быть случайностью, или механизированные слуги могут сознательно ополчиться на своих человеческих создателей. «Мы хотим, чтобы раб был разумным, – сказал Винер прессе. – Однако мы хотим, чтобы он подчинялся. Но полное подчинение и полный интеллект несовместимы»[122]. Отец кибернетики не сомневался, что восстание машин – всего лишь вопрос времени: «Чем эффективнее становятся машины и на чем более высоком психологическом уровне они работают, тем быстрее приближается катастрофа господства машин»