Artificial Servility

Эссе написано в ноябре 1996 г.

1

Что это такое — artificial servility? Такого словосочетания не было, пока я его не придумал. Это, в буквальном переводе, «искусственное рабство». Оно касается всего, на что способны в настоящее время широко распространяющиеся во всем мире электронные устройства, предназначенные для преобразования, передачи, хранения и last but not least отображения информации. Почему «рабство»? Потому, что во всем этом производстве (приносящем разным майкрософтам миллиарды), во всей массе компьютеров, во всех поколениях hardware и software, модемах, провайдерах, серверах нет ни следа разума. Нет ни капли интеллекта. Работают так, как рабы: по нашему приказу. Способны привести и в рай «сексуального удовлетворения», и в «тарпейский ад» [От «Тарпейская скала», с которой в Риме сбрасывали преступников и предателей]. Бредни не отличаются от информации, даже такой важной, как, например, равенство E=mc2. Всем этим объектам и субъектам, в конце концов, «все равно» в такой степени, которая не сравнима с тем послушным рабством, до которого можно было бы при необходимости довести не только человека, но любое животное, наученное реагировать в соответствии с правилами условных рефлексов, и даже безусловных (ибо существуют и такие).

2

Здесь читатель может сказать: ну и что? Разве такое безграничное подчинение нашим потребностям (посещение Кордовы или ознакомление с расшифрованными фрагментами узелкового письма кипу), такое ничем не ограниченное послушание всех компьютеров, их соединений, сетей и модемов, устройств печати, систем электронной почты — это плохо? И разве все это не приносило огромную выгоду, видимую не только и не прежде всего в том, что ПРОМЫШЛЕННОСТЬ ПРЕОБРАЗОВАНИЯ И ПЕРЕДАЧИ КАКОЙ-ЛИБО ИНФОРМАЦИИ дает большую прибыль, но в том, что она помогает нам в сборе, в упорядочивании, в написании, в распечатывании или визуализации всего, что может быть информацией и что надежно, пока какой-нибудь человек, вдохновленный типично человеческой злобой, не начнет насылать на этот всемирный порядок «ядовитые» вирусы в виде микропрограмм, способных разрушать данные до полного уничтожения, «информационной чистки» всего на жестких дисках, — сразу же (как снаряд, попадающий в цель) или с произвольно запланированной и установленной задержкой (как взрывное устройство с детонатором, установленным на «подходящий момент»)? Зло людям делают люди, поэтому они также могут, а часто любят, высылать или подкладывать, адресно или безадресно, не только взрывающиеся, но и «логические бомбы» (logic bomb). В то же время «сами по себе» электронные преобразователи, электронные разрушители, электронные media не могут ничего. Не могут «ничего» до такой степени, что обычная домашняя курица, даже слепая, которой «изредка попадается зерно», является Эйнштейном по сравнению с компьютером последнего поколения. Попробуйте увидеть эту разницу, замахиваясь молотком и на курицу, и на компьютер. Компьютер не дрогнет, пока вы его не искромсаете, а курица попробует хотя бы убежать. Мы же к этому раболепному послушанию так приспособились, так привыкли к компьютерно-сетевой безошибочности (исключая зависания и «пробки», вызванные единственно чрезмерным объемом информации, превышающим пропускную способность электронных соединений), что считаем такое положение вещей нормальным, желаемым и очевидным… с одним, но зато весьма существенным исключением. Именно сейчас мы убеждаемся, что все еще не высечена искра Artificial Intelligence, что уже пятьдесят лет инженерия связи и data processing бьются над проблемой AI и пока ничего полезного не создали. Кроме ужасно примитивных действий программ, которые способны различать, например, геометрические тела и цвета и которые могут (но опять без собственной инициативы) передвигать различные объекты и устанавливать их так, как мы хотим. Очевидно, что это не является каким-либо интеллектом. Это не является не только человеческим интеллектом, но даже собачьим. Кто-то скажет: но ведь у нас есть хранилища знаний, экспертные программы, имеются собрания специальных данных, позволяющих, например, геологам находить места, в которых под землей должна быть нефть, или собрания избранных данных (дополнительных исследований), позволяющих идти дорогой эвристических альтернативных разветвлений, чтобы поставить диагноз больному, чтобы указать оптимальный метод лечения и так далее. Имеются целые системы для управления и дирижирования, например, построением автомобилей или ракет (или бомб…) с помощью «промышленных роботов». Все это развивается дальше, но где в этом поступательном движении может появиться след разумности, интеллектуального внушения, «творческого вдохновения»? Мы уже достаточно научились тому, чтобы замещать интеллект, можем запускать симулирующие и оптимизирующие программы и программы, создающие «виртуальную реальность», но, к сожалению, все это — эффекты наших обходов «интеллектуальности» и творческого «воображения», все это подмены. Это похоже на «интеллектуальность» пищеварительного тракта, который вначале «пожирает пищу», «глотает» ее, «окисляет», и таким «интеллектуальным» способом обеспечивает организм энергией и химическими соединениями, необходимыми для поддержания жизни, а все обесцененные энергетически и химически «остатки» удаляются как экскременты. Да, выполнять что-то подобное неживые устройства мира электроники, подневольные человеческого разума, уже умеют, но ведь никто не считает, что употребление и переваривание котлеты есть доказательство интеллектуальности зубов, слюны, желудка и кишок.

3

Единственное объяснение причин отсутствия интеллекта, перемещенного из живого мозга в машины, отсутствия малейшего следа одушевления машин (не Deus exmachina [Бог из машины (лат.)], а хотя бы Animus ex machina [Душа из машины (лат.)]) звучит следующим образом.

НЕТ ОДНОГО ЕДИНСТВЕННОГО РАЗУМА. Нет также единственного вида интеллекта. Если будет создан Artificial Intelligence, а не какой-нибудь заменитель, более или менее удачно имитирующий интеллект, то уже тем самым, хотим мы того или нет, люди как конструкторы AI вступят в царство многообразия. Интеллектуальная система будет послушна — или не захочет быть послушной. А так как она будет понимать приказы, просьбы, воздействия, пожелания, то может послушаться или воспротивиться. Если такая система всегда и во всем будет готова слушаться, то тем самым продемонстрирует, что является безвольной и «не может иметь собственного мнения». То, что одни и те же научные, художественные, литературные и т. д. тексты разные люди, по-разному образованные, талантливые, то есть не конченые идиоты (о них не говорю здесь вообще), способны трактовать по-разному, интерпретировать, по-своему признавать важными или мелкими, взволноваться ими или разозлиться, чувствовать возмущение, безразличие или восторг, — все это, что я перечислил, и то, чего краткости ради приводить не стану, показывает множество реальных проявлений разумности, существование которой мы склонны признать. Если бы это было не так, то не смогли бы возникнуть исторические (или диахронические) и современные (или синхронические) разнообразные стили мышления в религиях, в философии и last but not least даже в инженерно-промышленном создании оружия или спасительных лекарств и терапевтических методов. Ибо, например, любая из существующих сейчас экспертных программ не придумает для нас нового метода лечения любого заболевания, так как программы совершенно не мыслят, а если б начали думать, то должны были бы думать разнообразно. Иными словами: создать искусственный интеллект — значит создать и поле свободы для интерпретации. Так называемая лингвистическая перформативность означает: любой человек, который способен пользоваться языком (понимая его, а также разговаривая на нем), вообще не должен и даже не может идеально однозначным способом артикулировать мысли, возникающие у него в мозгу. В таких малых масштабах «перформативность» просто означает, что мы говорим в меру свободно, а не только цитируем исключительно то, что выучили наизусть. Наизусть говорит граммофонная пластинка, или магнитофонная лента, или дискета. Мы можем изменять «направление бега мыслей, словами отображаемых». Чем лучше кто-либо знает данный язык, тем большая свобода артикулярного разнообразия преобладает в его разговорах, в иностранном же языке мы сильно ограничены. К чему я клоню этим будто бы развлекательным разговором? Единственно к тому, что, высекая интеллект из неживых устройств, мы окажемся в окружении множества проблем. О некоторых напомню.

4

В настоящее время устройствам передачи данных не хватает самоконтроля. Модемам все равно, что они передают на весь сетевой мир: изображения святых, или изображения голых задов, или формулы производства взрывчатых веществ. Им все равно, и от этого мы сейчас страдаем, так как люди имеют неприятную привычку пробовать фрукты, заказанные исключительно из-за их необычности либо вредные, даже убийственные. Но прошу взвесить: если в сетях возникнет блуждающий «искусственный интеллект», тем самым появится способность фильтрования, сдерживания, отсева и уничтожения информации, так как интеллектуальность, которая единокровна с разумностью, может и даже обязана быть также способной к введению цензуры для установления преград прохождению определенного рода информации. При этом окажется, что есть много различных интеллектов, и тем самым разные государства, разные режимы, разные веры, разные миропонимания, разные точки зрения начнут пользоваться способностью «нейтрализации или уничтожения» такой информации, на которую наложено табу и поступления или доступности которой для тех или иных адресатов они не желают. Сейчас, чтобы оградить детей от возможности просмотра электронно пересылаемых изображений (например, по TV), отец или мать могут установить «электронный намордник» на телевизор, исходя из того, что они (отец с матерью) узнают о программе, которая должна появиться. Если эту «приставку» не установят, то телевизор сам по себе какой-либо «добропорядочной цензуры» не создаст. Таким образом, окончательно «цензурируют» изображения или тексты отец с матерью, или дядя с тетей, или воспитатель, но не электронные устройства. Электроны ничто не шокирует. В то же время искусственный интеллект должен, а не только может, проявлять активность и избирательность. Его можно развратить, ему можно то или это отсоветовать, можно его дезориентировать, обмануть, отуманить или научить и объяснить ему что-нибудь. Фундаменталисты безмерно бы обрадовались, если б овладели AI! Тогда не надо было бы, как в Иране, запрещать установку спутниковых тарелок и приемников… Не так уж много прошло с того времени, когда Советы признавали запуск глобально вещающих спутниковых ретрансляторов как casus belli [Повод к войне (лат.)]. Я не придумал это специально для данного эссе. Уже нет Советов и еще нет искусственного интеллекта, но уверяю читателей, что вместе с его появлением наступит новая эра, насыщенная новыми, неизвестными опасностями. Не всех увлекает идея ГЛОБАЛЬНЫХ ВАРИАНТОВ ЦЕНЗУРЫ. Кроме того, я не говорю, что искусственный интеллект может нас взять за горло, но вводить в заблуждение, обманывать, сбивать с пути сможет. Это во-первых. Во-вторых, как нет одинакового у всех людей разума, так не может быть одинакового до тождественности интеллекта. Как существуют двигатели разной мощности, так же могут быть разной силы искусственные интеллекты. Не сразу же начнется построение машинных Эйнштейнов или — как в моем произведении — големов. Может быть, возникнут разные виды интеллекта, основанные на разных типах «характеров». Я лично считаю, что понятия «разумность» и «личность» потенциально разделены. Но такая потенциальная разделенность тоже не может обратиться добром и только добром.

5

Хочу заметить, что я все еще очень далек от примитивных мифоподобных сказок об «античеловеческом злобном интеллекте», таком, который будет загружать «роботов» человекоубийственными или бунтарскими намерениями. Не нужно сразу же все видеть в крайностях, которые мы легко умеем себе вообразить. Искусственный интеллект может принести и пользу, и вред. Таковой была и остается перспективная судьба любого технологического новшества, которое люди смогли разработать и пустить в действие.

От себя добавлю на полях (однако в соответствии с главным существом моего вывода), что сегодня в мире наблюдается увеличение количества чисто технологических достижений, которые сильно скоррелированы прогрессом увядания свободного творческого воображения. Это происходит не только на телевидении, но и в пластическом искусстве. Недавно увидел по телевидению (спутниковому) какие-то обугленные останки человеческих тел, но это не были жертвы пожара или человекоубийства, а «произведение современного искусства», как я услышал в динамике. Модной является визуализация science fiction, но, к сожалению, убожество воображения авторов сильно контрастирует с богатством техническо-визуальных приспособлений. С интеллектом внетехнологическим и вненаучным дело обстоит очень и очень плохо. Я сам когда-то писал SF и старался свести к минимуму нарушения основных и хорошо известных нам законов природы. Нельзя писать, что замужняя женщина откладывает яйца, а ее муж их высиживает. Но в фильме «Independence Day» во имя кинематографической кассы растоптано и разрушено колоссальное количество законов природы. Большинство событий в этом фильме противоречит очевидному. Например, огромные корабли extraterrestials [Инопланетяне (англ.)] не могут зависнуть над Манхэттеном потому, что при таком приближении к Земле окажется пройденной так называемая граница Роше, ниже которой неизбежен разрыв каждого достаточно большого тела гравитационными силами планеты. Не стоит и добавлять, что не может быть речи о какой-либо совместимости компьютеров с другой планеты из далекого созвездия с земными компьютерами. Уж скорее можно признать правдоподобными разговоры с коровой или жирафом без посредничества каких-либо компьютеров. Как говорится, кинематографисты пудрят нам мозги. А вспомнил я об этом потому, что человеческий интеллект возник, дабы мы могли познавать ИСТИНУ, что, впрочем, в конечном счете означает, что он тоже может ошибаться, может ЛГАТЬ либо быть обманут — иначе его не удастся развить. Интеллект является продуктом (сущностью) естественной эволюции, взбирающимся по ступеням «лестницы прогресса» (на Земле) до такого уровня языкотворчества, когда он способен родить математику. Тогда возникают противоречия между истиной и ложью, возникает логика, возникает царство новой, надживотной свободы и надживотных предубеждений, суеверий, мифов, бредней, с астрологией и сайентологией или иным сектантством во главе. Это все побочные эффекты развития интеллекта, и не думаю, что компьютерная безошибочность может как неотъемлемая часть сопутствовать искусственному интеллекту. Мир может существовать вообще без интеллекта, естественного или искусственного. В то же время надо осознать, что огромное разнообразие серверно-провайдерно-компьютерно-программно-дисковых приспособлений умножается и развивается прежде всего ради прибыли, ради продажи того, что сегодня рекламируется как самое совершенное, а завтра уступит место чему-то новому и будто бы лучшему. Отсюда же — прогрессирующая микроминиатюризация и развитие нанотехнологий производства процессоров. Но не хочу углубляться в технику. Конечно, погоня за прибылью вызвана необходимостью получения материальных благ. Но человеческий интеллект все еще не создает внечеловеческий интеллект («нечеловеческий» — звучало бы плохо). Интеллектуализация, интеллект, разум, сообразительность, мудрость — это понятия, потенциально великолепные и одновременно опасные. Именно это и только это я хотел сказать.

Заменить разум?

1

Все усилия по созданию искусственного интеллекта оказались напрасными, а ведь они предпринимаются уже около полувека. Развитие технологии мышления или понимания несколько «угасло», она оказалась отодвинутой на обочину прогресса, нацеленного на создание интеллектуального помощника человека (не для развлечения и не для того, чтобы нечто, скрытое от глаз, было способно имитировать интеллект и тем самым выдержать тест Тьюринга) посредством развивающейся, до сих пор без серьезных преград, технологии «рабства, перерабатывающего знаки» — то есть посредством компьютеров, способных к работе все более быстрой и все шире охватывающей области традиционно «исключительно человеческой» деятельности. Очередным новейшим течением, усилившим это направление, стала технология связи. Конечно, я имею в виду различного рода сети. Как я, кстати говоря, и надеялся (и не только я), из сети, стремящейся к глобализации (прежде всего, англоязычной), начинают выделяться системные части с признаками специализации. Проще говоря, научные учреждения соединяются с другими такими же учреждениями, банки с банками, биржи с биржами, и помимо этого «штатского» множества туманно вырисовываются системы связи, общим знаменателем которых является сфера военная, от штабов до подчиненных им центров. Вместе с тем подобные специализированные направления тоже могут заключать друг с другом сетевые союзы, например медицина с фармакопеей, информационные банки экспертных данных одной области с энциклопедическим хранилищем данных другой области, — в зависимости от того, насколько люди, в чьем ведении находятся сети и их «стрелки», посчитают это потенциально имеющим смысл и информационно (конструкторски, диагностически, анамнестически, экономически и т. д.) плодотворным.

2

Во всем этом весьма отчетливо проявляется, прежде всего, ускорение «внеразумного» развития. Я хочу сказать, что ни одна сеть, никакие ее петли, системы, их иерархические соединения, даже предназначенные «только» для игр и развлечений, по-прежнему «сами по себе» разума не имеют. Кажущуюся каплю «разума» кое-где можно обнаружить лишь благодаря тому, что специалисты просто научились создавать — насколько это вообще оказалось возможно — «заменители» разума, хотя бы частичные, используя найденные (пусть не полные и не совсем точные) соответствия между синтаксисом (формальным) и семантическим универсумом, то есть пространством смыслов. Таким образом, возникает то, что является центром споров об Artificial Intelligence, что создает два противоположных лагеря: тех, кто признает возможность синтеза «машинного» (необязательно только электронного) разума, и тех, кто эту задачу считает во веки (веков?) неосуществимой.

К этому и сводится (хотя этим не ограничивается) спор, ведущийся вокруг «китайской комнаты» и ее «обитателя», который, совершенно не зная китайского языка, «вместе с комнатой и дополнительной информацией» ведет себя (на выходе) так, словно он понимал то, что получал (по-китайски) на входе. Об этом я уже писал [В эссе «Тайна китайской комнаты» (апрель 1995 г.) из одноименного сборника (1996 г.), продолжением которого является «Мегабитовая бомба». В этом эссе Станислав Лем подробно анализирует мысленный эксперимент, предлагаемый специалистами по AI для подтверждения того, что возможна имитация понимания текста, которого, на самом деле, человек, его составляющий, совершенно не понимает. По мнению Лема (и он в этом не одинок), которое он подробно обосновывает на различных наглядных примерах, предлагаемый эксперимент вводит нас в заблуждение: «понимание» в нем не участвует вообще и даже нет речи о присутствии «сознания», а возможен ли искусственный интеллект — покажет будущее, но этот эксперимент с этим будущим ничего общего не имеет] и не намерен снова вдаваться здесь в суть этого спора. Одних аргументы обеих сторон убеждают, других — нет, и уже отсюда видно, до какой степени ответ на вопрос об искусственном понимании является также ВОПРОСОМ ВЕРЫ (в то, что дело обстоит именно так, а не иначе).