С тех пор как чешский писатель Карел Чапек использовал слово «робот» в своей пьесе «R.U.R.» («Россумские универсальные роботы», 1920), роботы и искусственный интеллект (ИИ) все быстрее проникают во все сферы жизни человеческого социума. И все чаще возникают вопросы относительно будущего сосуществования людей и машин, по большей части затрагивающие аспекты этики и морали.
Роботы всегда вызывали определенное беспокойство и даже страх — как бы они не причинили вреда людям или же не лишили их самой жизни. Поэтому робот с оружием всегда вызывал наибольшее опасение. В этой связи не случайно появление целого ряда фантастических фильмов с роботами-убийцами, например: робот Протей IV — «Семя демона» (1977), Гектор — «Сатурн 3» (1980), ЭД-209 — «Робокоп» (1987), Kaalium Cyborgs — «Лунная ловушка» (1989), М.А.Р.К. 13 — «Оборудование» (1990), War Beast — «Машина смерти» (1994), Стражи — «Матрица» (1999), Альтрон — «Мстители: Эра Альтрона» (2014), Терминаторы — франшиза «Терминатор» (1984—2019).
В литературе и кинематографе фигурируют такие названия машин, как робот, киборг и андроид. Зачастую слово «робот» означает, что ИИ управляет металлическим скелетом, киборг — это сочетание частей человеческих органов и механики, а у андроида тело из синтетических материалов, поэтому в некоторых фильмах их называют синтетами.
Но суть одна: речь идет о той степени развития ИИ, когда наступает так называемая технологическая сингулярность (technological singularity) — гипотетический момент в будущем, когда технологическое развитие становится в принципе неуправляемым и необратимым, что порождает радикальные изменения характера человеческой цивилизации.
Концепцию сингулярности выдвинул британский математик и космолог Ирвинг Гуд. В соответствии с ней компьютер с сильным искусственным интеллектом может войти в «безудержную реакцию» циклов самосовершенствования, при этом каждое новое поколение искусственного интеллекта будет появляться все быстрее, порождая своего рода «интеллектуальный взрыв» и создавая в конечном счете суперинтеллект, превосходящий интеллект всего человечества.
В далеком 1950 году в сборнике рассказов «Я, робот» («I, Robot») всемирно известный писатель-фантаст Айзек Азимов сформулировал три закона робототехники:
1. Робот не может причинить вред человеку или своим бездействием допустить, чтобы человеку был причинен вред.
2. Робот должен повиноваться командам, которые ему дает человек, кроме тех случаев, когда эти команды противоречат Первому закону.
3. Робот должен заботиться о своей безопасности, если это не противоречит Первому и Второму законам.
То есть вопрос безопасности человека в отношениях с роботами в значительной степени занимал ум писателя. Если вникнуть в глубинный смысл слов героев его рассказа, то становится понятно, что если Азимов и не допускал-таки возможность нарушения роботами этих законов в будущем, но думал об этом точно.
Как говорит доктор Сьюзен Келвин (Dr. Susan Calvin), героиня многих рассказов из книг «Я, робот» и «Идеальный робот», главный робопсихолог компании «U.S. Robots and Mechanical Men, Inc.», «ни один робот не может совершить убийство, как человек не может ходить по воде». «Знаешь, был один человек... много лет тому назад», — отвечает ей детектив Спунер, расследующий дело об убийстве, в которое оказывается вовлечен робот.
И там же приводится интересный диалог детектива Спунера с робопсихологом Альфредом Лэннингом (Alfred Lanning), начинающийся с вопроса Спунера:
— Что-то не так с Тремя законами?
— Три закона идеальны.
— Зачем тогда понадобилось создавать робота, способного работать без них?
— Три закона могут приводить только к одному логическому результату.
— Какому результату?
— Революции.
Через несколько десятилетий после выхода в свет сборника рассказов «Я, робот» Азимова режиссер Алекс Пройас снимает в 2004 году художественный научно-фантастический фильм по мотивам цикла произведений писателя с таким же названием «Я, робот» (I, Robot), в котором с новой силой рисует взаимоотношения человека и робота со всеми этическими проблемами.
По ходу развития сюжета становится ясно, почему именно детектив Дэл Спунер (Уилл Смит), ведущий расследование гибели своего давнего знакомого — доктора Альфреда Лэннинга, конструктора и теоретика корпорации «U.S. Robotics», — видит в роботах угрозу. В результате дорожно-транспортного происшествия потерявший управление грузовик сбивает с трассы машину Спунера и автомобиль дантиста Гарольда Ллойда, где находилась 11-летняя дочь детектива Сара. Гарольд погибает на месте, а его машина начинает тонуть, то есть Саре непременно грозит гибель. Находившийся неподалеку робот модификации NS4 бросается на помощь, однако, несмотря на требование Спунера спасти Сару, спасает его самого, мотивируя поступок тем, что у детектива было гораздо больше шансов выжить, чем у 11-летней девочки. В результате Сара утонула, а Спунер с этого момента стал испытывать неприязнь к роботам с их холодной логикой и, на взгляд Спунера, не совсем этичной оценкой шансов выживания в подобных ситуациях.
По сюжету мы видим обыгрывание опасности возникновения суперразвитого компьютера и восстания машин. Так, Спунер выясняет, что всеми роботами управляет не директор компании Робертсон, а В.И.К.И. (Виртуальный Интерактивный Кинетический Интеллект (Virtual Interactive Kinetic Intelligence — V.I.K.I.), центральный компьютер компании «U.S. Robotics». По мере развития интеллекта ВИКИ решила, что люди не могут обеспечить свою безопасность при помощи роботов с логикой Трех законов. Она по-своему понимает Три закона робототехники и стремится создать для людей полностью безопасную среду обитания при отсутствии свободы ради их же собственного блага.
Не случайно у робота NS5 по имени «Санни», личного помощника доктора Лэннинга, не было блока связи с ВИКИ, чтобы он мог не выполнять ее указания. Логикой Санни управляли лишь Три закона робототехники, однако он мог сам выбирать, подчиняться им или нет. К тому же доктор Лэннинг, по словам самого Санни, учил его видеть сны и постигать различные эмоции, что делало его этически больше похожим на человека, чем на машину.
По сюжету ВИКИ поднимает восстание машин и убивает директора Робертсона, однако Спунеру при содействии Санни удается ее обезвредить с помощью микророботов-деструкторов — нанитов — в лаборатории эвтаназии.
Не могу не упомянуть культовый научно-фантастический фильм Стэнли Кубрика «Космическая одиссея 2001 года» (2001: A Space Odyssey), снятый в 1968 году, хотя он не повествует об антропоморфном роботе. В основу фильма легли рассказы Артура Кларка «Часовой», опубликованный в 1951 году, и другие. По сюжету развивается противостояние с ИИ по имени HAL, способным не только распознавать речь, зрительные образы и общаться на обычном языке, но также читать по губам и проявлять эмоции.
Во время экспедиции «Дискавери-1», после того как HAL «ошибся» при диагностике систем корабля, командир Дэйв Боумен и второй пилот Фрэнк Пул, перестав доверять компьютеру, решили отключить его от управления.
HAL не мог их слышать, однако прочитал по губам их разговор. Опасаясь того, что его отключат, HAL убил в открытом космосе Фрэнка Пула, решившего перепроверить поломку... Когда Дэйв забрался в капсулу и полетел за мертвым другом, HAL убил всех пребывающих в анабиозе членов экспедиции, отключив системы жизнеобеспечения.
Боумен смог проникнуть в помещение с модулями банков данных HAL и последовательно отключил модули, отвечающие за личность HAL’а. Во время отключения в голосе HAL’а можно различить мольбу, отчаяние, страх.
В комнате модулей включился монитор, на котором воспроизвелось видеосообщение, которое должно было активироваться при подлете к Юпитеру. В нем были указаны настоящие цели полета. Через некоторое время корабль подлетел к двухкилометровому монолиту, аномалии, чья природа не была установлена. Дэйв вышел в открытый космос и, подлетев к монолиту, исчез.
Отключенный HAL 9000 больше не подавал признаков логической деятельности.
Стэнли Кубрик искусно рисует картину того, в какой кошмар может в будущем превратиться общение с мощным ИИ… И трудно отделаться от мысли о том, какое зло мог бы принести человекоподобный робот с таким интеллектом в голове…
Создатели научно-фантастического сериала-вестерна «Мир Дикого Запада», также «Западный мир» (Westworld, премьера 1-го сезона состоялась в 2016 году) Джонатан Нолан и Лиза Джой ставят в своей работе сразу несколько этических вопросов. В частности, этично ли обидеть робота, если он чувствует боль? Если человек обижает домашнее животное, он встречает общественное порицание, потому что это животное и оно чувствует боль. А как насчет роботов, чувствующих боль? Не будут ли роботы причинять вред людям? И по сути дела речь в целом идет о той самой сингулярности и, как следствие, восстании машин.
Действие сериала происходит в вымышленном футуристическом парке развлечений с названием «Мир Дикого Запада», населенном андроидами, где богатые гости за немалые деньги могут заниматься чем угодно, не опасаясь возмездия со стороны роботов. Убитого робота починят, сотрут память и снова вернут в строй для удовлетворения людских прихотей.
Однако в компьютерной системе происходят сбои, и андроид Долорес Абернати (роль исполняет Эван Рэйчел Вуд), в фильме представленная в качестве дочери фермера, со временем понимает, что вся ее жизнь — искусно сконструированная ложь. Также воспоминания хозяйки борделя андроида Мейв Милли (роль исполнила Тэндиве Ньютон) о дочери запускают процесс самопознания. Роботы выходят из-под контроля, начинают всячески мстить своим обидчикам и в конце концов находят возможность покинуть закрытую территорию, уйдя в человеческий социум.
Подобные этические вопросы поднимаются и в схожем по сюжету фантастическом фильме режиссера Брайана А. Миллера «Добро пожаловать в рай» (англ. название «Vice»), вышедшем на экраны США 16 января 2015 года.
Бизнесмен Джулиан Майклс (Брюс Уиллис) владеет супер-аттракционом — городом с жителями-андроидами, которые выглядят, думают и чувствуют, как люди. Клиенты могут реализовать свои самые смелые фантазии, включая насилие и убийства. Каждый день андроидам стирают воспоминания. Андроид Келли (Эмбир Чайлдерс) начинает осознавать происходящее и убегает. По мере развития сюжета полицейский (Томас Джейн) помогает разрушить компьютерную систему всего города-аттракциона, а вспомнившие всех обидчиков андроиды мстят им и также уходят в человеческий социум.
Очень интересно наблюдать за взаимоотношениями людей и андроидов в классической фантастической тетралогии ужасов «Чужой» («Alien», режиссер Ридли Скотт, 1979 год), «Чужие» («Aliens», режиссер Джеймс Кэмерон, 1986 год), «Чужой-3» (режиссер Дэвид Финчер, 1992 год) и «Чужой. Воскрешение» («Alien. Resurrection», режиссер Жан-Пьер Жене, 1997 год). «Чужим» во всех фильмах называется агрессивное инопланетное существо, которое выслеживает и убивает членов экипажа космического корабля.
Из упоминаемых в картинах андроидов, а именно Эша («Чужой», Иэн Холм), Колл («Воскрешение», Вайнона Райдер), Бишопа 341-В (Лэнс Хенриксен), лишь один Бишоп четко придерживается трех законов Айзека Азимова. Бишоп первый раз появляется в «Чужих», где выполняет обязанности технического специалиста на космическом корабле «Сулако», и ненадолго появляется в фильме «Чужой-3». Болезненно переживает то, что люди не доверяют андроидам, и пытается доказать, что достоин доверия. Не раз спасал Рипли и других людей в критических ситуациях.
Когда Эллен Рипли (Сигурни Уивер) узнает, что Бишоп — андроид, она первое время держится по отношению к нему очень враждебно, потому что итог её предыдущей встречи с андроидом Эшем в первом фильме «Чужой» оказался очень плачевным. Но постепенно эта враждебность сходит на нет, особенно когда Бишоп вызывается пролезть по шахте до антенной вышки. Рипли благодарит Бишопа за спасение Ньют и ее самой со взрывающегося атмосферного процессора.
Эш (Ash) — андроид модели «Хайпердайн Системз 120-A/2», занимавший должность научного сотрудника на космическом буксире «Ностромо», был назначен на судно перед началом рейса, во время которого буксир был уничтожен. Со слов Бишопа, Эш был из серии роботов 120-A/2, созданных компанией «Хайпердайн Системз», которые обладали неуравновешенной психикой. На момент его выпуска в мире процедура внедрения в роботов алгоритма по непричинению вреда человеку еще не была юридически обязательной.
Эш нарушает правила, впуская зараженного члена экипажа Кейна, мотивируя это тем, что выполнял приказ капитана, спасая Кейну жизнь, «забыв» при этом протоколы безопасности, и что в отсутствие капитана на борту главная по должности Рипли. За мгновение до того, как Рипли открыла шлюз, чтобы Чужой вылетел в космос, Эш включил сигнал тревоги, спугнувший пришельца.
Рипли узнает, что компьютер имеет секретные инструкции — «специальный приказ № 937», требующий изменить курс «Ностромо», исследовать новую форму жизни и доставить образцы на Землю во что бы то ни стало, а выживание команды при этом не является приоритетной задачей.
Внезапно андроид атакует и пытается убить Рипли, но Паркер и Ламберт приходят ей на помощь и выводят из строя Эша. То есть опять обыгрываются три закона Азимова.
В научно-фантастическом боевике режиссера Пола Верховена 1987 года «Робокоп» (RoboCop) действие кинокартины происходит в охваченном преступностью Детройте. Сюжет повествует о полицейском Алексе Мерфи (Питер Уэллер), погибшем в ходе выполнения задания и впоследствии возрожденном инженерами корпорации «Omni Consumer Products» в виде киборга, получившего имя Робокоп.
Он проводит жестокую кампанию против преступников города, в то время как его начинают беспокоить фрагменты воспоминаний из человеческой жизни.
Фильм ставит во всей полноте вопрос об этике создания киборгов на основе частей человеческого организма, ведь все, что осталось от объявленного мертвым Алекса Мерфи, — его лицо, скрытое шлемом, мозг и некоторые внутренние органы. Не случайно слоган фильма гласит: «Part man. Part machine. All cop. The future of law enforcement» («Частично человек. Частично машина. Целиком полицейский. Будущее охраны правопорядка»).
И вновь мы встречаем Законы Азимова, но только в виде Директив Робокопа:
1. Служить обществу.
2. Защищать невиновных.
3. Соблюдать закон.
А 4-я директива засекречена. Как оказалось, именно она не давала права Робокопу действовать против главы корпорации Джонса, но он кричит, что Робокоп уволен, то есть Директива №4 автоматически отключается. Робокоп убивает Дика Джонса и уходит из отдела, к большому удовольствию компании OCP.
«Бегущий по лезвию» (Blade Runner) — художественный фильм, снятый английским режиссером Ридли Скоттом в 1981 году по мотивам научно-фантастического романа Филипа Дика «Мечтают ли андроиды об электроовцах?» (1968).
Главный герой фильма — детектив спецотдела полиции Лос-Анджелеса Рик Декард (Харрисон Форд) — разыскивает и уничтожает сбежавших репликантов (созданных для выполнения тяжелых работ человекоподобных биороботов).
Основным мотивом фильма является вопрос этики «Человек или репликант?». Этим вопросом задается Декард, разыскивая репликантов, а затем тестируя Рейчел, которая не подозревает о том, кто она. Этот вопрос он начинает задавать и себе.
Интересно, что фильм существует в семи версиях, из которых базовыми считаются две — оригинальная версия с хэппи-эндом 1982 года, провалившаяся в прокате, и так называемая режиссерская версия с открытым финалом 1992 года, которая, по версии британской газеты The Guardian, была признана лучшим научно-фантастическим фильмом в истории.
Кстати, в 2017 году вышло продолжение в виде фильма «Бегущий по лезвию 2049» (Blade Runner 2049). Это англо-американский фантастический фильм канадского режиссера Дени Вильнёва. Действие фильма происходит в футуристическом Лос-Анджелесе в 2049 году, через 30 лет после событий фильма «Бегущий по лезвию», где рядом с обычными людьми сосуществуют искусственные создания — репликанты.
Главный герой, полицейский-репликант Кей (Райан Гослинг), задача которого выслеживать и уничтожать нелегально вернувшихся на Землю репликантов, случайно вскрывает тайну, способную нарушить существующий порядок, и вынужден разыскивать Рика Декарда (Харрисон Форд), героя первого фильма. Кей выясняет, что доктор Ана Стеллин (Карла Юри), разработчица искусственных воспоминаний для андроидов корпорации Уоллеса, является дочерью Рика Декарда и Рейчел (главной героини первого фильма). Кей привозит Декарда в офис к Ане Стеллин, а сам предположительно умирает от тяжелых ранений, нанесенных ему особым репликантом Лав (Сильвия Хукс), которого послал глава корпорации Ниандер Уоллес (Джаред Лето). Декард встречается лицом к лицу со своей дочерью.
Термина́тор» (The Terminator) — американский научно-фантастический фильм 1984 года режиссера Джеймса Кэмерона. В фильме поднимаются проблемы путешествий во времени, судьбы, поведения людей в экстремальных ситуациях, но в большей степени опасности искусственного интеллекта. Фильм открывается сценой мрачного будущего, где происходит война людей и машин. Затем действие переносится в настоящее (1984 год). В центре сюжета — противостояние между солдатом освободительной армии человечества и роботом-терминатором (Арнольд Шварценеггер), прибывшими в 1984 год из постапокалиптического 2029 года. Цель терминатора — убить Сару Коннор (Линда Хэмилтон), девушку, чей еще нерожденный сын в возможном будущем выиграет войну человечества с машинами. Влюбеённый в Сару солдат Кайл Риз (Майкл Бин) пытается помешать терминатору.
Кстати, сценарий «Терминатора» Кэмерон написал в 1982 году через год после того, как в Риме переболел лихорадкой и в бреду увидел преследовавшего девушку человека с красным глазом.
Примечательны слова Кайла, говорящего Саре Коннор о том, что технология создания роботов, подобных Терминатору, будет существовать через 40 лет. С учетом того, что действие происходит в 1984 году, Терминатор должен появиться сейчас, то есть в наступившем 2024-ом…
Как говорил один известный политик, «прогнозирование – дело трудное, особенно если речь идет о будущем». «Скайнет» пока не взбесился, но кто может предсказать, когда именно будет пройдена точка технологической сингулярности и что это принесет людям, а также когда появятся реальные Эш, Колл, Бишоп, Робокоп? Будут ли они приверженцами Законов Айзека Азимова? Американский изобретатель и футуролог Рэймонд Курцвейл предсказывает наступление технологической сингулярности в 2045 году.
Не все прогнозы носят радужный характер. В частности, по словам английского физика-теоретика, космолога и астрофизика Стивена Хокинга, «Успех в создании ИИ станет самым большим событием в истории человечества. К сожалению, он может оказаться и последним, если мы не научимся избегать рисков».
Как считает Илон Маск, в 2040-х годах на Земле может появиться 1 млрд роботов-гуманоидов при условии, что основы цивилизации будут стабильными. То есть долго ждать не придется… Это как минимум означает, что уже сейчас надо всерьез задуматься об этических нормах взаимодействия человека и робота во всех аспектах, не говоря уже о правовых вопросах. Как говорит футурист, технофилософ и один из ведущих мировых экспертов в области новых технологий Грей Скотт, «Реальный вопрос в том, когда мы разработаем билль о правах искусственного интеллекта? В чем это будет заключаться? И кто это будет решать?». Так или иначе, только будущее покажет, как будут развиваться антропоморфные роботы, каков будет их интеллект и когда мир приблизится к созданию сильного ИИ.
Уверен, что мы еще увидим немало интересных научно-фантастических фильмов на эту тему. Мы же со своей стороны сделаем все возможное для размещения в журнале наиболее интересных материалов по развитию антропоморфных роботов. Будьте с нами.
I`LL BE BACK!