Люди обладают замечательной способностью воспринимать мир вокруг себя посредством совместной работы пяти органов чувств. Любопытно, что по большей части мы, взаимодействуя с компьютерами, получаем информацию только через один из них — визуальное восприятие, и при этом едва ли можно сказать, что в дело идут все его возможности. Оставшиеся четыре — осязание, слух, вкус и обоняние — оказались оттеснены на обочину прогресса, несмотря на отлично развитую способность к считыванию информации. Сегодня в подавляющем большинстве случаев наше взаимодействие с электронной техникой сводится к тому, что мы смотрим на маленькие стеклянные пластины, располагая их прямо перед глазами и фокусируя на них все внимание. Это необходимо изменить. Мы должны лучше разобраться в работе всех пяти органов чувств, чтобы максимально использовать их потенциал. Актуальность этой задачи только возрастает, когда речь заходит о восприятии малозаметных и вторичных явлений, о работе органов чувств на самом краю осознанного.
Нам необходимо обратиться к исследованиям в области психологии восприятия, чтобы получить ответ на принципиальные вопросы: что способен ощутить человек? Какой разрядностью обладает наше восприятие? В каких сочетаниях могут работать органы чувств? Каковы пределы чувствительности? Как быстро человек способен активизировать свои органы восприятия и насколько быстро они адаптируются к различным типам информации? Насколько восприимчивость разнится между людьми? Все это необыкновенно интересно не только с научной точки зрения, но и с точки зрения развития полезных и новаторских волшебных объектов. В части III я опишу процесс создания волшебных вещей и те неординарные задачи, с которыми сталкивается разработчик: необходимость разобраться в устройстве человеческого восприятия, проблема размещения электронных сенсоров и подбор наиболее приятных и адекватных путей взаимодействия человека с дополненными объектами. Также речь пойдет о пяти «ступенях очарования» и общей схеме процесса разработки объектов, которые определят развитие следующего поколения Интернета вещей.
Начнем с простого эксперимента. Отложите эту книгу или свою стекляшку-ридер в сторону. Встаньте. Вытяните руки по швам. Смотрите прямо перед собой. Видите ли вы свои руки? Не очень. Начните медленно поднимать их до тех пор, пока они не окажутся в поле зрения. Всего-то несколько сантиметров, не правда ли? Угол обзора вашего периферийного зрения составляет 160°. Широта обзора — это удивительная особенность человеческого организма, которую волшебные объекты не задействуют, хотя могли бы.
Другой эксперимент носит название «эффект коктейльной вечеринки», хотя коктейли здесь совершенно не обязательны — достаточно любой многолюдной компании. В 50-х гг. прошлого века физиологи отметили удивительную способность человека отслеживать разные разговоры, которые одновременно происходят в группе численностью 20–30 человек. Вы, без сомнения, сами обладаете таким опытом. Только что вы обсуждали с приятелем, например, свою недавнюю поездку в Норвегию, как вдруг неожиданно ясно и четко слышите знакомое слово, произнесенное в другом конце комнаты. Это может быть имя известного или небезразличного вам человека, название книги, которую вы только что прочитали, или компании, в которой вы работаете, ваше хобби, спортивная команда, за или против которой вы болеете. Вы не слушали ту беседу сознательно, но именно это ключевое слово внезапно привлекает ваше внимание именно благодаря работе периферийного слуха.
У нас в руках оказывается нетронутый запас аудиовизуального восприятия. Насколько он велик? Как волшебные объекты могут использовать нашу способность видеть что-то, расположенное не прямо у нас под носом? Давайте для начала сфокусируемся на визуальном восприятии, раз оно является ключевым методом считывания информации. Благодаря научным исследованиям мы знаем, что наше поле зрения не делится строго на фовеальное (центральный фокус) и периферийное. Данные окулографии показывают, что наши глаза сканируют окружающий мир весьма примечательным образом. Они находятся в постоянном движении, перебегая с одного на другое, фокусируясь то тут, то там. Работа мозга состоит в том, чтобы собирать эти изображения в единое целое в режиме реального времени.
Поразительно, что при этом мозг постоянно фокусируется на лицах. В отличие от других животных человек в состоянии различить мельчайшие детали в лицах и мимике. Эта способность появилась в глубокой древности, помогая нам узнавать своих издалека, отличать друга от врага и говорящего правду от обманщика. Мы обладаем выдающейся способностью считывать информацию с малейших движений рта, глаз и других участков лицевой мускулатуры, мгновенно распознавать цвет глаз, изменения формы, шрамы, морщины и складки.
Все мы догадываемся об этом, но Герман Чернов, почетный профессор прикладной математики в МТИ и профессор статистики Гарварда, провел в 1973 г. весьма остроумный эксперимент, призванный подкрепить наше интуитивное понимание ситуации научными доказательствами1. Чернов попытался связать некоторую условную информацию с выражениями лица, чтобы выяснить, насколько лучше человек запоминает числовые данные, если они увязаны с мимикой. Для чистоты эксперимента ему была необходима такая информация, с которой испытуемые были бы заведомо незнакомы, поэтому он избрал результаты геологических замеров одной из шахт в Колорадо. Выбор был случайным — ни шахты, ни геология не имели никакого отношения к сути эксперимента. Отобрав несколько десятков замеров, он сгенерировал на компьютере изображения лиц, которые соответствовали каждому из них. Как вы уже, вероятно, догадались, изображения несколько разнились между собой — формой рта, разрезом глаз и т.д. Испытуемые оказались в состоянии различать выражения лиц так же легко и последовательно, как разницу между цифрами, и могли выстраивать связи между различными типами «лицевой информации», группируя их по тому или иному признаку.
Общий вывод, который можно сделать из эксперимента Чернова, состоит в том, что наша способность считывать выражения лица может быть использована для значительно более широкого спектра задач, нежели просто распознавание эмоций. Но каких результатов мог бы добиться Чернов, если бы скомбинировал механические навыки распознавания мимических движений с нашими навыками распознавания, толкования и отклика на эмоции? Например, один замер соответствует золотому самородку и закреплен за лицом с жадной ухмылкой, а другой, напротив, означает пустую породу и прикреплен к равнодушному лицу.
Люди обладают столь же развитым навыком распознавания звука, разных его типов, вариаций громкости и частоты, последовательностей и комбинаций. Что, если мы научимся задействовать эти способности более полно в создаваемых волшебных объектах? В то время как испытуемые Чернова обрабатывали большие массивы данных благодаря способности распознавать небольшие мимические движения, мы могли бы попробовать нечто аналогичное в области слухового восприятия — распределить части информации между большим набором звуков и мелодий. Мы уже задействуем эту способность — пусть весьма грубо и искусственно — в том, что касается именных рингтонов, закрепленных за определенными номерами наших записных книжек в мобильных телефонах. Здесь явно кроется большой нереализованный потенциал.
Сколько дел вы можете делать одновременно, используя разные органы чувств? Если вы сфокусированы на выполнении какой-то визуальной задачи, насколько можно загрузить слуховое восприятие? Можете ли вы слушать новости или спортивный матч, писать e-mail или рисовать и следить за детьми одновременно? Насколько эти способности выражены у разных людей? Зависит ли способность делать много дел одновременно от возраста?
Когда я был ребенком, мой отец брал меня с собой в канадскую глушь летом на неделю, чтобы порыбачить. Дорога от нашего родного Мэдисона была неблизкая, и мы всегда слушали аудиокниги и старые радиопостановки на кассетах из библиотеки. Среди последних моими любимыми были «Одинокий рейнджер» и «Тень». В то время я об этом не задумывался, но на самом деле ни мне, ни моему отцу не было сложно следить за повествованием или слушать музыку, потому что слух практически не задействован в процессе вождения. В то время как осязание и зрение у отца были полностью заняты, канал слухового восприятия оставался совершенно свободен.
Незадействованные или не полностью используемые каналы восприятия подкидывают нам новые возможности для создания волшебных объектов. Многие из тех, кто работает с информацией, совершенно не задействуют слуховое восприятие, так как в основном они заняты чтением и ведением записей, электронной перепиской, составлением финансовых моделей, правкой документов и презентаций. Какую дополнительную информацию они могли бы воспринимать на слух, не отвлекаясь от своей основной задачи?
Профессор Технологического института Джорджии Брюс Уокер разработал систему SoundScapes, которая позволяет использовать незадействованное слуховое восприятие для обработки информации. В основе работы системы лежит тот же принцип «лиц Чернова», однако вместо изображений Уокер использует набор звуков природы, за каждым из которых закреплен определенный тип данных о состоянии фондовой биржи.
SoundScapes начинает с общей звуковой темы леса, которая представляет из себя постоянный поток звуков, например, шум речного потока. Как только отслеживаемая информация претерпевает какие-то изменения, скажем, происходит скачок цен на золото, некоторые звуки в общей теме меняются, например, пение птиц становится громче. Если цена продолжает расти, система задействует новые звуки, делая их внутреннюю структуру естественно хаотичной, добавляя динамику во избежание монотонности. С падением цен система убирает звуки один за другим, а если на бирже происходит обвал, в динамиках звучит гром, за которым следует шум дождя2.
Однако даже эта система использует лишь толику нашей способности различать звуки и получать аудиальную информацию. Наиболее очевидный пример колоссальных возможностей этого аппарата — наше восприятие музыки, способность вычленять крошечные детали в строении мелодий, хоть это и требует некоторого навыка. Параллельно с обучением в старших классах и колледже я брал уроки вокала и пел в составе разных хоров: в хоре Sen-Olaf, хоре церкви Святой Троицы и хоре фестиваля Tanglewood. Последний коллектив выступает вместе с Бостонским симфоническим оркестром в музыкальном центре Tanglewood, расположенном в Леноксе, штат Массачусетс. Мне доводилось работать с величайшими дирижерами, такими как Сэйдзи Одзава, Саймон Рэттл и Джеймс Левин. Их музыкальный слух, как фокальный, так и периферийный, был потрясающим. Во время репетиции Сэйдзи, бывало, опускал руки, останавливая весь оркестр и хор — две сотни человек — на полном ходу посреди «Торжественной мессы» Бетховена затем лишь, чтобы сказать гобоисту: «Ваш си минор звучит резковато». Или, печально глядя в сторону моей секции теноров, произносил: «Вам следует четче произносить “к” в слове “кредо”». Или, обращаясь к альтам: «Вы опоздали на четверть в двенадцатом такте». Все эти тонкости и нюансы неразличимы не только для неподготовленного уха — даже профессиональные музыканты отнюдь не всегда могут выловить их в урагане звуков оркестра. Мораль истории в том, что человек может обрабатывать музыкальную информацию в огромных объемах, в том числе и на подсознательном уровне.
Осязание, так же как и слух, относится к числу каналов восприятия, мало задействованных в области технологий очарования. Поэтому я постоянно подталкиваю своих студентов из группы осязаемых медиа в МТИ к использованию тактильных интерфейсов в их проектах. Я уже упоминал куртку, которая может приобнять хозяина. Среди других идей, родившихся в аудитории: мобильный телефон, тяжелеющий по мере накопления голосовых сообщений, ботинки, направляющие ваш шаг в нужном направлении, дверная ручка, которая нагревается, если между людьми в комнате происходит конфликт, и кошелек с замочком, который становится туже по мере приближения к установленному вами лимиту расходов.
Потенциал неисчерпаем. Учитывая площадь нашего кожного покрова, сколько информации мог бы полный комплект одежды с тактильными сенсорами передать своему владельцу? Если мы можем научиться читать шрифт Брайля кончиками пальцев, сколько вообще информации мы можем пропустить через себя посредством простого касания и поглаживания?
И наконец, самый малоиспользуемый канал восприятия — обоняние. Запахи обладают большой властью над нами, они могут быть провокационными и обладать эмоциональным зарядом, но ими не так просто манипулировать.
Не так давно на одной конференции мне довелось пообщаться с женщиной, которая работает в Chanel — известном бренде в мире моды. Она рассказала мне о том, что сегодня проект почти любого помещения — от магазина розничных продаж до школ и больниц — включает в себя заранее рассчитанный запах.
Как при дегустации вин и проверке качества звука в аудиосистемах, аромат оценивают по перечню составных элементов: цветочные ноты, животные ароматы, растительные тона. В рамках одного эксперимента, проведенного в МТИ, исследователи создали ароматический распылитель, подключенный к Интернету. Конструктивно он мало отличался от тех ароматизаторов, которые висят в холлах отелей, за тем исключением, что был подключен к потоку данных с фондовой биржи. Появление положительной тенденции на рынке сопровождал запах мяты, а отрицательной — лимона. К сожалению, наши носы не в состоянии различать детали запахов так же точно, как наши глаза различают выражения лиц. «Умный» освежитель воздуха был не в состоянии передать нечто менее тривиальное, чем мятный запах или лимонный аромат. В этом масштабе невозможно отразить динамику изменений — мы плохо различаем сильный и слабый запах мяты. Другая проблема состоит в том, что, как мы все прекрасно знаем, человеку свойственно быстро привыкать к любому запаху. Поддержание его ощутимости в воздухе требует распыления огромных объемов ароматизирующего вещества. После нескольких дней эксперимента лимонно-мятный дух настолько въелся в стены лаборатории, что стал просто неистребим.
Разработчики и инженеры Mercedes-Benz, однако, сделали запах отдельной статьей фирменного стиля своих элитных автомобилей. Во многих моделях компании уже задействуют дополнительные возможности восприятия. Mercedes обивает кресла и рули воловьей кожей (осязание), делает вставки из каповой древесины в приборной панели (зрение), использует звукоизоляционные стекла и аудиосистемы объемного звучания (слух). Может ли процесс вождения стать более увлекательным, комфортным, сопровождаться более приятными звуками и даже ароматами? С точки зрения Mercedes — да. Для модели S-класса 2014 г. предлагается опция «Активная система освежителя воздуха, обеспечивающая его ионизацию, фильтрацию и ароматизацию». Разработчик системы Сабина Энгельхардт, футуролог по своему подходу к технологическим и социальным исследованиям, создавала ее в сотрудничестве с «обонятельным подразделением» компании, которое к тому моменту уже работало над концептом идеального «аромата салона» для автомобилей. Энгельхардт привела в команду профессионального парфюмера Марка фом Энде, и вместе они придумали ароматизатор, который встраивается в систему вентиляции салона и управляется с дисплея приборной панели. Вы можете выбирать из четырех ароматов: Freeside Mood (цитрусовый), Sports Mood (цветочный), Nightlife mood (коньяк и кожа), Downtown mood (мускусный)3.
Как мы знаем, энергия творчества нередко возникает из взаимодействия разнородных элементов и талантов. Так и творческий потенциал волшебных объектов нужно искать на пересечении, сочетании и взаимном умножении сил наших органов восприятия.
Возьмем пример из военной отрасли. Как-то раз мне довелось побеседовать с пилотом, налетавшим немало часов на военном вертолете Apache. Во время пилотирования он полагается отнюдь не только на зрение: «Я использую индикатор на лобовом стекле, чтобы владеть ситуацией, для навигации и выбора целей, для коммуникации я использую звукоизолированные наушники, система вооружений управляется набором кнопок слева, а для управления полетом я использую руки и ноги. В некоторых вертолетах специальные сиденья меняют свой наклон в зависимости от вероятного угла атаки противника»4. Пилот, таким образом, полагается на зрение, слух и осязание для коммуникации, ведения огня по цели и избегания опасности.
В будущем мы будем получать подсказки от похожих систем и больше задействовать наши пять чувств для приема и передачи сигналов. Подобно танцору или пилоту, информационный работник сможет чувствовать и коммуницировать при помощи всего своего тела. Потенциал таких интерфейсов огромен. Представьте, если бы мы могли полностью использовать наш язык, который, согласно моему эксцентричному другу Джарону Ланиру, автору книги «Вы не гаджет»[38] (You Are Not a Gadget), может контролировать восемь независимых параметров одновременно.
Разобраться в том, какие именно органы восприятия могут быть задействованы при использовании волшебных вещей, — это непростая задача, ведь человеку свойственно путать источники своих впечатлений, формируя комплексную картину мира. Нам известно, к примеру, что различные каналы восприятия влияют друг на друга и что нередко результаты их работы суммируются с общим знаменателем. Моя компания Interactive Factory помимо всего прочего занимается созданием мультимедийных выставок для бостонского Музея науки, Музея Рузвельта, Музея науки и промышленности в Чикаго и многих других. Нередко наши клиенты смотрят предварительную версию презентации, анимация в которой уже готова, а озвучка присутствует в черновом варианте — начитанный текст и приблизительный вариант музыки, которая должна в итоге стать основной темой. Клиент высказывает свое мнение и общие впечатления и несколько дней спустя смотрит презентацию снова. Визуальная составляющая не меняется, зато аудиодорожка наконец приведена в надлежащий вид. «Ого! — говорит клиент. — Что вы сделали с анимацией? Даже лучше, чем в прошлый раз! Цвета стали такими насыщенными. Мне очень нравятся все эти поправки». В таких случаях я просто улыбаюсь, благодарю клиента за комплимент, и он утверждает «улучшенный» вариант.
Я часто вспоминаю об этом, когда чувствую запах ароматизатора в отеле или слышу жизнерадостную музыку в магазине. Благодаря этим деталям обстановка в отеле кажется ярче, а упаковки в магазине более броскими, что само по себе подталкивает к покупке.
Использование особенностей человеческого восприятия для создания завораживающего эффекта обладает огромным потенциалом, и мы привыкли ожидать этого эффекта, находясь в искусственном окружении вроде парка аттракционов или ресторана, но и здесь есть свои ограничения. Я убежден, что многозадачность — это новая движущая сила нашего времени, новый навык, отшлифованный и в совершенстве освоенный поколением «нулевых». Современная молодежь приветствует внедрение многозадачных технологий волшебных вещей. Мои студенты пишут в Twitter, параллельно играют в компьютерные игры, смотрят телевизор, работают над рефератом и переписываются с тремя друзьями одновременно. Такой параллелизм особенно ярко проявляется на лекциях в МТИ. Тридцать студентов, и у каждого по ноутбуку. Как только я открываю новую тему, они заходят на сайт «Википедии», чтобы ознакомиться с деталями. Они просматривают видеоролики, чтобы лучше разобраться в сути проекта, или начинают рыскать в поисковике, чтобы побольше узнать о биографии изобретателя, чье имя упоминается во время лекции. Новые волшебные вещи должны задействовать многозадачность и способность воспринимать информацию через разные каналы одновременно.