Не называйте это линзой: основатель Magic Leap Рони Абовиц демонстрирует загадочный фотонный чип светового поля, разработанный его компанией.
Нечто особенное происходит в обычной бизнес-зоне непримечательного пригорода неподалеку от Форт-Лодердейла, Флорида. Внутри, среди рабочих мест, ограниченных невысокими серыми стенками, тесно сгруппированных столов и пустых вращающихся стульев, невероятный 20-сантиметровый робот с другой планеты парит на уровне груди недалеко от ряда растений в горшках. Он по-стимпанковски мил и скрупулезно детализирован. Я могу обойти его вокруг и осмотреть с любой стороны. Могу присесть и взглянуть на его разукрашенное днище. Если я нагнусь ближе, так, чтобы мое лицо оказалось в нескольких сантиметрах от него, то смогу разглядеть тонкие трубочки и выступающий каркас. Я вижу отполированные завитки там, где металлические поверхности «истерлись». Когда я поднимаю руку, он приближается и выдвигает сияющую конечность, чтобы дотронуться до кончика моего пальца. Я протягиваю руку, разворачиваю его и отхожу подальше, чтобы рассмотреть робота издалека. Он все время жужжит и медленно вращается над столом. Он выглядит таким же настоящим, как лампы и компьютерные мониторы вокруг. Но он ненастоящий. Все это я вижу через шлем синтетической реальности. Умом я понимаю, что этот дрон — проработанная симуляция, но пока что глаза убеждают меня в том, что он действительно здесь, в обычном офисе. Это виртуальный объект, но во всей его трехмерной полноте не заметно ни следа пикселей или графических артефактов. Если я немного передвину голову, виртуальный дрон окажется напротив яркой офисной лампы, и можно будет заметить, что он слегка прозрачен, но даже эта уловка не мешает стойкому ощущению его присутствия. Это, конечно, одна из величайших перспектив виртуальной реальности — или вы телепортируетесь к волшебным вещам, или волшебные вещи перемещаются к вам. И с этим прототипом шлема, созданным широко обсуждаемой и ультразакрытой компанией Magic Leap, кажется, что инопланетный дрон действительно перемещен в обычный флоридский офис, — и он более реален, чем я мог вообразить.
Сквозь эти волшебные очки мне приходилось наблюдать и другие вещи. Я видел роботов размером с человека, которые проходили сквозь настоящие стены комнаты. Я мог стрелять в них вспышками энергии из макета ружья, которое я действительно держал в руках. Я смотрел, как миниатюрные человечки сражаются на настоящей крышке стола, почти как в голографических шахматах из «Звездных Войн». Очевидно, эти человечки не были настоящими, несмотря на их фотографический реализм, но они действительно присутствовали — не только из-за того, что я их видел; я почти чувствовал их присутствие.
Виртуальная реальность, наложенная на настоящий мир таким образом, называется смешанной реальностью, или MR (mixed reality, — прим. Newочём). (Полупрозрачные очки позволяют вам видеть настоящее окружение.) Этого сложнее достигнуть, чем классической виртуальной реальности с эффектом погружения, или VR (virtual reality, — прим. Newочём), где вы видите только синтетические изображения, и из этих двух технологий MR во многом более технологична.
Magic Leap — не единственная компания, создающая технологии смешанной реальности, но на данный момент качество их визуальных образов превосходит все остальные. В частности из-за этого деньги льются во флоридскую бизнес-зону. Одним из первых инвесторов был Google, за ним последовали Andressen Horowitz, Kleiner Perkins и другие. За последний год руководители большинства главных СМИ и технологических компаний совершили паломничество в офис Magic Leap, чтобы испытать на себе их футуристичную синтетическую реальность. В начале этого года компания закончила, возможно, крупнейший C-раунд в истории: $793,5 миллиона. На сегодняшний день инвесторы влили в нее $1,4 миллиарда.
Эта поразительная сумма особенно особенно примечательна потому, что Magic Leap еще не выпустили бета-версию своего продукта даже для разработчиков. Немногие, кроме потенциальных инвесторов и консультантов смогли увидеть устройство в действии, и сочетание финансирования и загадки только подпитывали любопытство. Но чтобы действительно понять, что происходит в Magic Leap, нужно также осознавать, какая волна захлестнула технологическую индустрию. У всех главных игроков — Facebook, Google, Apple, Amazon, Microsoft, Sony, Samsung — есть целые группы, посвященные искусственной реальности, и ежедневно они нанимают новых инженеров. Только в Facebook над VR работают более 400 человек. Также существует около 230 других компаний, таких как Meta, Void, Atheer, Lytro и 8i, упорно работающих над аппаратным обеспечением и контентом для этой новой платформы. Чтобы полностью оценить вклад Magic Leap, вы действительно должны увидеть эту зарождающуюся индустрию: каждый шлем виртуальной и смешанной реальности, каждую технологию VR-камер, все инновации в использовании виртуальной реальности, бета-версии VR-игр, каждый прототип социального мира с виртуальной реальностью.
Чем я и занимался последние пять месяцев.
Тогда вы поймете, насколько существенными станут технологии виртуальной реальности и почему у предприятий вроде Magic Leap есть шанс стать одними из крупнейших компаний в истории.
Даже если вы ни когда не пробовали виртуальную реальность, вероятно, у вас есть образное представление о том, какой она будет. Это Матрица, настолько правдоподобная реальность, что вы не знаете, настоящая ли она. Это будет Метавселенная из разухабистого рассказа Нила Стивенсона «Лавина» 1992 года: городская реальность, настолько заманчивая, что некоторые никогда ее не покинут. Это будет Оазис из бестселлера 2011 года «Первый игрок, приготовьтесь»: виртуальная реальность размером с планету, центр работы и учебы. Виртуальную реальность описывали так долго и так подробно, что она, кажется, запаздывает.
Впервые я попал в виртуальную реальность в 1989 году. Еще до появления интернета я посетил офис в Северной Калифорнии, стены которого были увешаны неопреновыми гидрокостюмами с вышитыми проводами, большими перчатками, украшенными электронными частями и рядами модифицированных очков для плавания. Хозяин, Джарон Ланье, щеголяя светлыми дреддами до плеч, протянул мне черную перчатку и надел на мою голову самодельные очки, державшиеся на тканевых лентах. В следующее мгновение я оказался в совершенно другом месте. Это был неземной, похожий на мультфильмы мир из кубиков, не без сходства с вселенной Minecraft. Еще один аватар, Ланье, делил со мной этот маленький мир размером с большую комнату.
Мы вместе исследовали эту волшебную искусственную местность, которую Ланье создал несколько часов назад. Руками в перчатках мы могли поднимать и передвигать виртуальные объекты. Именно Ланье назвал этот новый опыт «виртуальной реальностью». Она была невероятно настоящей. Во время этого краткого визита я знал, что видел будущее. В следующем году я организовал первую действующую выставку (называвшуюся Кибертон), на которой были впервые представлены две дюжины экспериментальных VR-систем от американских военных, университетов и компаний Кремниевой долины. На протяжении суток в 1990 году, любой купивший билет мог опробовать виртуальную реальность. В то время качество VR-опыта было примитивным, но все равно неплохим. Присутствовали все главные элементы: наголовный дисплей, позиционирующие перчатки, многопользовательское социальное погружение.
Но появление VR на массовом рынке не было таким уж неизбежным. Оборудование стоило многие тысячи долларов. За последние десятилетия изобретатели смогли улучшить качество, но у них не получилось снизить цену.
Двадцать пять лет спустя явился самый неожиданный спаситель — смартфон! Его быстро растущий глобальный успех резко увеличил качество небольших экранов высокого разрешения и снизил их цену. Гироскопы и датчики движения, встроенные в телефоны, могли быть за копейки использованы в VR-оборудовании для отслеживания положения головы, рук и тела. И вычислительная мощность современного телефона сравнялась со старым суперкомпьютером, позволяя с легкостью проигрывать видео на небольших экранах. Повсеместное распространение дешевых экранов и чипов позволило подростку Палмеру Лаки собрать на коленке свой первый прототип VR-шлема и запустить кампанию на Kickstarter для Oculus Rift в 2012 году. И Rift дал сигнал, которого ждали многие мелкие предприятия. (Facebook купил компанию за $2 млрд в 2014 году.)
Все современные устройства VR, размещаемые на голове, появились благодаря удешевлению технологий. Наденьте практически любое устройство синтетический реальности, и вы попадете в мир, которому дали жизнь миллиарды телефонов. По прикидкам Ланье, участвовавшего в создании Microsoft HoloLens, в 1990 году нам понадобилось бы более $1 миллиона, чтобы достичь уровня даже самых примитивных гаджетов виртуальной реальности, основанных на телефонах, вроде Samsung Gear или Google Cardboard.
Одной из первых вещей, которые я уяснил из недавнего тура по передовой синтетической реальности, стало то, что виртуальная реальность создает следующую эволюцию интернета. Сейчас интернет — сеть информации. Он содержит 60 триллионов сетевых страниц, хранит 4 зеттабайта информации, ежесекундно передает миллионы электронных сообщений, и все это соединено секстиллионами транзисторов. Наши жизни основаны на этом интернете информации, мы работаем за счет него. Но то, что мы строим с помощью искусственной реальности, — интернет впечатлений. С VR- или MR-оборудованием вы делитесь впечатлениями. Вы сталкиваетесь с новыми впечатлениями, когда открываете волшебное окно в вашей комнате. Вы вступаете в обмен впечатлениями во время телеконференции с применением смешанной реальности. В значительной мере, все эти технологически достигнутые впечатления будут незамедлительно делиться и дополнять друг друга.
Во всех виртуальных мирах мне приходило на ум, что хотя каждое из этих окружений было ненастоящим, впечатления, которые я получал, были истинными. VR выполняет две важные задачи: во-первых, она создает мощное и убедительное чувство, которое обычно называют эффектом присутствия. Виртуальные ландшафты, виртуальные объекты и виртуальные персонажи кажутся реальными — вы не столько верите в это благодаря визуальной иллюзии, сколько чувствуете нутром. Это волшебно. Но вторая задача более важна. Технология заставляет вас присутствовать — так, как не могут плоские экраны — так что вы получаете настолько же аутентичный опыт, как и в настоящей жизни. Люди вспоминают свой VR-опыт не как то, что они видели, а как то, что произошло с ними.
Впечатления — новая валюта в VR и MR. Технологии вроде Magic Leap позволят нам создавать, передавать, оценивать, уточнять, персонализировать, приумножать, открывать опыт, обмениваться и перегружаться им. Этот скачок от создания, передачи и потребления информации к созданию, передаче и потреблению впечатлений определяет эту новую платформу. Как утверждает основатель Magic Leap Рони Абовиц, «нам предстоит путешествие во внутренний мир. Мы строим интернет присутствия и впечатлений».
Мы еще даже не начали пользоваться интернетом информации на 100%. И тем не менее готовы повторить это достижение с появлением синтетических реальностей. С платформой виртуальной реальности мы создадим Википедию впечатлений, потенциально доступную для кого угодно, когда и где угодно. Впечатления из путешествий — ужас на краю извергающегося вулкана, трепет при прогулке вокруг пирамид — когда-то бывшие роскошью для богачей (как книги в прежние времена), станут доступны для любого с VR-оборудованием. Или впечатления, которыми можно поделиться: маршировать с протестантами в Иране; танцевать с участниками фестиваля в Малави; как насчет смены пола? Впечатления, которые не испытывал ни один человек: исследовать Марс; прожить жизнь лобстера; вплотную посмотреть на собственное бьющееся сердце в реальном времени.
Вы видели многое в кино или на телевидении, или читали об этом в книгах. Но вы не проживали этого, не чувствовали этого вне своего разума, не испытали этого на своей шкуре. Кент Бай, автор подкаста «Голоса VR», взял более 400 интервью у людей, создающих VR, и видел почти каждый возможный существующий прототип VR. По его словам, «виртуальная реальность общается с нашим подсознанием так, как не делает ни одно другое медиа».
Самое сильное и полное чувство подсознательного присутствия, которое я испытал, случилось с системой Void, которая дебютировала на конференции TED в 2016 году. Она не так продвинута технологически, как Magic Leap, но сочетает лучшие имеющиеся в продаже части с изготовленным на заказ оборудованием, что помогает создать незабываемые впечатления. В течение нескольких часов я наблюдал за очередью людей, входящих в Void. Почти каждый пищал от восторга, кричал, смеялся, и, пошатываясь, просил еще. Я чувствовал себя так же; я был бы рад заплатить за часовое посещение.
Void вырос из балаганной магии, парка аттракционов и дома с привидениями. Ежегодно Кен Бретшнайдер, один из трех основателей, открывает интерактивный дом с привидениями в Юте, который привлекает 10 000 человек за два дня. Ему пришло в голову, что можно расширить интерактивность своего дома с помощью виртуальной реальности. Кертис Хикман, второй основатель, — профессиональный иллюзионист, разрабатывавший трюки для известных волшебников, а также продюсер визуальных эффектов. Третий, Джеймс Дженсен, начинал с разработки спецэффектов для фильмов и уникальных возможностей для парков аттракционов. Он пришел к идее наложить виртуальную реальность на физически присутствующую игровую площадку. Общим для троих стало их понимание того, что VR — новый способ заставить разум поверить в то, что нечто вымышленное реально.
Void располагается в большой комнате. Вы надеваете пятикилограммовый жилет, в котором располагаются батареи, вычислительный блок и 22 тактильных нашивки, которые вибрируют и встряхивают вас в нужный момент. Ваши шлем или очки с наушниками соединены с жилетом, так что вы можете ходить без провода. Не будучи привязанным, вы можете не бояться споткнуться о кабель, запутаться или отойти слишком далеко. Эта свобода увеличивает эффект присутствия в виртуальной реальности. Внутри вы участвуете в приключении в духе Индианы Джонса, которое, как кажется, происходит на большой территории. Иллюзия неограниченного пространства, или, как его описывает Хикман, «волшебного пространства, которое внутри больше, чем снаружи», достигается при помощи уловки, названной перенаправленной ходьбой.
Реальные миры
Реальности бывают разные: виртуальные, смешанные, дополненные. Давайте в них разберемся.
—Бланка Майерс
—Бланка Майерс
Виртуальная реальность (VR)
Полностью перемещает пользователя в другую локацию, которая целиком поглощает окружение пользователя, вне зависимости от того, сгенерирована ли она компьютером или записана на видео.
Дополненная реальность (AR)
В дополненной реальности — вроде той, в которую пользователя погружают Google Glass или Monocle, приложение Yelp для смартфонов, — поверх реального видимого мира накладывается цифровой контент.
Смешанная реальность (MR)
В технологиях вроде Magic Leap виртуальные объекты интегрированы в реальный мир и отвечают на воздействия с его стороны. Например, виртуальный мяч, находящийся под вашим столом, будет виден только если вы нагнетесь. В теории, в темной комнате смешанная реальность может стать виртуальной.
Например, при повороте на 90 градусов комната, видимая в очках виртуальной реальности, повернется лишь на 80 градусов. Вы не заметите разницы, но на каждом повороте VR будет урезать по 10 градусов, пока не направит вас от стены. VR может даже заставить ходить по кругу, хотя вы будете думать, что прошли полтора километра по прямой линии. Подобное происходит и при перенаправлении касания. Если в комнате на полке лежит один настоящий предмет, на дисплее может отображаться три — предметы А, В и С. Вы видите, как ваша рука поднимает предмет В, но система VR направит ее к единственному реальному в комнате предмету. Вы можете заменить предмет В, взяв предмет С, но в действительности вы поднимаете один и тот же реальный предмет.
Поразительно, как эти крошечные изменения в направлении заставляют поверить, что все, что вы видите — реально. Ступени могут показаться бесконечными, если они опускаются, пока вы поднимаетесь. Кстати, в определенный момент прохождения Void рушится прогнивший пол, по которому вы идете, и вы видите, слышите и всем телом чувствуете, как падаете на этаж ниже. Однако на самом деле пол опускается лишь на 15 см. Нетрудно представить себе комнату 18 на 18 метров с минимальным набором простых фигур, наклонных поверхностей и сидячих мест, и все это используется по нескольку раз на разных этапах, чтобы обеспечить многочасовые разнообразные приключения.
{ads}
Оказывается, смотреть — не значит верить. Мы используем все свои чувства для оценки реальности. В этом году большинство продаваемых комплектов VR оборудования дополнено динамическим бинауральным (т. е. 3D) аудио. Это больше, чем просто стереозвук, который неподвижен в пространстве. Для убедительности источник звука должен менять положение при повороте головы. Глубокое погружение подразумевает в том числе и ощущение движения, сигналы о котором поступают через внутреннее ухо. Если движение и звук не соответствуют картинке, человека укачивает. Качественная VR также включает в себя прикосновения. Джейсон Джеральд, профессор из Уотерфордского технологического института, написавший книгу про виртуальную реальность (она называется The VR Book), утверждает, что бóльшая часть эффекта присутствия в VR зависит от рук. Перчатки еще не готовы к продаже, поэтому производители оборудования используют простые управляющие устройства с несколькими удобно расположенными кнопками. Их положение отслеживается, так что с их помощью можно манипулировать виртуальными объектами. Несмотря на примитивность подобных устройств, они удваивают эффект присутствия. Тактильные ощущения, изображение и звук составляют неотъемлемую часть VR.
Хотя компания Magic Leap еще не достигла уровня погружения Void, она бесспорно является лидером в плане изображения: здесь лучше других создают иллюзию того, что виртуальные объекты существуют в действительности. Основатель компании Magic Leap Рони Абовиц — эксцентрик, идеально подходящий для роли создателя подобной сверхспособности. В детские годы, которые он провел в Южной Флориде, Абовиц увлекался научной фантастикой и роботами. Он стремился связать свою карьеру с роботами и получил степень в биоинженерии в Университете Майами. Еще будучи аспирантом, он основал компанию по производству хирургических роботов. До успеха компании единственным его доходом были $30 в неделю за создание карикатур для студенческой газеты. Большинство находят карикатуры Абовица скорее странными, нежели забавными. Он рисовал то, что приходило на ум — наброски инопланетных существ, дополненные крошечными надписями с секретными посланиями для подруг. Они не похожи на творения инженера. А для хорошей виртуальности, между прочим, необходимы как фантазия, так и физика.
Абовиц — человек крупного телосложения, он носит очки и много улыбается. Он уверен в себе, отзывчив и легок в общении. Но он лучится. Он полон идей. Переполнен ими. Одна идея порождает две новые. Ему сложно сдерживать их натиск, усмирять их быстрый поток. Как и в случае с его карикатурами, разговор может привести куда угодно. Большинство его идей объединяют физику и биологию. В своем профиле в Twitter Абовиц довольно точно описывает себя как «друга людей, животных и роботов». И на словах, и на деле он проявляет редкую щепетильность как к закономерностям в работе машин, так и к основам биологии. Если вы создаете роботизированные руки, которые помогут врачам резать живых людей, они должны подчиняться законам физики, биологии и разуму человека. Абовиц талантлив во всех этих сферах, и его роботы хорошо продавались. В 2008 году его компания Mako вышла на открытый рынок, а в 2013 она была продана за $1,65 млрд.
UX-команда компании Magic Leap, работающая над разработкой способов взаимодействия пользователя со вселенной смешанной реальности и вариантов погружения. Фото: Питер Янг
Компания Magic Leap использует двух роботов — Клика и Клака — для тестирования и калибровки прототипов своего оборудования. Фото: Питер Янг
Комната, где сотрудники Magic Leap часто проводят собрания, которые некоторые посещают дистанционно. Фото: Питер Янг
Миккель Грин, инженер по тестированию и метрологии из компании Magic Leap.
Этот успех привел к появлению новой идеи. Можно ли создать такой виртуальный коленный сустав, который поможет заменить реальный? Можно ли дополнить операцию на колено наложением виртуального сустава? Абовиц задумался над технологией, способной объединить виртуальные миры и сложную операцию в реальной действительности.
Одновременно с этим он приступил к созданию комикса.
Абовиц, глубоко неравнодушный к научной фантастике, создал целый мир на другой планете: летающие киты, люди, похожие на стрекоз, девушка, питомец которой наполовину обезьяна, наполовину летучая мышь, и атакующая армия роботов. Разбогатев на компании робототехники, он нанял компанию Weta Workshop для детальной реализации этого мира. Weta Workshop — это новозеландская компания, занимающаяся созданием спецэффектов, одним из владельцев которой является кинорежиссер Питер Джексон. Эта компания создала весь реквизит и спецэффекты для фильма «Властелин колец» и помогла придумать культуру существ на’ви в фильме «Аватар». Для Абовица здесь спроектировали его мир Hour Blue и внесли туда такие детали, как летающие киты и летучие мыши-обезьяны. Из комикса этот мир быстро превратился в прототип виртуальной реальности. Разве 3D с эффектом погружения — это не лучший способ побывать в инопланетном мире? Абовиц уже привносил смешанную реальность в медицину; это стало развитием его идей.
Для разработки этого погружающего мира Абовиц основал компанию Magic Leap. Логотипом стало его животное-талисман, кит в прыжке. Необходимо было собрать оборудование для создания смешанной реальности. К 2012 году на Kickstarter уже запустили кампанию Oculus и разрабатывались другие прототипы с похожей, основанной на смартфонах, технологией. Здесь Абовиц отошел от основного направления. Благодарю своему опыту в биомедицине он понял, что VR — это новейшая технология в мире, в которой человек является неотъемлемой частью оборудования. Для нормальной работы в виртуальной и смешанной реальности нужно использовать как биологические схемы, так и кремниевые микросхемы. Эффект присутствия, который ощущается в таком шлеме, создается не экраном, а нейрологией. Приемы вроде перенаправленного движения воздействуют на мозг в той же степени, как и на процессор NVIDIA. Абовиц считает искусственную реальность симбиотической технологией, соединяющей в себе машину и человека.
«Я понял, что, если дать телу и разуму то, чего они требуют, в ответ они дадут гораздо больше»
Искусственная реальность использует особенности нашего восприятия. Она с успехом проникает в человеческий мозг самыми разными способами, чтобы создать так называемую «цепь убедительности». При просмотре фильма мозг видит реальное движение в последовательности совершенно неподвижных изображений. Таким же образом можно взять изображения кита под разнообразными углами и представить их как 3D изображение, которое можно вывести на экран шлема и рассматривать с любой позиции. Даже если мы знаем, что этот предмет не существует — скажем, вместо кита у нас Годзилла — подсознательно мы ощущаем его присутствие как реальное.
Но если произойдет нарушение хотя бы в одной мельчайшей детали, это может испортить иллюзию присутствия на подсознательном уровне. Нечто, настолько элементарное, как беспокойство о том, чтобы не споткнуться о провод, может заронить зерно сомнения в наше бессознательное. Все может выглядеть реальным, но ощущения реальности не будет.
Следуя своей интуиции в использовании биологии человека, Абовиц попытался сделать дисплей искусственной реальности более симбиотическим. Экраны как у телефонов, которые используются в большинстве надеваемых на голову дисплеев, создают постоянную проблему: они помещаются прямо перед глазными яблоками. Если устройство генерирует иллюзию синего кита на расстоянии тридцати метров, ваши глаза должны фокусироваться на этом расстоянии. Но этого не происходит: глаза фокусируются на крошечном экране, расположенном на расстоянии двух сантиметров. Похожим образом, когда вы смотрите на виртуальную медузу, плавающую в пятнадцати сантиметрах от лица, ваши глаза не косят к носу, как это произошло бы в реальности, а смотрят прямо перед собой. Никто не осознает эту оптическую нестыковку, но при продолжительном использовании это отклонение, ощущаемое на подсознательном уровне, может стать причиной частого дискомфорта и ослабления «цепи убедительности». Решение Magic Leap — это оптическая система, создающая иллюзию глубины таким образом, что глаза фокусируются на том расстоянии, на котором расположен предмет, и будут сходиться или расходиться в зависимости от этого.
Тестируя прототип Magic Leap, я обнаружил, что он удивительно хорошо работает вблизи, на расстоянии вытянутой руки, чего нельзя сказать о многих других системах смешанной и виртуальной реальности, которыми мне доводилось пользоваться. Я также обнаружил, что можно без труда переключиться обратно на реальный мир, когда снимаешь с себя оптику Magic Leap — сделать это так же легко, как снять очки, — что также не всегда присуще другим системам. Это было естественно.
У Magic Leap приличная конкуренция. Microsoft сейчас продает разработки своего шлема смешанной реальности HoloLens. Эта технология уникальна (на данный момент) тем, что все устройство — процессор, оптика и аккумулятор — расположено в шлеме: оно действительно ни с чем не соединено. Другой стартап, Meta, выпустил MR-устройство, чья история, как и у Oculus, началась с кампании на Kickstarter. Гарнитура подключается к компьютеру, а SDK (Software development kit — комплект средств разработки, который позволяет специалистам по программному обеспечению создавать приложения для определенного пакета программ, программного обеспечения базовых средств разработки, аппаратной платформы, компьютерной системы, игровых консолей, операционных систем и прочих платформ — прим. Newочём) должны появиться на рынке этой осенью — скорее всего, задолго до Magic Leap.
В основе работы всех трех крупнейших MR-устройств лежат изображения, которые проектируются в поперечном направлении на полупрозрачный материал — обычно это стекло с покрытием из нанобороздок. Пользователь видит внешний мир через стекло, в то время как виртуальные элементы проектируются из источника света, расположенного с торца стекла, и затем отражаются в глаза пользователя с помощью нанобороздок, разделяющих пучки света. В Magic Leap утверждают, что их устройство уникально тем, что оно направляет световые пучки прямо в глаз, однако на данный момент компания отказывается объяснять это подробнее.
Как бы ни работал Magic Leap, его преимущество состоит в том, что не видно пикселей. У большинства надеваемых на голову VR-дисплеев наблюдается слабый «эффект решетки», который образуется из-за видимых линий, разделяющих пиксели. Виртуальные изображения Magic Leap, напротив, ровные и невероятно реалистичные. Но на самом деле качество дисплеев у всех устройств альтернативной реальности — как VR, так и MR — быстро улучшается. Каждый месяц увеличивается разрешение всех визоров и частота смены кадров, а динамический диапазон и цветовое пространство расширяются. Через двадцать лет, когда вы посмотрите на дисплей виртуальной реальности, сделанный по последнему слову техники, ваши глаза будут обмануты, и вам будет казаться, что вы смотрите через реальное окно на реальный мир. Он будет таким же ярким и четким, как то, что вы видите из своего окна.
Как только этот небольшой дисплей достигнет совершенства в плане реализма, он станет «королем» среди дисплеев. Если у близко располагающегося к глазам экрана есть хорошее разрешение, яркость, ширина и цветовое разнообразие, внутри он может визуализировать любое число виртуальных экранов любого размера. Пока я был в фотонных очках Magic Leap, я посмотрел фильм в HD на виртуальном киноэкране. Он был таким же ярким и четким, как мой телевизор с диагональю в 140 см. С помощью HoloLens от Microsoft я посмотрел футбольную игру в прямом эфире на виртуальном экране, находящимся рядом с окном браузера и еще несколькими другими виртуальными экранами. Я мог заполнить свой офис таким количеством экранов, какое мне было нужно, в любом, необходимом мне размере. Я мог кликнуть на экран, наложенный на что-либо в реальном мире.
Помимо прочего, в Microsoft хотят, чтобы в типичном офисе HoloLens заменил все разнообразие экранов устройствами, которые можно надеть на себя. В демоверсиях изображаются работники, передвигающие виртуальные экраны или кликающие на них для телепортации в 3D конференц-зал с десятками коллег из других городов. К моему удивлению, виртуальные экраны и виртуальные медиа органично вписались в виртуальную реальность и оказались удобными для использования. В Magic Leap команда разработчиков скоро полностью откажется от ПК в пользу виртуальных дисплеев. Основатель Meta Мерон Грибец рассказывает, что новые очки смешанной реальности Meta 2 в течение года заменят в его компании мониторы у ста работников. И теперь не так уж сложно представить, что такие очки также могут заменить небольшие экраны, которые все мы носим в карманах. Другими словами, эта технология может разом «свергнуть» ПК, ноутбуки и телефоны. Неудивительно, что Apple, Samsung и все остальные уделяют этому большое внимание. Вот так выглядят изменения в индустрии в большом масштабе.
Питер Джексон согласен. Режиссер большими шагами заходит в ярко освещенную солнцем комнату в своей киностудии в Веллингтоне, Новая Зеландия. На нем шорты, поэтому он похож на хоббита, сбежавшего из гримерной. Он невысокого роста, слегка полноватый, нос похож на луковицу, а на голове — гнездо из непослушных хоббитских волос. На его больших волосатых ногах нет обуви. Джексон рассказывает, что его не очень увлекает снимать фильмы в наше время — не из-за содержания, а из-за процесса. Он считает искусственную реальность нетронутой территорией для того, чтобы рассказывать истории и создавать новые миры. Джексон состоит в консультативном совете по Magic Leap, и его компания будет производить контент для нового устройства. «Смешанная реальность — это не дальнейшее развитие 3D-фильмов. Это нечто совершенно иное. Как только у вас получится создать иллюзию реальных объектов там, где захочется, вы сможете создать новые развлекательные возможности», — утверждает он.
Работа с первыми прототипами очков Magic Leap вдохновила Джексона.
«Я нахожу смешанную реальность намного более захватывающей, чем VR. Смешанная реальность не вырывает вас из этого мира. Наоборот, она добавляет в него элементы. Это очень гибкая система. Вы можете добавить совсем немного — одну небольшую фигурку, разговаривающую с вами с поверхности стола, — или можете заменить целую стену вашей комнаты небом и наблюдать, как плывут облака. Если вы наденете очки Magic Leap и посмотрите на Empire State Building, вы сможете увидеть, как его строили в начале 1930-х, — этаж за этажом, но в ускоренном темпе. Возможно во время прогулки по современным улицам Чикаго вы увидите проезжающих мимо гангстеров с пулеметами в руках. Это может быть формой образования, развлечения и туризма. Я думаю, что через десять лет устройства смешанной реальности вроде Magic Leap будут использоваться так же, как смартфоны, если не чаще»
Джексон сидит в мягком кресле и кладет свои босые ноги на кофейный столик. «Большинство научно-фантастических фильмов в той или иной форме содержит Magic Leap: будь то данные, которые можно двигать взмахом руки, голографический телефон или 3D-шахматы. Все это пребывает в нашем сознании уже давно. Как летающие машины. Но эти технологии, вероятно, превзойдут летающие машины».
Главный талант Weta заключается в том, что они могут сделать воображаемые миры правдоподобными (и захватывающими) благодаря вниманию к деталям. Блокбастеры с MR- и VR-мирами потребуют наивысшего уровня в умении конструировать миры. У зрителей будет свобода, чтобы передвигаться, заглядывать за обратную сторону предметов, задерживаться и рассматривать детали — это значит, что потребуется много усилий и навыков для сохранения «цепи убедительности» для всех предметов, являющихся частью этого мира.
Продолжение по ссылке...
Источник: Newочём