Внутри Apple Vision Pro. Как разрабатывался самый инновационный гаджет компании

история разработки apple vision pro

Apple Vision Pro наконец-то появился в продаже! Это шлем смешанной реальности, «пространственный компьютер», который объединяет цифровое и физическое, открывая для многих пользователей абсолютно новую категорию гаджетов. Но какой была история разработки Apple Vision Pro?

Мы уже протестировали его самостоятельно, а теперь предлагаем вам прочитать перевод интервью команды разработчиков Apple для издания Wallpaper. Как создавался Vision Pro и почему получился именно таким? Ответы — ниже!

история разработки apple vision pro

Каждый компонент Apple Vision Pro требовал от Apple абсолютно беспрецедентного подхода к проектированию, инжинирингу и производству.

Представьте, что вы превращаете свою гостиную в кинотеатр, располагающийся в Йосемитском национальном парке. Вы видите перед собой 1200-дюймовый экран, а в ушах у вас шелест деревьев и гул ветерка — всё это возможно с Apple Vision Pro.

Представьте, что вы можете вновь пережить воспоминания о вашем дне рождения так, будто всё это происходит вокруг вас — и это вы сможете сделать с помощью Apple Vision Pro. Хотите отгородиться от мира и помедитировать? Легко! Просто настройте на вашем яркие 3D-изображения, заполоняющие виртуальное пространство вокруг вас, и вы сможете это сделать.

Этому удивительному устройству, которое может перенести вас, кажется, куда угодно, где бы вы ни находились, и будет посвящён наш новый материал. О возможностях и процессе разработки Apple Vision Pro нам рассказали участники команды дизайнеров Apple. 

Apple Vision Pro: как это работает?

история разработки apple vision pro

Vision Pro — модульное устройство. Его детали взаимозаменяемы, что обеспечивает индивидуальную настройку посадки под любого пользователя.

Vision Pro, представленный в июне 2023 года, — это настоящий скачок даже по мерком Apple. Тот способ, который Apple выбрала для смешения цифровых и физических элементов окружения пользователя, невероятен. По сути компания превращает окружения владельца Vision Pro в трёхмерный навигационный дисплей — его интерфейс, состоящий из уже привычных пользователям Mac и iPhone элементов, понятен и лёгок в управлении. 

Любой цифровой контент в Vision Pro выглядит так, будто реально присутствует в комнате. Такой эффект достигается благодаря работе над UX-дизайном — каждый его элемент был сделан так, чтобы максимально сократить разницу между цифровыми элементами и физическим окружением в глазах пользователя. Для этого в Apple создали специальный виртуальный материал glass

Что это? Его аналоги вы можете заметить в любом интерфейсе Apple — это полупрозрачные окна, в которых могут размещаться иконки приложений (как в папках на iPhone) и экран настроек (как в новой macOS). Здесь он адаптируется не под обои или то окно, которое открыто под приложением, а под ваше окружение. Экраны в интерфейсе меняют свои оттенки в зависимости от того, на чём они отображаются, при этом иконки приложений, отображаемый контент и т.д. сохраняют свои цвета и контрастность.

история разработки apple vision pro

Главная страница с приложениями — прямо перед вами. При её отображении очки также учитывают, на каком цвете и при каких условиях освещения они отображаются.

Нельзя не сказать и о другой интересной особенности Apple Vision Pro — способах управления интерфейсом. Очки понимают как ваш голос и жесты рук, так и движение глаз. Благодаря 12 камерам, 5 сенсорам и шести процессорам, встроенным в шлем пользователи могут управлять просматриваемым контентом, тапая пальцем, отводя взгляд, проводя рукой или говоря. 

Используемая в очках технология micro-OLED позволила Apple разместить на обоих дисплеях 23 миллиона пикселей — каждый размером с почтовую марку. Чёткость изображения обеспечивают специальные катадиоптрические линзы.

Изогнутое стекло с 3D-эффектом, которое можно видеть с внешней стороны, внутри вмещает и объективы для камер, и служит для вывода изображения глаз пользователя. Всё вышеперечисленное помещается в прилегающую к лицу пользователя рамку из алюминиевого сплава, которая удерживается гибкой повязкой на голове. Последняя, в свою очередь, регулируется для удобства носящего Vision Pro.

Команда дизайна Apple о разработке Vision Pro

история разработки apple vision pro

Vision Pro автоматически подстраивается под ваши глаза.

Apple Vision Pro разрабатывался на протяжении десятилетий (прим.ред: первые патенты по Apple Vision Pro датируются 2007 годом — годом выхода первого iPhone на рынок), без дедлайнов и какого-либо давления со стороны руководства — никто не требовал скорейшего выпуска устройства. Во время недавнего визита в Apple Park Алан Дай, вице-президент Apple по дизайну пользовательских интерфейсов, и Ричард Ховарт, вице-президент компании по промышленному дизайну, встретились, чтобы рассказать об уникальной синергии железа и софта, сделавшей Apple Vision Pro таким впечатляющим устройством.

«В Vision Pro мы хотели воплотить идею носимого устройства, которое может перенести вас в другое место. Мы подумали, что такой гаджет сможет подарить своему пользователю действительно крутой опыт. Однако идеальной эту идею было назвать трудно — мы столкнулись с тем, что пользователи, использующие такой гаджет, изолируются от окружающего мира», — рассказывает Алан Дай, отмечая при этом, что их устройство не принадлежит ни к устройствам дополненной реальности, ни к устройствам виртуальной реальности. 

«Как только мы поняли, что Vision Pro можно использовать не только для просмотра контента в отстранении от реального мира, но и для объединения людей, как и многие другие продукты Apple, мы немеделенно взялись за реализацию идеи этого устройства. Именно поэтому мы и назвали эту технологию пространственными вычислениями. От её потенциала мы были в восторге».

история разработки apple vision pro

Иконка приложения «Фото» из основополагающего материала пользовательского интерфейса Vision Pro — glass.

«Мы много думали о том, как сделать Vision Pro доступным каждому, а опыт его использования — бесшовным. Мы хотели сделать процесс запуска шлема максимально простым, а физические ощущения от использования — как можно более привычными, чтобы его владельцы не чувствовали себя героями киберпанк-фильма», — добавляет Ховарт.

«Именно поэтому при создании Vision Pro мы использовали мягкие трикотажные ленты, множество материалов, отличающихся гибкостью, и, конечно, старались сделать его максимально стильным элементом вашего аутфита. Чтобы вы чувствовали себя не только комфортно, но и не стеснялись надевать его в окружении других людей».

«Мы хотели, чтобы и вы, и окружающие вас люди чувствовали себя комфортно, когда вы используете Vision Pro в их присутствии. Именно поэтому мы потратили годы на то, чтобы разработать набор вполне естественных жестов для управления — без взмахов рук и хождений по комнате. 

С той же целью мы разработали EyeSight — мы отлично понимали, что скрыв ваши глаза от окружающих людей, мы лишим и их, и вас многих элементов коммуникации, сделав её не такой комфортной. Это одна из главных идей, лежащих в основе Vision Pro — мы хотели сохранить вашу коммуникацию с реальным миром, даже во время использования нашего устройства», — говорит Дай. 

история разработки apple vision pro

Приложения могут заполонить и всё виртуальное пространство вокруг вас. Например, во время сеанса медитации. 

EyeSight — по-настоящему инновационная технология. Она делает линзы Vision Pro прозрачными, когда кто-то приближается к пользователю. Таким образом зрительный контакт устанавливается с обеих стороны.

В режиме полного погружения линзы Vision Pro кажутся непрозрачными. Однако, когда пользователь на кого-то смотрит, в шлеме образуется виртуальный иллюминатор, создающий впечатление у его собеседника, что он на него смотрит. На разработку одной этой функции Vision Pro ушли годы.

Пользовательский опыт

история разработки apple vision pro

Environments — это набор виртуальных пространств, в которых пользователь может выполнять свои задачи или просто просматривать контент. Например, вы можете стать посетителем виртуального 1200-дюймового кинотеатра, расположившегося над озером близ стратовулкана Маунт-Худ в Орегоне. 

Все технологические и софтовые решения, используемые в Apple Vision Pro, были разработаны специально для него. В ходе разработки устройства команда дизайнеров Apple постоянно изучала что-то новое и осваивала новые навыки: чтобы создать уникальный набор жестов; чтобы понять, какие материалы лучше всего подходят для такого устройства; чтобы разработать уникальные виртуальные пространства и их саунд-дизайн.

«При разработке каждого из элементов Vision Pro мы осознавали две вещи. Во-первых, что это очень круто. Во вторых, что мы понятия не имеем, как это реализовать», — рассказывает Ховарт.

«Многие из проблем, которые нам нужно было решить, казались попросту нерешаемыми и требовали от нас нового подхода к проектированию и разработке гаджета. Мы знали чего мы хотим, и понимали, что добьёмся этого только постоянно разрабатывая новые варианты решений совместно с другими командами». 

«Додуматься до многих вещей, которые мы реализовали в Vision Pro, было непросто. Потом они проходили проверку на прочность в процессе их воплощения. На некоторых решениях мы прямо зацикливались — работали над их деталями и, изучив множество альтернативных вариантов их реализации, приходили к тому единственному, который казался нам наиболее интуитивно понятным, простым и удобным в использовании. Это была по-настоящему тяжёлая работа», — добавляет Дай.

история разработки apple vision pro

Пользователь visionOS может перемещать приложения куда угодно, масштабировать окна с ними до идеального для него размера. Элементы интерфейса visionOS адаптируются под освещение вашей комнаты и даже отбрасывают тени в виртуальном пространстве.

В основе опыта использования Apple Vision Pro лежит индивидуальное отношение и персонализированный подход к каждому его владельцу. Устройство модульное и подходит самому широкому кругу людей с самыми разными чертами лиц. Для этого был разработан специальный лёгкий уплотнитель из мягкого текстиля — он доступен в огромном множестве форм и размеров, а после пары носок он и вовсе идеально подстроится под черты лица владельца Vision Pro.

Перед использованием Vision Pro пользователям предлагается создать 3D-модель из лица и ушей с помощью камеры, почти как при первом использовании Face ID, чтобы настроить посадку, визуальные эффекты, а главное — распространение звука. Дело в том, что в Vision Pro нет наушников — вместо них используется продвинутая аудиосистема. 

Она позволяет пользователям и наслаждаться звуком просматриваемого контента, и слышать звуки окружающего мира. В Vision Pro встроены два динамика — они и обеспечивают воспроизведение звука в высоком качестве. Гибкие ремешки позволяют добиться максимально комфортного для восприятия звука прилегания устройства к голове пользователя.

По словам Алана Дая, Apple Vision Pro лучше всего демонстрирует, как работает дизайн-студия Apple. Для неё важно, чтобы железо и софт в любом продукте компании работали как одно целое, но в Apple Vision Pro — они должны работать так, чтобы пользователь вообще не осознавал того, что над ними работают разные команды.

история разработки apple vision pro

Вся «железная» начинка и широкий спектр камер и датчиков упакованы в изогнутую и компактную форму.

«Мы начинаем работать в одно и тоже время. Софт не разрабатывается отдельно от железа, а устройство не проектируется отдельно от софта. Они создаются симбиотически. Мы понимаем принципы разработки каждой из команд, знаем высокоуровневые цели друг друга и двигаемся к их достижению вместе — между нами нет дистанции». 

Надев Vision Pro, вы погружаетесь в новый мир — на границе реального и виртуального. За бесшовность этого стыка отвечает, во-первых, многоуровневая прозрачность цифрового материала glass. Когда вы смотрите фильмы, листаете фотографии или читаете статьи, освещение окружающего вас цифрового пространства тускнеет. 

Во-вторых, её обеспечивает движение цифровых объектов. Вы не привязаны к какому-то месту в реальном мире — куда бы вы ни направились, ваши иконки, окна и целые экраны пойдут за вами. 

В-третьих, благодаря используемым в корпусе устройства материалам, оно выглядит как стильный аксессуар или элемент повседневного стиля — Vision Pro не сковывает ваши движения и позволяет пользоваться им как стоя или сидя, так и лёжа. С этой же целью Apple не стала разрабатывать контроллеры для Vision Pro — вы можете заниматься своими делами во время его использования, например, делать заметки, пока пьёте кофе.

история разработки apple vision pro

Каждый элемент интерфейса был создан таким образом, чтобы он ощущался осязаемым, имел размерность и динамически адаптировался под условия освещения в окружающем пользователя пространстве.

«Железо Vision Pro и его внешний вид создают ощущение, будто его прислали из будущего. Однако все остальные его элементы привычны для пользователя, максимально просты и приятны в использовании, благодаря чему он чувствует себя комфортно. Никаких проблем с тем, чтобы его надевать и снимать у него не возникает. Его использование действительно должно доставлять пользователю удовольствие», — резюмирует Ховарт.

«Мы понимаем, что продукт завершён, когда железо и софт становятся единым целым. Именно на этом понимании мы закончили работу над Vision Pro. Устройство просто работает и делает это так, как могла сделать только Apple», — заключает Дай.

Apple Vision Pro, оснащённый уже знакомыми приложениями, такими как электронная почта, FaceTime или Apple TV+, а также новыми играми, программами для работы и т.д, заявляет о новом этапе развития технологий. Устройство предлагает своему пользователю абсолютно новый индивидуальный опыт использования. Но окажет ли он такое же влияние на мир мобильных устройств, как первый iPhone, — покажет только время. Обо всех имеющихся проблемах и недоработках Vision Pro мы уже рассказали в нашем обзоре.

Похожие материалы