Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Рано утром WWDC (Всемирная конференция разработчиков Apple) 6 июня, это был пятый день после того, как я узнал, что болен COVID-19.

Итак, когда Кук появился в два часа ночи, он помахал «Еще кое-что», и мы с друзьями дружно подбодрили по эту сторону экрана:

Macintosh представила персональные компьютеры, iPhone представила портативные компьютеры, а Apple Vision Pro собирается представить пространственные вычисления.

Компьютер Macintosh положил начало эре персональных компьютеров, iPhone положил начало эре мобильного Интернета, а Apple Vision Pro положит начало эре пространственных вычислений.

Как энтузиаст передовых технологий, я приветствую новые игрушки, которые у меня появятся в следующем году, но как инвестор Web3, сосредоточенный на играх, метавселенной и ИИ, это признак новой эры, который заставляет меня содрогнуться.

Вы можете задаться вопросом: «Какое отношение обновление оборудования MR имеет к Web3?» Что ж, давайте начнем с диссертации Mint Ventures о метавселенной.

Наш тезис о метавселенной или мире Web3

Премия за актив в мире блокчейна исходит из:

  1. Нижнему слою сделки можно доверять, что приводит к снижению транзакционных издержек: **Подтверждение прав на активы и защита прав собственности на физические товары основаны на обязательном подтверждении прав со стороны органов государственной власти, а актив подтверждение права в виртуальном мире основано на «консенсусном доверии к тому, что данные не могут (или не должны) быть подделаны» и признании самого актива после подтверждения права собственности. **Хотя вы можете щелкнуть правой кнопкой мыши, чтобы скопировать и вставить, BAYC по-прежнему имеет цену дома в городах 18-го уровня Это не потому, что скопированные и вставленные изображения действительно отличаются от изображений метаданных NFT, а на Если предположить, что на рынке существует консенсус относительно «невоспроизводимости», активы могут быть секьюритизированы.
  2. Высокая степень секьюритизации активов дает премию за ликвидность
  3. Транзакция без разрешения, соответствующая децентрализованному механизму консенсуса, приносит «надбавку без разрешения»

Товары в виртуальном мире легче секьюритизировать, чем физические товары:

  • Из популярной истории оплаты цифровыми активами видно, что привычки людей платить за виртуальный контент не развивались в одночасье, но нельзя отрицать, что оплата за виртуальные активы проникла в жизнь людей. В апреле 2003 года с появлением iTunes Store люди узнали, что помимо загрузки песен на Walkman в Интернете, где процветает пиратство, есть также возможность покупать настоящую цифровую музыку для поддержки любимых авторов; в 2008 году Вышел App Store, разовая покупка. Он популярен во всем мире, а последующая функция покупки в приложении продолжает приносить доход Apple от цифровых активов.
  • Существует также серая линия травяной змеи, похороненная в изменениях модели оплаты игровой индустрии. Первоначальная версия игровой индустрии была Arcade Game.Модель оплаты в эпоху аркад была «плата за опыт» (аналогично фильмам), а модель оплаты в эпоху консолей была «плата за кассеты/диски» (аналогично фильмам). Началась продажа чисто цифровых игр. В то же время появились мифы о рынке цифровых игр Steam и внутриигровых покупках, которые позволили некоторым играм добиться дохода. История обновлений модели оплаты игр — это также история снижения затрат на распространение, от игровых автоматов до консолей, до платформ цифровой дистрибуции игр, где у каждого есть персональные компьютеры и мобильные телефоны, и самих игр, в которые уже погружены игроки. Общая тенденция такова. что стоимость технической дистрибуции становится все ниже и ниже, а аудитория все шире и шире, а игровые активы превратились из «части опыта» в «покупаемый товар». ** (Хотя небольшая тенденция последнего десятилетия превратилась в рост стоимости распространения цифровых активов из года в год, в основном это связано с низким ростом Интернета, высокой конкуренцией и монополией входов трафика на внимание .)

**Итак, что дальше? Торговые активы виртуального мира будут темой, на которую мы всегда настроены оптимистично. **

**По мере улучшения опыта виртуального мира время погружения людей в виртуальный мир будет становиться все больше и больше, что приведет к переключению внимания. Смещение внимания также приведет к смещению оценочной премии с сильной привязанности к сущностям на виртуальные активы. **Выпуск Apple Vision Pro полностью изменит человеческий опыт взаимодействия с виртуальным миром, что приведет к увеличению времени погружения в виртуальный мир и существенному улучшению опыта погружения.

Переосмысление полнолуния Apple Vision Pro: XR, RNDR и будущее пространственных вычислений Источник: @ FEhrsam

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

*Примечание: это наш вариант определения стратегии ценообразования.В стратегии премиального ценообразования бренд устанавливает цену в ценовом диапазоне, который намного выше себестоимости, и наполняет историю бренда и опыт в разнице между ценой и цена. Кроме того, ценообразование по себестоимости, конкурентное ценообразование, соотношение спроса и предложения и т. д. также являются факторами, которые будут учитываться при ценообразовании на товары, и здесь будет расширено только премиальное ценообразование. *

История и настоящее индустрии MR

Изучение XR (расширенной реальности, включая VR и AR) в современном обществе началось более десяти лет назад:

  • В 2010 году была образована компания Magic Leap. В 2015 году потрясающая реклама Magic Leap с прыгающим на стадионе китом произвела фурор во всем технологическом мире, но когда продукт был официально запущен в 2018 году, его освистали из-за крайне плохого впечатления от продукта. Компания привлекла 500 миллионов долларов в 2021 году при постинвестиционной оценке в 2,5 миллиарда долларов, в результате чего стоимость компании на 30 процентов меньше, чем сумма ее финансирования — 3,5 миллиарда долларов. В январе 2022 года сообщалось, что суверенный фонд благосостояния Саудовской Аравии получил контрольный пакет акций в результате сделки с акциями и долгами на 450 миллионов долларов, а фактическая оценка компании упала до менее 1 миллиарда долларов.
  • В 2010 году Microsoft начала разработку Hololens, выпустила первое устройство дополненной реальности в 2016 году, а второе — в 2019 году. Цена составляет 3000 долларов, но реальный опыт не очень хороший.
  • В 2011 году был выпущен прототип Google Glass. Первый продукт был выпущен в 2013 году. Когда-то он был хитом, и на него возлагали большие надежды. общий объем продаж составил всего несколько миллионов единиц. Корпоративная версия была выпущена в 2019 году, а новая бета-версия прошла полевые испытания в 2022 году, и реакция была посредственной. В 2014 году были выпущены платформа разработки Google Carboard VR и SDK. В 2016 году вышла Daydream VR, которая в настоящее время является наиболее широко используемой платформой виртуальной реальности для Android.
  • В 2011 году Sony PlayStation начала разрабатывать свою платформу виртуальной реальности. В 2016 году дебютировала PSVR. Хотя из-за доверия к PlayStation пользователи покупали с большим энтузиазмом, когда она была впервые выпущена, последующие отзывы были не очень хорошими.
  • В 2012 году была основана компания Oculus, которая в 2014 году была приобретена Facebook. Oculus Rift был запущен в 2016 году, и последовательно было запущено в общей сложности 4 модели.Основное внимание уделяется портативности и более низкой цене.Это устройство с относительно высокой долей рынка на рынке.
  • В 2014 году Snap приобрела Vergence Labs, компанию, основанную в 2011 году для разработки очков дополненной реальности, которые стали прототипом очков Snap Spectacles. Впервые он был выпущен в 2016 году, и последовательно было выпущено 3 обновленных устройства. Как и большинство упомянутых выше продуктов, Snap Spectacles поначалу привлекали большое внимание, люди выстраивались в очередь перед магазином, но последующих пользователей было мало. В 2022 году Snap закрыла аппаратное подразделение компании и переориентировалась на продукты для смартфонов. АР.
  • Примерно в 2017 году Amazon начала разработку очков дополненной реальности на основе Alexa, первые Echo Frames были выпущены в 2019 году, а вторая версия — в 2021 году.

Когда мы оглядываемся назад на историю XR, мы видим, что развитие и культивирование этой отрасли далеко превосходят ожидания всех участников рынка**, будь то технологический гигант с большими деньгами и множеством ученых, или умный и способный Финансирование сотен миллионов стартапов, ориентированных на XR. С момента выпуска потребительского продукта виртуальной реальности Oculus Rift в 2016 году все бренды виртуальной реальности, такие как Samsung Gear, Byte Pico, Valve Index, Sony Playstation VR и HTC Vive, отгрузили менее 45 миллионов устройств. Поскольку наиболее широко используемыми VR-устройствами по-прежнему являются игры, AR-устройства, которые люди готовы использовать изредка, не появлялись до выхода Vision Pro.По данным SteamVR можно примерно сделать вывод, что ежемесячно активные пользователи VR-устройств может иметь лишь несколько миллионов.

Почему устройства XR не набирают популярности? Опыт неудач бесчисленных стартапов и резюме инвестиционных институтов могут дать некоторые ответы:

1 оборудование не готово

Что касается зрения, **VR-устройства имеют более широкий угол обзора и ближе к глазным яблокам. Даже если это топовое устройство, пиксели на экране все равно трудно игнорировать. Только 4k для одного глаза или 8k для обоих глаз могут полностью погрузить вас. Кроме того, частота обновления также является основным элементом поддержания визуального восприятия. На рынке обычно считается, что для достижения эффекта против головокружения устройствам XR требуется 120 Гц или даже 240 Гц в секунду, чтобы поддерживать опыт, аналогичный реальному миру. Частота обновления при той же вычислительной мощности — это элемент, который необходимо сбалансировать с уровнем рендеринга: Fortnite поддерживает разрешение 4k при частоте обновления 60 Гц, но поддерживает только разрешение 1440p при частоте обновления 120 Гц.

Потому что по сравнению со зрительной интуицией слух кажется незначительным в течение короткого периода времени, и большинство VR-устройств не особо прорабатывали эту деталь. Но представьте, что в пространстве, независимо от того, находится ли это человек слева или справа, голос говорящего передается из макушки головы стабильно, что значительно уменьшит ощущение погружения. А когда цифровой Аватар в AR-пространстве закрепляется в гостиной, когда игрок идет из спальни в гостиную, громкость речи Аватара одинаковая, что ненавязчиво снижает реалистичность пространства.

Что касается взаимодействия, традиционные VR-устройства оснащены рукоятками управления, и, например, HTC Vive необходимо установить дома камеры, чтобы подтвердить статус движения игрока. Хотя в Quest Pro есть отслеживание взгляда, у него высокая задержка и средняя чувствительность, он в основном используется для улучшения локального рендеринга, а в реальной интерактивной работе по-прежнему преобладают дескрипторы. В то же время Oculus также установила на гарнитуру от 4 до 12 камер, чтобы подтвердить состояние сцены пользователя и добиться определенной степени взаимодействия с помощью жестов (например, в мире виртуальной реальности используйте левую руку, чтобы взять виртуальный предмет). телефон, а правый указательный палец пуст. Нажмите OK, чтобы начать игру).

Вес С точки зрения веса, качество оборудования, позволяющее человеческому телу чувствовать себя комфортно, должно составлять от 400 до 700 г (хотя по сравнению с обычными очками весом около 20 г это все равно гигант). Но для достижения вышеупомянутой четкости, частоты обновления, уровня взаимодействия, вычислительной мощности (производительности чипа, размера и количества), соответствующей его требованиям к рендерингу, и часов базового времени автономной работы вес устройства XR является трудным. процесс компромисса.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Подводя итог, если XR должен стать следующим поколением мобильных телефонов и новым поколением массового оборудования, необходимы устройства с разрешением 8k или выше и частотой обновления более 120 Гц, чтобы пользователи не чувствовали головокружение. Это устройство должно иметь более дюжины камер, время автономной работы 4 часа или более (необходимо снимать только во время обеденного/обеденного перерыва), не нагреваться или иметь небольшой нагрев, вес менее 500 г и цена всего 500- 1000 долларов США. Хотя текущая техническая мощь значительно улучшилась по сравнению с последней волной бума XR за 15-19 лет, все еще сложно соответствовать вышеуказанным стандартам.

Переосмысление полнолуния Apple Vision Pro: XR, RNDR и будущее пространственных вычислений

Но даже в этом случае, если пользователи начнут испытывать существующее оборудование MR (VR + AR), они обнаружат, что, хотя текущий опыт не идеален, это также захватывающий опыт, с которым 2D-экраны не могут сравниться. Но в этом опыте еще есть много возможностей для улучшения.Взяв в качестве примера Oculus Quest 2, большинство VR-видео, которые можно смотреть, имеют разрешение 1440p, что даже не достигает предела разрешения Quest 2 4K, а обновление Скорость намного меньше, чем 90 Гц. Тем не менее, существующие VR-игры имеют относительно плохое моделирование, и вариантов, которые можно было бы попробовать, не так много.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Источник: VRChat

2. Убийственное приложение по-прежнему не отображается

У «пока нет» приложения-убийцы есть исторические причины того, что оно попало в ловушку аппаратного обеспечения — даже если Meta изо всех сил пытается выжимать прибыль, гарнитуры MR стоимостью в несколько сотен долларов и относительно простая экология богаче, чем существующая экология и база пользователей достигла больших масштабов Игровая консоль по-прежнему не привлекательна. Количество VR-устройств составляет от 25 до 30 миллионов по сравнению с 350 миллионами для игр 3A (PS5, Xbox, Switch, ПК). Поэтому большинство производителей отказались от поддержки VR, а те несколько игр, которые поддерживают VR-устройства, также «между прочим, создают платформу VR», а не «только поддерживают VR-устройства». Кроме того, из-за проблем, упомянутых в первом пункте, таких как пиксели, головокружение, плохое время автономной работы и большой вес, использование устройств VR не лучше, чем у традиционных игровых терминалов 3A. Что касается преимущества «погружения», которое сторонники VR пытаются подчеркнуть, из-за отсутствия инвентаря оборудования разработчики, которые «между прочим размещают VR-оборудование», редко разрабатывают опыт и режимы взаимодействия специально для VR, что затрудняет достижение идеального. опыт.

Поэтому текущая ситуация такова, что когда игроки выбирают VR-игры вместо не-VR-игр, они не только «выбирают новую игру», но и «отказываются от опыта общения с большинством своих друзей», что часто бывает Сексуальность и иммерсивный опыт важнее, чем общение. Конечно, вы можете упомянуть VR Chat, но если копнуть глубже, то вы обнаружите, что 90% пользователей — это не пользователи VR, а игроки, которые хотят испытать общение с новыми друзьями в различных аватарах перед обычными экранами. Поэтому неудивительно, что самые популярные игры в программном обеспечении VR — это аудиоигры, такие как Rhythm Light.

Поэтому мы считаем, что для появления Killer App необходимы следующие элементы:

  • Значительные улучшения в производительности оборудования и общей детализации. Как упоминалось в «аппаратное обеспечение не готово», это не простая операция, такая как «улучшение экрана, улучшение чипа, улучшение динамика ...», а результат всестороннего сотрудничества чипа, аксессуаров, дизайн взаимодействия и операционная система — и это именно то, в чем Apple хороша: по сравнению с iPod и iPhone более десяти лет назад, Apple завершила совместную работу нескольких операционных систем устройств с десятилетиями накопления.
  • Накануне вспышки права собственности на пользовательское оборудование. Как и в приведенном выше анализе менталитета разработчиков и пользователей, проблема «курица или яйцо» заключается в том, что Killer App сложно появиться, когда MAU устройств XR составляет всего несколько миллионов. На пике «Легенды о Зельде: Дыхание дикой природы» продажи игровых картриджей в США были даже выше, чем владение Switch — это «отличный пример того, как зарождающееся оборудование становится массовым. Купите, чтобы испытать XR Люди с устройство будет постепенно разочаровываться из-за ограниченного опыта контента, рассказывая о том, как их головной дисплей превратился в пыль, но большинство игроков, которых привлекает Zelda, будут больше исследовать другие игры в экосистеме Switch.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Источник: Грань

  • А также унифицированные рабочие привычки и относительно стабильная совместимость обновлений устройств. Первое легко понять — с ручкой и без ручки, оно дает пользователям два вида поведенческих привычек и опыт взаимодействия с машиной, и это то, что отличает Apple Vision Pro от других устройств виртуальной реальности на рынке. Для последнего вы можете увидеть примеры в итерации аппаратного обеспечения Oculus — * значительное увеличение производительности аппаратного обеспечения в том же поколении ограничит пользовательский опыт *. Meta Quest Pro, выпущенный в 2022 году, имеет значительное улучшение аппаратной производительности по сравнению с Oculus Quest 2 (он же Meta Quest 2), выпущенным в 2020 году: разрешение Quest Pro было увеличено с 4K-дисплея Quest 2 до 5,25K, а цветопередача была улучшена контрастность, она увеличилась на 75%, а частота обновления была увеличена с исходных 90 Гц до 120 Гц. Добавление 8 внешних камер к 4 камерам Quest 2 для понимания внешней среды в виртуальной реальности, преобразования черно-белых изображений окружающей среды в цвет, значительного улучшения отслеживания рук и добавления отслеживания отделов черт лица и глаз. В то же время Quest Pro также использует «фовеальный рендеринг», чтобы сконцентрировать вычислительную мощность в том месте, куда смотрят глазные яблоки, и ослабить точность других частей, тем самым экономя вычислительную мощность и энергопотребление. Как упоминалось выше, Quest Pro намного мощнее, чем Quest 2, но, вероятно, менее 5% пользователей Quest Pro используют Quest 2. Это означает, что разработчики будут разрабатывать игры для обоих устройств одновременно, что сильно ограничит преимущества Quest Pro, что, в свою очередь, сделает Quest Pro менее привлекательным для пользователей. History Rhymes, одна и та же история повторялась снова и снова с игровыми консолями.Вот почему производители консолей обновляют аппаратное и программное обеспечение каждые 6-8 лет.Пользователи, купившие Switch первого поколения, не будут беспокоиться о последующих Switch OLED и других Аппаратное обеспечение несовместимо с недавно выпущенным игровым программным обеспечением, но пользователи, которые покупают серию Wii, не могут играть в игры в экосистеме Switch. Для разработчиков программного обеспечения, ориентированных на консольные игры, игры, которые они производят, не предназначены для мобильных телефонов, которые имеют огромную пользовательскую базу (350 миллионов против миллиардов) и зависимость от пользователей (простой дома вместо 24/7), требуют стабильной работы оборудования в пределах несколько циклов разработки, чтобы избежать чрезмерного отвлечения пользователей, или, как и у нынешних разработчиков программного обеспечения для виртуальной реальности, обратной совместимости, чтобы обеспечить достаточную пользовательскую базу.

Итак, может ли Vision Pro решить вышеуказанные проблемы? Как это изменит отрасль?

Переворот с Vision Pro

На пресс-конференции 7 июня был представлен Apple Vision Pro.Согласно анализируемой выше структуре «проблем MR, возникающих в аппаратном и программном обеспечении», можно провести следующую аналогию:

аппаратное обеспечение:

  • *Что касается зрения, *Vision Pro использует два экрана 4K с общим разрешением около 6K пикселей, что является второй по величине конфигурацией современных МР-устройств. Частота обновления может поддерживать до 96 Гц, поддерживается воспроизведение HDR-видео.По опыту техноблогеров, не только высокая четкость, но и практически не ощущается головокружение.
  • AuralOn*, *Apple использует пространственный звук в Airpods с 2020 года, что позволяет пользователям слышать звуки с разных направлений для достижения стереоскопического звучания. Но ожидается, что Vision Pro сделает еще один шаг вперед, используя «технологию аудиолучей», полностью интегрируя сканирование LiDAR в устройство, анализируя акустические характеристики (физические материалы и т. д.) в помещении, а затем создавая «пространственный аудиоэффект». который соответствует комнате, имеет направление и глубину.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

  • Взаимодействие С точки зрения жестов и отслеживания взгляда без каких-либо манипуляторов интерактивный опыт невероятно гладкий (согласно фактическому опыту измерения технологических носителей, почти невозможно почувствовать задержку, которая не только точность датчика и скорость расчета, а также введение прогнозирования пути взгляда. Будет представлено ниже.)
  • С точки зрения времени автономной работы, время автономной работы Vision Pro составляет 2 часа, что в основном такое же, как у Meta Quest Pro (не удивительно, и это также точка, за которую Vision Pro в настоящее время критикуют. Но т.к. у Vision Pro внешний блок питания, а в гарнитуре ставится маленькая батарейка на 5000мА, можно догадаться, что есть место под замену силового реле).
  • Вес, согласно опыту технологических СМИ, он составляет около 1 фунта (454 г), что в основном такое же, как у Pico и Oculus Quest 2, и должно быть легче, чем у Meta Quest Pro, что является хорошим опытом. в МР-оборудовании (правда, это не считая веса блока питания, пристегнутого к поясу). Однако по сравнению с чистыми очками дополненной реальности (такими как Nreal, Rokid и т. д.), которые весят около 80 г, они все равно тяжелые и душные. Конечно, большинство чистых AR-очков нужно подключать к другим устройствам и использовать только как расширенный экран, в то время как MR с собственным чипом и настоящим иммерсивным опытом может быть совершенно другим опытом.
  • Кроме того, с точки зрения аппаратной производительности, Vision Pro не только содержит чип серии M2 с высочайшей производительностью для работы системы и программ, но также добавляет чип R1, специально разработанный для MR-экрана, мониторинга окружающей среды, мониторинга глазного яблока и жестов, и т. д., используемые для эксклюзивных функций отображения и взаимодействия MR.

Что касается программного обеспечения, Apple может не только выполнить определенную степень миграции со своими миллионами экосистем разработчиков, но также уже имеет ряд экологических макетов с выпуском AR Kit:

Еще в 2017 году Apple выпустила AR Kit: набор совместимых с устройствами iOS сред разработки виртуальной реальности, которые позволяют разработчикам создавать приложения дополненной реальности и использовать преимущества аппаратных и программных возможностей устройств iOS. VR Kit позволяет цифровым активам взаимодействовать с реальным миром под камерой, используя камеру на устройстве iOS для создания карты местности, используя данные CoreMotion для обнаружения таких вещей, как поверхность стола, пол и положение устройства в кадре. физическое пространство — например, в Pokemon Go вы можете видеть покемонов, зарытых в землю и припаркованных на деревьях, вместо того, чтобы отображаться на экране и двигаться вместе с камерой. Пользователям не нужно выполнять для этого какую-либо калибровку — это беспрепятственный опыт работы с дополненной реальностью.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

  • В 2017 году был выпущен AR Kit, который может автоматически определять местоположение, топологию и выражение лица пользователя для моделирования и захвата выражения.
  • В 2018 году был выпущен AR Kit 2, который улучшил возможности CoreMotion, позволяя играть в многопользовательские игры с дополненной реальностью, отслеживать 2D-изображения и обнаруживать известные 3D-объекты, такие как скульптуры, игрушки и мебель.
  • В 2019 году был выпущен AR Kit 3, в котором добавлены дополнительные функции дополненной реальности, которые могут использовать маскировку людей для отображения контента AR перед людьми или позади них, а также могут отслеживать до трех лиц. Совместные сеансы также могут поддерживаться для нового общего игрового процесса AR. Захват движения можно использовать для понимания положения и движения тела, а также для отслеживания суставов и костей, что позволяет использовать новые возможности дополненной реальности, в которых участвуют люди, а не только объекты.
  • В 2020 году был выпущен AR Kit 4, который может использовать преимущества встроенного датчика LiDAR на iPhone и iPad 2020 года для улучшения отслеживания и обнаружения объектов. В ARKit 4 также добавлены привязки местоположения, которые используют данные Apple Maps для размещения дополненной реальности в определенных географических координатах.
  • В 2021 году будет выпущен AR Kit 5, позволяющий разработчикам создавать собственные шейдеры, процедурную генерацию сетки, захват объектов и управление персонажем. Кроме того, объекты можно захватывать с помощью встроенных API, а также LiDAR и камер на устройствах iOS 15. Разработчики могут **** отсканировать объект и мгновенно преобразовать его* в файл USDZ, который можно импортировать в Xcode и использовать в качестве 3D-модели* в вашей сцене или приложении ARKit. Это значительно повышает эффективность производства 3D-моделей.
  • В 2022 году выйдет AR Kit 6. Новая версия ARKit включает функцию «MotionCapture», которая может отслеживать людей в кадре видео, и предоставляет разработчикам «скелет» персонажа, который может предсказывать положение головы человека и Конечности, тем самым поддерживая разработку. Пользователь может создать приложение для наложения AR-контента на персонажа или скрыть его за персонажем, чтобы его можно было более реалистично интегрировать в сцену.

Оглядываясь назад на макет AR Kit, запущенный семь лет назад, можно увидеть, что накопление технологии AR Apple не произошло в одночасье, а тонко интегрировала опыт AR в широко распространенные устройства, Vision ** Когда Pro**** был выпущен, Apple уже завершила определенный объем контента и накопления разработчиков**. При этом, благодаря совместимости разработки AR Kit, разрабатываемые продукты ориентированы не только на пользователей Vision Pro, но и в определенной степени адаптируются под пользователей iPhone и iPad. Разработчикам, возможно, не нужно ограничиваться потолком в 3 миллиона активных пользователей в месяц для разработки продуктов, но они потенциально могут тестировать и тестировать с сотнями миллионов пользователей iPhone и iPad.

Кроме того, захват 3D-видео в Vision Pro также частично решает сегодняшнюю проблему ограниченного MR-контента: производство контента. Большинство существующих VR-видео имеют разрешение 1440p, которые, по-видимому, имеют плохие пиксели на круглом экране MR-дисплея, в то время как съемка Vision Pro имеет как пространственное видео с высоким разрешением, так и хорошее пространственное аудио, что может значительно улучшить качество изображения. содержание опыта потребления MR.

Хотя приведенная выше конфигурация довольно шокирует, воображение Apple MR на этом не останавливается: в день выпуска Apple MR @sterlingcrispin, разработчик, который утверждал, что участвовал в нейробиологии Apple, сказал:

В целом, большая часть моей работы заключалась в определении психического состояния пользователей на основе данных их тела и мозга, когда они находились в иммерсивном опыте.

В целом, большая часть моей работы связана с определением психического состояния пользователей с помощью их физических данных и данных о мозге в иммерсивном опыте.

Итак, пользователь находится в смешанной реальности или в виртуальной реальности, и модели ИИ пытаются предсказать, испытываете ли вы любопытство, блуждаете в мыслях, боитесь, обращаете внимание, вспоминаете прошлый опыт или какое-то другое когнитивное состояние. И их можно вывести с помощью таких измерений, как отслеживание взгляда, электрическая активность мозга, сердечные сокращения и ритмы, мышечная активность, плотность крови в мозгу, кровяное давление, проводимость кожи и т. д.

Пользователь находится в смешанной реальности или в виртуальной реальности, и модель ИИ пытается предсказать, любопытны ли они, рассеяны, напуганы, сосредоточены, помнят прошлый опыт или другие когнитивные состояния. Эти состояния можно измерить с помощью отслеживания глаз, электрической активности мозга, сердцебиения и ритма, мышечной активности, плотности крови мозга, артериального давления, проводимости кожи и т. д.

Было задействовано множество уловок, чтобы сделать возможными конкретные предсказания, о которых подробно рассказывается в нескольких патентах, которые я упоминаю. Один из самых крутых результатов заключался в том, чтобы предсказать, что пользователь нажмет на что-то, прежде чем он это сделает. Это была огромная работа, и я горжусь этим. Ваш ученик реагирует до того, как вы нажмете, потому что вы ожидаете, что что-то произойдет после того, как вы нажмете. Таким образом, вы можете создать биологическую обратную связь с мозгом пользователя, наблюдая за поведением его глаз и переделывая пользовательский интерфейс в режиме реального времени, чтобы создать больше этой упреждающей реакции зрачка. Это грубый компьютерный интерфейс мозга через глаза, но очень крутой. И я бы взял это вместо инвазивной хирургии головного мозга в любой момент.

Чтобы добиться того или иного предсказания, мы используем ряд приемов, подробно описанных в нескольких патентах на мое имя. Один из самых крутых результатов — предсказать, когда пользователь нажмет на объект, прежде чем он на самом деле нажмет. Это тяжелая работа, и я горжусь ею. Ваши зрачки реагируют до того, как вы нажмете, отчасти потому, что вы ожидаете, что что-то произойдет после того, как вы нажмете. Следовательно, отслеживая движения глаз пользователя и изменяя пользовательский интерфейс в режиме реального времени, можно осуществлять биологическую обратную связь с мозгом пользователя, чтобы создать более упреждающие реакции зрачка. Это грубый интерфейс мозг-компьютер через глаза, и это довольно круто. Я бы предпочел это инвазивной хирургии головного мозга.

Другие уловки для определения когнитивного состояния заключались в быстром отображении визуальных или звуковых изображений для пользователя способами, которые он может не воспринимать, а затем в измерении их реакции на них.

Другие методы определения когнитивного состояния включают быстрое мигание изображения или звука способами, о которых пользователь может не знать, и измерение их реакции на них.

В другом патенте подробно рассказывается об использовании машинного обучения и сигналов тела и мозга для предсказания того, насколько вы сосредоточены, расслаблены или насколько хорошо вы учитесь. А затем обновить виртуальные среды, чтобы улучшить эти состояния. Итак, представьте себе адаптивную иммерсивную среду, которая помогает вам учиться, работать или отдыхать, изменяя то, что вы видите и слышите на заднем плане.

В другом патенте подробно описывается использование машинного обучения и сигналов от тела и мозга, чтобы предсказывать, насколько вы сосредоточены, расслаблены или обучаетесь, и обновлять виртуальную среду на основе этих состояний. Итак, представьте себе адаптивную иммерсивную среду, которая помогает вам учиться, работать или отдыхать, изменяя то, что вы видите и слышите на заднем плане.

Эти технологии, имеющие большое значение для нейронауки, могут стать новым способом синхронизации «машинной и человеческой воли».

Конечно, Vision Pro не лишен недостатков, например, его заоблачная цена в $3499 более чем в два раза выше, чем у Meta Quest Pro, и более чем в семь раз выше, чем у Oculus Quest 2.

может быть полезно помнить, что в долларах с поправкой на инфляцию цена Apple Vision Pro на момент запуска составляет менее половины цены оригинального Macintosh 1984 года (более 7 тысяч долларов в сегодняшних долларах).

Как вы, возможно, помните, цена Apple Vision Pro составляла менее половины цены Macintosh, когда он был представлен в 1984 году (что эквивалентно более 7000 долларов США сегодня) в долларах США с поправкой на инфляцию.

При такой аналогии цены на Apple Vision Pro не кажутся слишком уж запредельными... Однако объем продаж первого поколения Macintosh составил всего 372 000 единиц. может принять подобную неловкую ситуацию—— Реальность может не сильно измениться за несколько лет.AR не обязательно нуждается в очках, и трудно популяризировать Vision Pro за короткий период времени.Вероятно, он будет использоваться только как инструмент для разработчиков, чтобы испытать и протестировать, производственный инструмент для создателей и цифровых энтузиастов дорогих игрушек.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений Источник: Google Тренд

Тем не менее, мы видим, что оборудование Apple MR начало всколыхивать рынок, смещая привлекательность обычных пользователей с цифровых продуктов на MR и заставляя общественность осознать, что MR более зрелый и больше не является продуктом ppt / презентационного видео. Пусть пользователи поймут, что помимо планшетов, телевизоров и мобильных телефонов есть возможность носить иммерсивные дисплеи; пусть разработчики поймут, что MR действительно может стать новой тенденцией в оборудовании следующего поколения; пусть венчурные капиталисты поймут, что это может быть инвестиционной сферой с очень высоким потолком.

Переосмысление выпуска Apple Vision Pro в полнолуние: XR, RNDR и будущее пространственных вычислений

Web3 и связанная с ним экология

1. 3D-рендеринг + концепция искусственного интеллекта Цель: RNDR

Введение в RNDR

За последние шесть месяцев RNDR стал мемом, объединяющим три концепции Метавселенной, ИИ и MR, и много раз лидировал на рынке.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

В основе RNDR лежит проект Render Network, протокол для распределенного рендеринга с использованием децентрализованной сети. OTOY.Inc, компания, стоящая за Render Network, была основана в 2009 году, и ее программное обеспечение для рендеринга OctaneRender оптимизировано для рендеринга на GPU. Для обычных создателей локальный рендеринг занимает много машин, что создает спрос на облачный рендеринг, но если вы арендуете серверы у AWS, Azure и других производителей для рендеринга, стоимость также может быть выше — так родилась сеть рендеринга. Рендеринг не ограничивается аппаратными условиями.Он соединяет создателей и обычных пользователей с простаивающими графическими процессорами, позволяя создателям выполнять рендеринг дешево, быстро и эффективно, а пользователи узлов могут использовать простаивающие графические процессоры для заработка на карманные расходы.

Для Render Network у участников есть две личности:

  • Создатель: Разместите задание и используйте легальную валюту для покупки кредита или RNDR для оплаты. (Octane X для публикации задач доступен на Mac и iPad, 0,5-5% комиссии покроет расходы на сеть.)
  • Поставщик узла (бездействующий ГП владелец): Владельцы неактивных графических процессоров могут подать заявку, чтобы стать поставщиком узла, и решить, получать ли сопоставление приоритетов, на основе репутации ранее выполненных задач. После того, как узел завершит рендеринг, автор просмотрит отрендеренный файл и загрузит его. После загрузки плата, заблокированная в смарт-контракте, будет отправлена на кошелек поставщика узла.

Токеномика RNDR также была изменена в феврале этого года, что является одной из причин его повышения цены (*Но пока статья не была опубликована, Render Network не применила новую токеномику к сети и еще не предоставила конкретное время запуска *):

Раньше в сети покупательная способность $RNDR была такой же, как у Credit, и 1 кредит = 1 евро. Когда цена $RNDR меньше 1 евро, выгоднее купить $RNDR, чем покупать кредит в фиатной валюте, но когда цена $RNDR поднимается выше 1 евро, потому что все склонны покупать за фиатной валюты, $RNDR потеряет свое условие варианта использования. (Хотя доход от соглашения может быть использован для выкупа $RNDR, другие участники рынка не заинтересованы в покупке $RNDR.)

Измененная экономическая модель использует модель Helium «BME» (Burn-Mint-Emission).Когда создатели покупают услуги рендеринга, независимо от того, используют ли они фиатную валюту или $RNDR, они уничтожают $RNDR, эквивалентный 95% стоимости фиатной валюты. и оставшиеся 5% Дохода, которые поступают в Фонд для использования в качестве двигателя. Когда нода предоставляет услуги, она больше не получает непосредственно доход создателя от покупки услуг рендеринга, а получает вознаграждение за новоиспеченные токены, которые не только основаны на показателях выполнения задачи, но и включают другие всеобъемлющие факторы, такие как удовлетворенность клиентов.

Стоит отметить, что для каждой новой эпохи (конкретный период времени, конкретная продолжительность не указана) будет чеканиться новый $RNDR, а количество чеканки строго ограничено и со временем будет уменьшаться, независимо от количества токенов. сожжен (подробности см. в официальном техническом документе в официальном документе). Следовательно, это внесет изменения в распределение выгод для следующих заинтересованных сторон:

  • Создатель/пользователь сетевой службы: в каждую эпоху часть RNDR, потребляемая создателем, будет возвращаться, и со временем эта доля будет постепенно уменьшаться.
  • Управляющие узлами: Управляющие узлами будут вознаграждены в зависимости от таких факторов, как выполненная рабочая нагрузка и онлайн-активность в режиме реального времени.
  • Поставщики ликвидности: поставщики ликвидности Dex также будут вознаграждены за обеспечение достаточного количества $RNDR для сжигания.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Источник:

По сравнению с предыдущим режимом доходного (нерегулярного) выкупа, в новом режиме, когда спрос на задачи рендеринга недостаточен, майнеры могут получать больше дохода, чем раньше, а общая цена задачи, соответствующая спросу на задачи рендеринга, больше, чем выпущенная $RNDR Когда общая сумма вознаграждения увеличивается, майнеры будут получать меньший доход, чем исходная модель (сожженные токены > новые токены), а токены $RNDR также войдут в дефляционное состояние.

Несмотря на то, что за последние шесть месяцев $RNDR приятно вырос, бизнес-положение Render Network значительно не улучшилось, как цена валюты: количество узлов существенно не колебалось за последние два года, а ежемесячные $RNDR, выделяемые на узлов значительно не увеличилось, но рендеринг. Количество задач действительно увеличилось — видно, что задачи, назначенные создателями сети, постепенно перешли от одной большой суммы к нескольким небольшим суммам).

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Несмотря на то, что Render Network не может справиться с пятикратным ростом цен на валюту за год, GMV Render Network действительно продемонстрировал относительно большой рост: в 2022 году GMV (валовая стоимость товаров, общая стоимость транзакций) увеличится на 70%. по сравнению с прошлым годом. Согласно общей сумме $RNDR, выделенной узлам на Dune Kanban, GMV в первой половине 2023 года составит около $1,19 млн, что практически не увеличится по сравнению с тем же периодом в 2022 году. Такой GMV явно недостаточно для mCap в 700 миллионов долларов.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Источник:

Потенциальное влияние запуска Vision Pro на RNDR**

В статье Medium, опубликованной 10 июня, Render Network заявила, что возможности рендеринга Octane для M1 и M2 уникальны — поскольку Vision Pro также использует чип M2, рендеринг в Vision Pro не будет отличаться от обычного рендеринга на рабочем столе.

Но возникает вопрос: зачем публиковать задачи рендеринга на устройстве с 2-часовым временем автономной работы, которое в основном используется для получения опыта и игр, а не для повышения производительности? Если цена Vision Pro будет снижена, время автономной работы значительно улучшится, вес уменьшится, а массовое внедрение действительно будет реализовано, возможно, настало время, чтобы Octane сыграл свою роль...

Можно подтвердить, что миграция цифровых активов с плоских устройств на устройства MR действительно приведет к увеличению спроса на инфраструктуру. Объявив о сотрудничестве с Apple для изучения того, как создать игровой движок Unity, который больше подходит для Vision Pro, цена акций выросла на 17% за день, что также свидетельствует об оптимистичных настроениях на рынке. Благодаря сотрудничеству между Disney и Apple 3D-преобразование традиционного кино- и телеконтента может привести к аналогичному росту спроса. ** Render Network, которая хорошо справляется с рендерингом фильмов и телевидения, запустила NeRFs, технологию 3D-рендеринга в сочетании с искусственным интеллектом в феврале этого года, используя вычисления искусственного интеллекта и 3D-рендеринг для создания иммерсивных 3D-ресурсов в реальном времени, которые можно просматривать на MR. устройства** — в комплекте Apple AR. Благодаря поддержке iPhone любой может выполнить Photoscan на объектах для создания 3D-ресурсов с помощью iPhone с более высокой конфигурацией, в то время как технология NeRF использует рендеринг с добавлением AI для рендеринга простого Photoscan 3D под разными углами, которые могут преломлять различные лучи света.3D-объекты — такой вид пространственного рендеринга станет важным инструментом для производства контента для устройств МРТ, обеспечивая потенциальный спрос на Render Network.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Но будет ли эта потребность удовлетворена RNDR? Глядя на его GMV в 2 миллиона долларов США в 2022 году, это капля в море по сравнению с затратами на кино- и телеиндустрию. Подводя итог, RNDR, конечно, может продолжать использовать мем трека «метавселенная, XR, AI», чтобы создать еще одну блестящую цену, когда трек горячий, но по-прежнему сложно получать доход, соответствующий оценке.

2. Метавселенная — Otherside, Sandbox, Decentraland, HighStreet и т. д.

Хотя я думаю, что существенные фундаментальные изменения ограничены — темы, связанные с MR, кажутся неотделимыми от этих крупных проектов метавселенной, Otherside от Monkey, The Sandbox от Animoca, старейшей блокчейн-метавселенной Decentraland и Highstreet, который хочет быть Shopify в мире виртуальной реальности. Подробный анализ трека метавселенной см. в разделе 4. Бизнес-анализ — отраслевой анализ и потенциал.

Но, как проанализировано выше в разделе «Убийственное приложение еще не появилось», большинство существующих разработчиков, поддерживающих VR, не «поддерживают только VR» (даже если они поддерживают только VR и являются лидерами отрасли, на уровне миллиона). сегмент рынка MAU, это не конкурентный уровень для достижения высшего уровня), а существующие продукты не были тщательно адаптированы к привычкам пользователей и рабочим взаимодействиям MR. Проекты, которые еще не запущены, фактически стоят на старте недалеко от всех других крупных производителей и стартапов, которые видят потенциал Vision Pro: после лучшего сочетания Unity и Vision Pro, разработка экологических игр MR Ожидается, что стоимость обучения снизится, а опыт, накопленный на относительно узком рынке в прошлом, будет трудно повторно использовать в продукте, который вот-вот пойдет на массовое внедрение.

Конечно, если мы хотим говорить о преимуществах первопроходца, проекты, которые уже внедрили виртуальную реальность, могут, конечно, иметь слабый прогресс в развитии, преимущества технологий и накопления талантов.

Еще кое-что

Если вы не смотрели следующее видео, то это будет ваше самое интуитивное ощущение от мира MR: удобного и захватывающего, но хаотичного и беспорядочного. Виртуальное и реальное сливаются настолько органично, что люди, избалованные виртуальной реальностью, считают «потерю личности на устройстве» апокалипсисом. Детали в видео до сих пор кажутся нам немного научно-фантастическими и непонятными, но, вероятно, это будущее, с которым мы столкнемся через несколько лет.

Выпуск Apple Vision Pro: переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Это напоминает мне другое видео, в 2011 году, то есть 12 лет назад, Microsoft выпустила Windows Phone 7 (как поколение Z с небольшой памятью о той эпохе, трудно подумать, что Microsoft много работала над мобильными телефонами), и сделал сатирическую рекламу про смартфоны «Правда?»: люди в рекламе все время крепко держат свои телефоны, едут на велосипеде, уставившись в свои телефоны, загорают на пляже, уставившись в свои телефоны, принимают душ с телефонами. плотно На банкете я упал с лестницы, потому что смотрел мобильный телефон, и даже уронил мобильный телефон в писсуар из-за того, что отвлекся... Первоначальным намерением Microsoft было показать пользователям, что «мобильный телефон, выпущенный Microsoft, спасет нас от зависимости от мобильных телефонов» — это, конечно, была неудачная попытка, и название этой рекламы «Правда?» можно было бы даже изменить на «Реальность». «Ощущение присутствия» и интуитивно понятный дизайн взаимодействия смартфонов вызывают большее привыкание, чем античеловеческая «мобильная версия компьютера с Windows», точно так же, как реальность сочетания виртуального и реального вызывает большее привыкание, чем чистая реальность.

Apple Vision Pro выпускает переосмысление полнолуния: XR, RNDR и будущее пространственных вычислений

Как понять такое будущее? У нас есть несколько направлений, которые мы изучаем:

  • СОЗДАНИЕ ИММЕРСИВНОГО ВПЕЧАТЛЕНИЯ И ИСТОРИИ: Видео сначала, после выпуска Vision Pro, съемка фильмов «с 3D-глубиной» никогда не была проще, и это изменит то, как люди потребляют цифровой контент — от «оценки на расстоянии» до « иммерсивный опыт». Помимо видеосъемки, еще одним треком, заслуживающим внимания, может стать «3D-пространство с контентом». Это не означает случайное создание одной и той же сцены из библиотеки шаблонов или нескольких, казалось бы, исследуемых пространств, извлеченных из игры, а пространство с «интерактивным, родным контентом и более дружественным 3D-опытом». Таким пространством может быть симпатичный инструктор по игре на фортепиано, который тоже сидит на скамейке, подсвечивая соответствующие клавиши и мягко подбадривая вас, когда вы в депрессии; это может быть эльф, который прячет ключ игры на следующий уровень в уголке вашей комнаты. Это также может быть чуткий виртуальный друг, который гуляет с игроками... Экономика создателя, созданная здесь, может использовать нижний слой блокчейна для отказа от доверия, автоматического расчета, цифрового контента на основе активов и транзакций с низким износом. Создатели могут лучше использовать их для взаимодействия с фанатами без посредников, без хлопот, связанных с регистрацией компании и настройкой Stripe для получения платежей, и без предоставления платформе доли 10% (Substack)-70% (Roblox), или даже беспокоясь о том, будет ли платформа обанкротится и лишит вас вашего тяжелого труда... Кошелек, платформа с компонуемым контентом и децентрализованное хранилище могут решить эту проблему. Аналогичные обновления будут происходить в играх и социальных пространствах, и можно даже сказать, что границы между играми, фильмами и социальными пространствами будут становиться все более размытыми: когда опыт будет больше не на большом экране, подвешенном в нескольких метрах, а рядом. перед вами, с глубиной, звуковым взаимодействием с расстоянием и пространственным смыслом, игрок больше не «наблюдающая» аудитория, а персонаж, который участвует в сцене, и даже действие будет влиять на среду виртуального мира (например, если поднять руку в джунглях, бабочки прилетят к кончику пальца).
  • ** инфра и сообщество цифровых 3D-активов: функция 3D-съемки Vision Pro значительно упростит создание 3D-видео, тем самым положив начало производству и потреблению нового контента. рынок. В соответствующей восходящей и нисходящей инфраструктуре, такой как торговля материалами и редактирование, могут по-прежнему доминировать существующие гиганты, или они могут быть открыты начинающими компаниями, такими как AIGC.
  • Обновления аппаратного и программного обеспечения для улучшения эффекта погружения: будь то «более детальное наблюдение за человеческим телом Apple для создания адаптивной среды» или добавление тактильных, вкусовых и других иммерсивных ощущений, у него есть значительный потенциал. .

Конечно, существует высокая вероятность того, что предприниматели в этой области будут иметь более глубокое понимание, мышление и более творческие исследования, чем мы — добро пожаловать в DM @0xscarlettw, чтобы пообщаться и изучить возможности эпохи пространственных вычислений.

Благодарности и рекомендации:

Спасибо @fanyayun, партнеру Mint Ventures, и @xuxiaopengmint, партнеру по исследованиям, за их советы, обзор и корректуру во время написания этой статьи. Структура анализа XR основана на серии статей @ballmatthew, Apple WWDC и курсах для разработчиков, а также на опыте автора с различными устройствами XR на рынке.

Посмотреть Оригинал
Содержание носит исключительно справочный характер и не является предложением или офертой. Консультации по инвестициям, налогообложению или юридическим вопросам не предоставляются. Более подробную информацию о рисках см. в разделе «Дисклеймер».
  • Награда
  • комментарий
  • Поделиться
комментарий
0/400
Нет комментариев
  • Закрепить