Появятся пространственные камеры, но, возможно, они появятся только в iPhone 16
3D-фотография никогда не пользовалась таким же успехом, как двухмерная форма искусства, но Apple Vision Pro и iPhone стремятся изменить эту ситуацию. Если им это удастся, это может изменить наш способ запечатления и восприятия воспоминаний.
Эта высокая цель далеко не гарантирована. В конце концов, представление компанией Apple Vision Pro (своей "первой 3D-камеры") было одновременно самой интересной и самой жуткой частью презентации, которая часто напоминала выпуск "Чёрного зеркала".
Из-за длинного списка достойных мемов моментов презентации Vision Pro легко забыть, что Apple анонсировала устройство, которое снимает "пространственные фото и видео в 3D". Учитывая, что последней камерой компании (вне iPhone) была Apple QuickTake в 1994 году, это довольно значительное событие.
С другой стороны, Vision Pro - это камера, которую нужно носить на лице, и почти комичная демонстрация Apple вызвала насмешки даже со стороны тех, кто помогал ее создавать. Это не означает, что 3D-фото и видео снова обречены оставаться пограничными новинками. Это просто означает, что Apple Vision Pro нуждается в устройстве, которое сможет запечатлеть эти "пространственные" воспоминания, в то время как он сосредоточится на воспроизведении.
Этими 3D-камерами почти наверняка станут iPhone и iPad. И хотя для iPhone 15 все это, скорее всего, произойдет слишком рано, iPhone 16 - или, возможно, iPad Pro следующего года - может добавить необходимые датчики и программное обеспечение к существующему сканеру Lidar компании Apple, чтобы стать пространственными камерами, в которых так нуждается Apple Vision Pro. Если они это сделают, то 3D-фото и видео вполне могут стать следующей большой функцией камеры смартфона.
Напомню
Apple - далеко не единственная компания, которая исследует возможности трехмерной съемки воспоминаний. Сама идея восходит к первым стереоскопам в 1830-х годах, но совсем недавно мы видели, как компания Wist (ниже), приглашенная только для участия в конкурсе, обещала позволить вам снимать "иммерсивные воспоминания" на телефон, которые затем можно будет пережить на гарнитурах вроде Meta** Quest 2.
Смежной тенденцией является рост приложений, таких как Polycam, которое является самым популярным приложением для 3D-сканирования для iOS и Android. Основатель Polycam Крис Хайнрих сказал нам, что пространственные фотографии Apple Vision Pro - это захватывающий момент, и что для их съемки нынешним камерам телефонов придется эволюционировать.
"Обычные изображения и фотографии выглядят очень плоскими в 3D и не соответствуют потенциалу аппаратного обеспечения по сравнению с 3D или стереоскопическим контентом", - говорит Хайнрих. Но трехмерные снимки Vision Pro также отличаются от полноценного 3D-сканирования. "Пространственные фотографии и видео, которые они [Apple] анонсировали, - это не настоящие 3D-модели, а скорее стереоскопические фотографии, которые создают 3D-эффект и, возможно, допускают небольшое движение головы", - добавляет он.
Тем не менее, хотя пространственные фотографии и приложения для 3D-сканирования - это разные звери, Polycam считает, что они будут сосуществовать во многих приложениях. Мы ожидаем, что Apple позволит сторонним разработчикам импортировать пространственные фото и видео из приложения "Фото", как они это делают с обычными фото и видео", - добавляет Хайнрих. "И если это так, мы, скорее всего, будем поддерживать импорт, просмотр и редактирование пространственных фотографий и видео с помощью Polycam", - добавляет он.
Взгляд в будущее
Для многих идея запечатлеть 3D-воспоминания покажется диковинкой. В конце концов, 3D-телевизоры, естественным преемником которых, вероятно, является Apple Vision Pro, стали одним из самых больших провалов в технологиях. А десять лет назад стереокамеры, такие как Fujifilm FinePix Real 3D W1, также не оставили заметного следа в культуре.
Но еще до появления Vision Pro все большее число экспертов называли 3D-съемку следующей величайшей вещью с момента появления цифровой фотографии. И теперь, когда Apple вступила в игру, вопрос заключается в том, как быстро это наконец-то произойдет?
Очевидным выводом из презентации Vision Pro было то, что iPhone 15, который должен выйти в сентябре, несомненно, сможет снимать пространственные фотографии и видео для гарнитуры Apple. Но все может оказаться не так просто, считает Крис Хайнрих из Polycam.
Он говорит, что пространственные фотографии "могут потребовать добавления еще одной камеры в iPhone, которая будет расположена дальше (примерно на расстоянии между нашими глазами) от других камер", и что это "будет иметь стоимость и конструктивные недостатки, которые, вероятно, пока не оправдывают ее добавление".
Вместо этого, более вероятным выглядит то, что 2024 год станет годом взлета пространственной памяти. "Я полагаю, что сначала они [Apple] выпустят гарнитуру, а если пространственные фото и видео станут хитом, они рассмотрят возможность добавления этой функции в iPhone 16 или позже", - добавляет он.
Не вызывает сомнений тот факт, что iPhone и iPad гораздо лучше подходят для съемки пространственных фото и видео, чем сама гарнитура Vision Pro. "Я думаю, что для Apple имеет смысл поддерживать съемку пространственных фотографий и видео на iPhone, потому что, во-первых, съемка фотографий с ручного устройства гораздо более естественна, чем съемка с гарнитуры, и, во-вторых, это играет в их пользу, поскольку они владеют платформой для нескольких устройств", - заключает он.
Для тех кто в меньшинстве
Polycam - не единственное приложение, которое с нетерпением ждет возможности создания 3D-фотографий и видео после появления Vision Pro. Команда, стоящая за Halide, которое по-прежнему считается лучшим приложением для камеры, также заявила нам, что видит большой потенциал - даже если это может означать ожидание второй версии VisionOS.
Бен Сандофски, соучредитель студии Lux, занимающейся разработкой Halide, сказал: "На протяжении многих лет мы наблюдали, как Apple выпускала строительные блоки, которые в итоге вылились в Vision Pro. Например, в iPhone 12 Pro был добавлен лидарный датчик, что позволило разблокировать сканирование помещений и 3d-фотографию. Хотя эти технологии - всего лишь дразнилка того, что мы ожидаем увидеть в следующем году, мы уже использовали их для улучшения наших возможностей 3D-захвата в Halide, и нам не терпится получить еще больше", - сказал он.
Но есть камень преткновения для сторонних приложений для пространственной съемки. "Наше единственное разочарование заключается в том, что, похоже, первый выпуск Vision Pro не будет включать возможности захвата для сторонних приложений", - отметил он. "Мы сильно подозреваем, что это проблема нехватки времени, поскольку Apple имеет довольно хороший послужной список поддержки сторонних приложений для камер. Поэтому, если эти возможности появятся в "VisionOS 2.0", мы, безусловно, будем рады", - добавил он.
А как насчет потенциала будущих iPhone с 3D-камерами? Как и Polycam, Сандофски также отметил, что нынешние iPhone просто не справляются с этой задачей. "Лидар доступен только на "профессиональных" iPhone, начиная с iPhone 12 Pro, а некоторые iPhone используют ML [машинное обучение] для синтеза 3D-данных", - сказал он. "Этой мощности более чем достаточно для создания таких эффектов, как "портретный режим", но когда речь заходит о реалистичном полном 3D воспроизведении, мы подозреваем, что переход от iPhone к Vision Pro будет похож на переход от телевизоров стандартной четкости к телевизорам высокой четкости", - добавил он.
В отдельном твите команда Halide пришла к выводу, что "нынешние iPhone не могут создать правильное пространственное изображение так, как это может сделать гарнитура [Apple Vision Pro]. Нам потребуется значительное улучшение в плане вычислительной мощности, точности и качества сенсоров, чтобы это заработало", - добавили они.
Учитывая скорость изменения камер телефонов - и относительное плато функций 2D-камер - есть шанс, что iPhone 16 все же станет первым телефоном Apple со стереоскопическими линзами для съемки 3D-фото и видео.
Но до этого еще далеко, и наряду с технической задачей, которая стоит перед компанией, Apple также придется потрудиться, чтобы привлечь внимание обычных людей к "пространственной" памяти, как это делают разработчики iOS.
Как заключил наш практический обзор Apple Vision Pro после демонстрации этой функции, "это было похоже на открытку из "Отчета о меньшинствах", только вместо прекогов у нас есть прошлый ког Vision Pro, позволяющий нам пережить моменты как никогда раньше".
Это определенно звучит как забавный научно-фантастический опыт - но, как показало последнее десятилетие развития гарнитур VR, есть большая разница между воплощением научной фантастики в реальность и превращением этого в успех.
Обновление 15 июня 2023 года: мы обновили эту статью, добавив комментарии о Vision Pro и пространственной съемке с помощью приложения Halide.
