Когда дело доходит до выбора между iPhone 12 или iPhone 12 Pro, наличие в последнем LiDAR вряд ли станет для вас решающим фактором. Если вы не используете много приложений с дополненной реальностью и не снимаете много фотографий ночью, вы не увидите никаких преимуществ в краткосрочной перспективе.
3D-печать и ночные портреты: для чего в iPhone 12 Pro Max нужен лидар
В iPhone 12 Pro Max, который стоит 130 тыс. руб., установлены три камеры, один фонарик и лидар. Лидар — это сенсор, который посылает в пространство пучки невидимого света. Зачем? Чтобы лучше видеть это же пространство. Сегодня технология лидара чаще всего упоминается в контексте «зрения» беспилотного автомобиля, но зачем она смартфону? Apple объясняет необходимость технологии так:
- во-первых, благодаря лидару камера будет лучше ловить фокус фото и видео ночью;
- во-вторых, дополненная реальность, как бы странно это ни звучало, становится более реальной.
Фотосъемка с лидаром
Фото, сделанное ночью на телефон с лидаром более четкое: на смартфоне без лидара изображение «шумит». Главное отличие iPhone 12 Pro Max от других смартфонов — у него есть ночной режим портретной съемки.
Тут iPhone 12 Pro Max сравним с камерой Sony Alpha A6600. Однако iPhone «вытягивает» все, что позади человека, осветляя фон. Sony же при этом сохраняет цвета, как в реальности. Примерно такие же результаты показал эксперимент по сравнению смартфона Sony уже с новым iPhone без лидара.
Вывод: для качественной видеосъемки лучше купить фотоаппарат со светочувствительным объективом.
Еще один сканер для объектов, который переносит их в трехмерное визуальное пространство и дает возможность использовать в форматах USDZ, OBJ, GLTF, GLB, DAE, STL. Их получится перенести в место, смоделированное на любом другом устройстве.
Для чего LiDAR в iPhone 12 Pro?
Основная цель LiDAR в iPhone – улучшение реализации дополненной реальности (AR). За счет данной технологии приложениям, использующим AR, предоставляется более полезная и точная информация об окружении. Сканер в iPhone 12 Pro (и iPad Pro) имеет эффективную дальность действия около 5 метров.
Если вы не знакомы с технологией дополненной реальности, то она позволяет разработчикам объединять виртуальные объекты и реальный мир. Используя камеру вашего устройства, AR позволяет вам играть в игры, применять интерактивные фильтры (например, в Snapchat) или предварительно просматривать расстановку мебели и других объектов. Я уже немного рассказывал об этом в обзоре онлайн планировщика интерьера Planoplan.
Одним из успешных примеров игры с дополненной реальностью является Pokemon Go, которая позволяет захватывать виртуальных существ в реальном мире. С чрезвычайно успешным приложением Place от ИКЕА вы можете заранее увидеть, как большая часть каталога компании будет выглядеть у вас дома.
Хотя LiDAR часто используется для сканирования зданий и других объектов, сканер на iPhone 12 Pro и iPad Pro недостаточно точен для точного сканирования объектов. Сетка, создаваемая айфоном на данный момент, недостаточно точна для отправки на 3D-принтер, но это отличная отправная точка для 3D-модели, поскольку все пропорции будут очень точными.
Вы также можете ожидать более плавного взаимодействия с AR на iPhone 12, особенно при размещении виртуальных предметов в реальном мире. Гаджет должен лучше распознавать реальные предметы на переднем плане, что сделает взаимодействие между виртуальными и реальными объектами более реалистичным.
Apple также намерена использовать LiDAR для улучшения работы камеры при слабом освещении. Технология «focus pixels», реализованная в iPhone XS, является продолжением технологии фазовой автофокусировки (PDAF). Она по-прежнему зависит от света, поэтому даже последние достижения в области автофокусировки не так хорошо работают в темноте.
Определяя расстояние между вашим iPhone и фотографируемым объектом, сканер может сказать камере, на каком расстоянии ей следует сфокусироваться, чтобы получить наилучшие результаты. Это должно упростить получение лучших снимков на iPhone в темноте, особенно в сочетании с ночным режимом.
Так ли нужен Лидар в айфоне?
На данный момент сенсор есть только у двух устройств Apple: оба имеют более высокую цену и приставку «Pro», так что LiDAR на данный момент является весьма нишевой функцией. Однако это вовсе не означает, что технология не получит распространение в будущем. Так, в исчерпывающий список комплектов разработки программного обеспечения (SDK) Apple входит ARKit, который был обновлен до версии 4.0 в июне 2020 года.
В этом обновлении представлены новые функции, которые используют LiDAR в ARKit, что позволяет разработчикам использовать преимущества нового датчика iPad Pro и iPhone 12 Pro. Подобные SDK позволяют разработчикам ориентироваться на целые семейства устройств, даже если для них пока не планируется внедрение новейших достижений.
План Apple, вероятно, предполагает установку датчиков LiDAR на большем количестве устройств, в то время как разработчики заняты созданием приложений, использующих преимущества данной технологии. Учитывая возобновившийся к ней интерес компании в последние несколько выпусков программного обеспечения, Apple, похоже, делает большую ставку на AR. Посмотрите как это выглядит в действии:
Однако самые большие планы Apple по поводу ЛиДАР могут выходить далеко за рамки планшетов и смартфонов. По крайней мере, этого мнения придерживаются многие аналитики. Ходят слухи о том, что компания активно разрабатывает очки AR. Если бы такой проект был реализован, логично, что точная дополненная реальность крайне бы пригодилась.
Интеграция оборудования, которое напрямую приносит пользу AR в отдельные устройства, также дает компании возможность настроить его перед выпуском продукта, который в большой степени опирается на данную технологию.
Сначала Lidar внедрили в iPad Pro, вышедший весной 2020 года, а спустя полгода удалость внедрить его и в iPhone 12 (версии Pro/Pro Max). Излучатель в смартфонах расположили на блоке тыловых камер.
Как пользоваться лидаром в iPhone
Конечного пользователя теоретические выкладки, изложенные выше, интересуют мало – им подавай практическую пользу.
Что ж, давайте обсудим это. Для начала об эффекте использования лидара в фотографировании. На iPhone 12 Pro/Pro Max новая технология позволяет получить более качественную портретную съёмку: Lidar позволяет лучше фокусировать различные участки лица, например, волос или ушей. Пока что эта «фишка» работает только со статикой, но в ближайшей перспективе ожидается, что технология будет применима и к портретной видеосъёмке. Возможно, это произойдёт уже в ближайшем релизе новой версии iOS или придётся подождать выхода новой модели iPhone.
Использовать Lidar на iPhone 12 Pro можно и для максимально точного определения расстояний до объектов, находящихся в зоне действия датчика. То есть теперь не составит труда выяснить высоту стен вашей квартиры, длину и ширину всех комнат, и даже кривизну поверхностей, например, пола. И для этого вам не потребуются никакие рулетки и метры.
Более того, возможности Lidar, реализованные в iPhone 12, позволяют использовать их и при ведении строительных работ, успешно заменяя нивелиры и дальномеры.
Для «яблочного» телефона уже разработаны приложения, имеющие функцию создания моделей помещений с размещением в них трёхмерных объектов типа мебели.
Не стоит забывать и о том, что лидар умеет работать и в темноте. Вы можете проверить, насколько лучше получаются фотографии, сделанные при недостаточном освещении, включив лидар: фокусировка будет произведена в 4-6 раз лучше, а ведь сбитый фокус – основная проблема при фотографировании ночью.
Насколько нужен лидар в телефоне
Изначально технология, используемая в лидарах, применялась исключительно в картографических целях. Интересный факт: для сканирования лунной поверхности Аполлон-15 использовал именно лазерный лидар. Картографические возможности постепенно появились и в Android-телефонах, где ToF-сенсоры используются уже довольно давно.
Они же могут быть задействованы для фейс-контроля, заменяя достаточно сложные существующие схемы Face ID, состоящие их нескольких компонентов – лидар в состоянии получить гораздо более точную модель поверхности лица, и такой функционал уже реализован Galaxy S10 5G.
Другими словами, лидар – это весьма перспективное направление, имеющее множество прикладных сфер использования. В автомобилестроении и робототехнике лидары уже сегодня способны на многое, а что касается смартфонов, то здесь эра лидаров находится на этапе становления. Предсказать, насколько востребованной эта технология станет в среднесрочной перспективе, затрудняются даже эксперты.
Некоторые из них даже заявляют, что появление Lidar в iPad/ iPhone – это всего лишь маркетинговый ход, не имеющий сколь-нибудь практической ценности, кроме измерения расстояний до объектов.
На самом деле появляется всё больше приложений, использующих данную технологию для самых разных целей, от весьма экзотических до действительно нужных. Так что сомневаться в перспективности лидаров не стоит. И да, это действительно удачный маркетинговый ход, который по мере внедрения технологии заставит владельцев устаревших «яблочных» девайсов покупать более совершенные гаджеты.
Любопытный способ разнообразить свои видеоролики с помощью эффектов, завязанных на дополненной реальности. С помощью LiDAR приложение определяет очертания человека или другого главного объекта и дает возможность вставлять его на любой интересный фон. Получается неординарный результат.
LiDAR для измерения расстояний
С появлением сканера заметно улучшилась работа приложения «Рулетка»: теперь оно точнее, быстрее и удобнее. Для этого в интерфейсе предусмотрены вертикальные и боковые направляющие. Специальный режим, обнаруживая в видоискателе человека, тут же измеряет его рост. Как утверждают обзорщики, точность «Рулетки» в некоторых ситуациях соответствует реальности, хотя чаще имеется небольшая погрешность. Впрочем, использовать приложение в профессиональном строительстве всё же не стоит.
Преимущества датчика хорошо раскрываются в сторонних утилитах. Например, бесплатный Canvas: Pocket 3D Room Scanner позволяет сканировать помещение, чтобы получить 3D-проекцию и рассматривать её с любой точки. Snapchat открыл документацию по созданию линз с использованием LiDAR, а приложение IKEA Place помогает размещать виртуальные элементы интерьера из каталога магазина в квартире пользователя.
Возможность точного нанесения виртуальных объектов на реальные пригодится и на сайте Apple: для некоторых продуктов доступно их изучение в дополненной реальности. Так можно узнать, как будет смотреться iMac на рабочем столе.
