Программы дополненной реальности ios 11. Настраиваемый пункт управления

13.02.2019

1. Самообучаемая Siri

Голосовой помощник Siri в iOS 11 будет говорить более живыми голосами, а также самообучаться. Siri сможет анализировать, какую музыку вы слушаете, и предлагать подходящие новинки, а также получать информацию о ваших действиях и предпочтениях не только с iPhone, но и с других ваших Apple-девайсов.

Еще одно нововведение: к Siri теперь можно обращаться не только голосом, но и текстовыми командами.

ВИДЕО

Сравнение англоязычной Siri на iOS 10 и 11. Видео: iupdateos / YouTube

2. Дополненная реальность AR

В iOS 11 появилась технология дополненной реальности AR. Благодаря набору инструментов AR Kit сторонние разработчики смогут создавать приложения или игры с поддержкой дополненной реальности.

Например, можно посмотреть на блюда в ресторане, как будто они уже поданы:

ВИДЕО

Видео: Alper Guler / YouTube

Научиться танцевать благодаря интерактивному самоучителю:

ВИДЕО

Видео: Dance Reality / YouTube

"Рисовать" граффити на реальных объектах:

ВИДЕО

Видео: laanlabs / YouTube

Или гулять с виртуальной собакой:

ВИДЕО

Видео: Made With ARKit / YouTube

3. Обновленные приложения

Стандартная камера теперь умеет сканировать QR-код - скачивать для этого отдельные приложения больше нет необходимости. Приложения "Телефон" и "Калькулятор" получили более современный дизайн, а яркость фонарика теперь можно регулировать.

В iMessage появились новые эффекты и быстрый доступ к стикерам, смайликам и доступным приложениям. Также с помощью iMessage можно будет отправлять деньги собеседнику через Apple Pay. Правда, пока эта функция недоступна даже в США, а когда она появится в Украине - невозможно предсказать.

Разработчики обещают, что перевод денег заработает в следующей версии iOS. Фото: apple-iphone.ru


4. Новый AppStore

Магазин AppStore в новой версии iOS будет не просто "складом приложений", но и информационным ресурсом. Пользователи смогут найти здесь ежедневные статьи, советы, подборки игр или приложений, дайджесты и прочее. Этот контент создают сами сотрудники Apple.

Новый облик AppStore. Фото: apple-iphone.ru


5. Режим "Не беспокоить водителя"

Если включить эту функцию, то, когда вы управляете автомобилем, вас не будут отвлекать никакие уведомления, даже звонки. Люди, которые попытаются с вами связаться, получат сообщение, что получатель находится за рулем (автоответы можно настроить в зависимости от звонящего).

"Не беспокоить водителя" можно включить в пункте управления. Режим также будет активироваться автоматически, если iPhone подключается к автомобилю по Bluetooth.

ВИДЕО

Функция "Не беспокоить водителя" позволяет получать сообщения лишь в том случае, если отправитель посчитает их срочными. Видео: MacRumors / YouTube

6. Клавиатура QuickType

В iOS 11 оптимизировали набор текста одной рукой. Включить эту функцию можно при выборе языка на клавиатуре. В таком случае клавиши с буквами переместятся вправо, ближе к большому пальцу, и набирать текст будет удобнее. Это работает только на моделях iPhone с диагональю от 4,7 дюйма.

Кроме того, буквы, цифры, знаки препинания и некоторые спецсимволы теперь находятся на одной клавиатуре, поэтому переключать режим придется намного реже.

ВИДЕО

Набирать текст одной рукой стало проще. Видео: AppleInsider / YouTube

7. "Живые фото", новые фильтры и сжатие файлов

В новой операционной системе значительно улучшена функция Live Photos ("живые фото"). Теперь их можно редактировать, выбирать из них самый лучший кадр или создавать различные анимации. Также в камере появилось девять новых фотофильтров, оптимизированных для естественных цветов кожи, и возможность фотографировать с большой выдержкой.

Появились также новые форматы для сохранения фото и видео - HEIF и HEVC. Благодаря этому нововведению фотографии и видеоролики будут занимать вдвое меньше места, чем раньше, не теряя при этом в качестве. Впрочем, эти форматы поддерживаются не на всех устройствах, которые можно обновить до iOS 11. Например, iPhone 5S, 6 или 6S такое кодирование не поддерживают.


Фотографии в новом формате будут занимать вдвое меньше места, чем в JPG. Фото: apple-iphone.ru


8. Настраиваемый пункт управления

Если в iOS 10 пункт управления ("шторка", которая появляется, если потянуть от нижнего края экрана) состоял из двух экранов, то в iOS 11 все настройки поместились на одном. Теперь пользователь сможет сам добавлять или удалять опции, которые он хочет видеть в пункте управления.

Правда, некоторые функции можно найти не сразу. Например, чтобы включить "ночной режим" (Night Shift), нужно подержать палец на слайдере яркости. Появились и новые возможности: например, одним нажатием кнопки в пункте управления можно записывать видео с экрана.

Пункт управления можно настроить на свое усмотрение. Фото: apple-iphone.ru


9. "Файлы" вместо iCloud Drive

После обновления iOS вместо стандартного iCloud Drive появится новое приложение - "Файлы". Оно позволяет искать, перемещать или удалять свои файлы - как хранящиеся на iPhone/iPad, так и в облачных сервисах.

"Файлы" могут работать не только с iCloud, но и со сторонними хранилищами: Dropbox, OneDrive, Google Drive и другими. Фото: apple-iphone.ru


10. Персональные настройки

Приложения теперь можно "временно удалять", сохраняя при этом персональные настройки, которые восстановятся при следующей установке. Если же вы купили новый iPhone с iOS 11, этап настроек можно и вовсе пропустить: достаточно поднести его к старому iPhone, и новый гаджет скопирует его настройки.

ВИДЕО

Новый iPhone можно за несколько минут настроить по аналогии со старым. Видео: iDeviceHelp / YouTube

11. Dock на iPad и новые функции Apple Pencil

Новая панель Dock на iPad позволяет простым жестом переключаться между приложениями и открывать их. Панель доступна на любом экране и в ней можно сохранить до 15 приложений, причем справа будут появляться наиболее используемые (не только на iPad, но и на iPhone или Mac). Режимы Split View и Slide Over позволят удобно разместить несколько приложений на одном экране.

Стилус Apple Pencil в iOS 11 позволяет делать быстрые пометки в pdf-файлах и на скриншотах, рисовать в "Заметках" и "Почте", а также писать непосредственно на экране блокировки.

ВИДЕО

С iOS 11 планшет iPad стал больше похож на ноутбук MacBook. Видео: 9to5Mac / YouTube

Совместимость и недостатки

iOS 11 - первая версия операционной системы Apple, которая предназначена только только для устройств с 64-битной архитектурой. Это значит, что обновление будет работать только на iPhone 5s и старше, всех iPad mini 2 и старше, а также на iPod touch шестого поколения. Для владельцев iPhone 5, iPhone 5c и iPad 4 последней доступной версией останется iOS 10.3.3.

Впрочем, владельцы iPhone 5s отмечают , что iOS 11 плохо адаптирована для их устройств: гаджеты стали работать гораздо медленнее, чем на 10.3.3. Пользователи также жаловались на многочисленные "дизайнерские ляпы" в новой операционной системе: несоответствие шрифтов, кривые отступы, зависания анимации и прочее.

Русскоязычный портал "Канобу" опубликовал видео, в котором автор описывает пять причин отказаться от обновления до iOS 11, а на сайте Appleinsider.ru есть инструкция о том, как вернуться на iOS 10.3.3.

Для создания приложений с дополненной реальностью (Augmented Reality). Он призван превратить iOS-устройства в самую большую AR-платформу в мире. Разработчикам идея понравилась, и первые тематические программы уже увидели свет.

Вконтакте

Что такое ARKit?

Apple ARKit — инструменты для разработчиков, позволяющие создавать приложения с дополненной реальностью. Для анализа окружающего пространства технология использует штатные камеры и датчики iPhone и iPad. ARKit-приложение позволяет камере iOS-устройства автоматически распознавать различные поверхности и дополнять их подходящими объектами в реальном времени. В результате, на экране устройства пользователь получает реалистичное анимационное изображение.

Стоит отметить, что приложения с дополненной реальностью существуют в App Store достаточно давно. Для разработки AR-приложений разработчики использовали собственные технологии. Ярким примером такого приложения является :

Какие iPhone и iPad поддерживают ARKit?

По информации Apple, поддержку ARKit-приложений получили iOS-устройства, оснащенные процессорами A9 и новее. На данный момент это:

  • iPhone 6s,
  • iPhone 6s Plus,
  • iPhone SE,
  • iPhone 7,
  • iPhone 7 Plus,
  • 9,7-дюймовый iPad (2017),
  • 9,7-дюймовый iPad Pro,
  • 10,5-дюймовый iPad Pro
  • 12,9-дюймовый iPad Pro.

Примеры приложений, разработанных на базе ARKit

Tesla Model 3

Поклонник электромобилей производства фирмы Илона Маска создал приложение с 3D-моделью Tesla Model 3. В коротком видео автор демонстрирует возможности программы: вы можете «поставить» автомобиль в любом удобном месте, мгновенно изменять цвет кузова, включать фары и смотреть, как машина трогается с места и едет вперед.

Заказ еды

Пришли в популярный ресторанчик, заняли место и не хотите уходить, чтобы его не потерять? Никаких проблем — ведь с приложением разработчика Альпера Гулера вы легко сможете «поставить» всю еду из меню на стол перед собой, увеличить / уменьшить, покрутить и уже потом заказать то, что выбрали осознанно, а не в спешке.

Окно в другой мир

Французское консалтинговое агентство Nedd наглядно показало, чем в ближайшие годы будут заниматься крупные разработчики игр. Игрок стоит на самой обычной улице, и перед ним раскрывается дверь в совершенно другую местность (если не в другой мир)! Он входит в дверь, осматривается. «Родной» мир остается в дверном проеме. Затем игрок возвращается «домой». Вот такой пример сочетания дополненной (AR) и виртуальной (VR) реальностей.

P.S. А вот пример любимой многими разработчиками AR-приложений прием — человеческие фигуры уменьшаются и помещаются на горизонтальную поверхность рядом с обычными предметами, чтобы подчеркнуть необычность ситуации:

Танцующий робот

Виртуальная рулетка

Приземление «Falcon9»

Разработчики этого приложения действительно заслуживают внимания. Ребята не просто используют новомодную фишку, а реализовывают её потенциал на все 100%.

Обучающая программа наглядно покажет и расскажет как работает трансмиссия, батарейка отдает заряд, светит лазер, из каких долей состоит мозг и многое другое.

Во-первых это наглядный, детализированный интерактив. Все можно вертеть, масштабировать, касаться частей и получать подсказки.

Во-вторых, тут есть пошаговая обучалка, словно учитель с книгой повествующий о тех или иных вещах.

В третьих - это не одноразовая программа, а целая платформа в которую будут подгружаться новые отсортированные по категориям единицы. Приложение бесплатное, но к моему великому сожалению на английском языке.

С другой стороны - хороший повод подтянуть английский. JIG Space - это пожалуй самое полезное, впечатляющее и вдохновляющее приложение из всех имеющихся в категории AR. Вот оно - будущее в системе образования. И многие сложные вещи становятся чуточку проще.

TapMeasure

Благодаря TapMeasure вы сможете измерять длину предметов, определять отклонение фигур от заданной плоскости и даже создавать трехмерный план помещений с учетом окон, дверей и прочих поверхностей.

В итоге получится интерактивная модель в которой можно посмотреть все размеры. Очень удобная штука, особенно когда нужно что-то набросать или измерить, а под рукой нет рулетки или лазера. Конечно, точность оставляет желать лучшего.

Стоит учесть, что погрешность на метр может составлять сантиметр и более. Но за неимением любого другого более точного инструмента такое решение все равно является выходом.

IKEA Place

Ребята из IKEA быстро подхватили и взяли на вооружение ARKit сделав крутое дополнение к своему каталогу. Теперь многие вещи шведской мебельной фабрики можно вписать в свою комнату и посмотреть на сколько хорошо или не очень это будет выглядеть.

Модели высокополигональны и выглядят достаточно здорово. Есть две главные претензии - нет возможности масштабировать предметы, просто приложение не всегда точно сопоставляет размер, и отсутствие программы в русском App Store. В остальном - так держать. Добавляйте больше вещей из каталога, привяжите к ним все характеристики и будет вам счастье и море удобства.

SketchAR

Если вы не умеете рисовать, то не все потеряно. И для этого на начальном этапе не обязательно ходить на кружок в дом культуры. Приложение Sketch AR поможет вам в этом. Наведя желательно на листок А4 камеру сканер распознает его и покажет четыре точки которые необходимо нарисовать.

Для системы они станут отсчетными, после чего спроецируется выбранное из каталога изображение. Конечно можно одной рукой держать, а второй обрисовывать картинку, но лучше закрепить смартфон или планшет на штативе.

Со SketchAR у вас запросто получится хороший и главное пропорциональный костяк изображения. Затем останется уже без помощи закончить работу.

Magicplan

Основной упор этого приложения ложится на составление чертежных планов помещений и технология дополненной реальности в этом здорово помогает. Нет необходимости рисовать каждую линию - быстро пробежались по комнате отметив углы и получается готовый план.

Где надо - подкорректировали, где надо - дорисовали. Затем, добавили двери, окна и мебель из структуризированного каталога и вот уже через 5 минут у вас готов отличный набросок который не стыдно показать.

Во время ремонта это приложение станет просто незаменимо. Круто то, что затем все полученные помещения можно объединить в один проект и получится квартира или дом.

Housecraft

Одним из первых тестовых примеров дополненной реальности была программка от Apple позволяющая расставлять парочку предметов мебели. Разработчики Housecraft развили эту идею и добавили кучу интерактива и элементов домашней утвари?

Предметы можно расставлять с высокой точностью, поворачивать, масштабировать и даже располагать виртуальные модели друг на дружке. Так что обставить комнату элементами интерьера, пусть и виртуальными предметами, не составит труда.

Night Sky

Далеко не новое приложение Night Sky после недавнего апдэйта получило два режима дополненной реальности - классический, с накладыванием звездного неба и с отображением солнечной системы. Правда последняя фича доступна только по подписке. Хорошо что хоть первый меся бесплатный. Так что побаловались, поизучали небо и нашу систему и на этом достаточно.

Яндекс.Карты

Ребята из Яндекса решили стать первопроходцами в мире где картография и дополненная реальность сосуществуют. В режиме пешехода при построении маршрута на местности будет отображаться точка и путь к ней.

Пока все это реализовано очень простенько и практически не имеет какой-либо пользы, но является наглядным примером того, что и в этом направлении можно работать и это будет смотреться органично.

Осталось допилить привязку маршрута следования, добавить к зданиям интерактивные таблички и сделать толковые очки дополненной реальности и технологичное будущее однозначно станет на шаг ближе.

App in the Air

Это приложение подскажет и покажет маршруты и статус полета в режиме онлайн тех или иных авиарейсов. Если отбросить кучу основных функций и ориентироваться на дополненную реальность, то исходя из своей истории полетов за все время или за конкретный год программа покажет на трехмерном шаре все ваши перелеты и накрученный километраж.Пользы от этого мало, ну конечно можно замутить красивый кадр в Инстаграм.

А вот если бы разработчики интегрировали полеты рейсов в дополненную реальность в режиме онлайн было бы намного круче.

Paint Space AR

И закрывает наш рейтинг рисовалка в AR. Ничего особенного тут нет - выбираете цвета, инструменты или какие-нибудь эффекты и просто балуетесь, расписывая виртуальное окружение. Зачем это может понадобиться на практике - я не знаю.

Так еще и разработчики предоставили лишь ограниченное количество инструментов, цветов и возможностей. За остальное извольте платить.

К сожалению, приложений реализованных с применением дополненной реальности в App Store ничтожно мало, а толковых из них еще меньше. В Google Play такие программы начнут появляться чуточку позже, ибо Google затянула с выпуском пакета для разработчиков.

От Apple станет основным фреймворком, с помощью которого разработчики будут создавать приложения новой категории – приложения дополненной реальности (AR-приложения). В некотором роде, появление этого инструмента можно сравнить с запуском App Store. В случае с App Store, это было появление приложений для работы на сенсорном экране, в случае с , это станут приложения для работы с дополненной реальностью.

Система iOS 11 пока ещё не вышла, но уже стали появляться великолепные демонстрационные приложения, в которых используется эта технология. Лично я с большим интересом наблюдаю за становлением этой новой технологии, так как вижу в ней огромный потенциал как в области развлечений, так и в области практического применения.

Что такое ARKit ?

ARKit является разработкой Apple и станет для разработчиков приложений основным инструментом, который возьмёт на себя основную нагрузку по разработке приложений для работы с дополненной реальностью. Для работы этой технологии, Apple использует встроенную камеру устройства, его процессор и его некоторые датчики дли анализа окружающего пространства. Устройство автоматически определяет горизонтальные поверхности и позволяет пользователям размещать на них подходящие объекты. Apple также берет на себя все вычисления, связанные с прорисовкой теней и всех передвижений при перемещении камеры.

Таким образом, для каждого разработчика AR-приложений отпадает необходимость каждый раз изобретать велосипед, можно просто воспользоваться готовым фреймворком и написать своё приложение поверх него. Также как и в случае с App Store, инструментарий ARKit позволяет разработчикам сосредоточиться на творчестве, на создании новых областей применения этой технологии.

Приложения, созданные с помощью ARKit iOS будут запускаться на устройствах, оснащённых процессорами семейства A9 и A10. В список поддерживаемых устройств относятся следующие модели устройств: iPhone 6s, iPhone 6s Plus, iPhone SE, iPhone 7, iPhone 7 Plus, 9.7 iPad (2017), 9.7 iPad Pro, 10.5 iPad Pro и 12.9 iPad Pro.

А теперь, давайте перейдём к рассмотрению уже созданных демонстрационных приложений.

1. Вид с высоты птичьего полёта в Apple Maps

В iOS 11, приложение «Карты» обзавелось новым режимом «Вид с высоты птичьего полёта ». Работает для карт ограниченного количества городов, но позволяет полетать над ними с помощью технологии виртуальной реальности при включении данного режима в «Картах».

2. Приложения для измерений

Мы уже наблюдаем наплыв демонстрационных AR приложений для измерения пространства, что в полнее естественно.

Так как инструментарий ARKit позволяет с помощью камеры разметить пространственное положение различных объектов, то в приложениях, созданных на основе этой технологии, можно измерять расстояние между ними с поразительной точностью.

3. Рисование в 3D

Так как инструментарий ARKit делает пространственные разметки в трёхмерном измерении, то теперь также появилась возможность создавать рисунки в 3D. При перемещении камеры, ваш «рисунок 3D» будет располагаться соответствующим образом.

4. Приземление « Falcon 9 »

Почему бы не посмотреть как будет приземлятся первая ступень ракеты «Falcon 9» на поверхность вашего бассейна?

5. Несметное количество игр

На конференции WWDC, во время основной презентации, Apple показала демо игру, которая была создана с помощью ARKit. И я так подозреваю, что эта технология будет в основном использоваться в этом направлении. Уже можно наблюдать появление небольших шутливых разработок, показывающих степень интерактивности AR-игр. Будет здорово поиграть в «В завоевателей космоса» или в «стрелялку» в рабочие часы в офисе!

Виртуальный спинер в ARKit

Другой разработчик, используя ARKit, превратил парковку в настоящую видеоигру:

6. Интерактивные виды искусств и перформансы

Инструментарий ARKit будет способствовать дальнейшему развитию всякого рода перформансов и других видов интерактивного искусства. И самое лучшее в этом – отсутствие занятого физического пространства и отсутствие необходимости личного присутствия где бы то ни было. Действия волшебства будут разворачиваться прямо по середине вашей гостинной комнаты.

7. Самые крутые ARKit демо

Ниже даём ссылки на самые крутые демо-приложения, созданные пользователем Твиттера под ником «Mad With ARKit». Его разработка, под названием «межпространственный портал» служит доказательством того, как разработчики могут использовать инструментарий и различные виды фреймворков в iOS 11 для создания у пользователей iPhone и iPad опыта «погружённости в ситуацию».

Бонус: Новые примеры использования ARKit

ARKit Модель Тесла 3

Модель «Тесла 3» от поклонника, который ни как не может дождаться получения этой новой модели и с помощью фреймворка ARKit создал виртуальную модель в своём реальном пространстве, и на которой можно включать головные фары и многое другое.

https://twitter.com/JelmerVerhoog/status/881237798623293440

Заказ еды с помощью ARKit

Разработчик Alper Guler создал приложение с помощью ARKit. Оно позволяет отобразить различные блюда на вашем столе, а также позволяет производить некоторые действия с картинкой: увеличивать, размещать в разных зонах и другое.

Баскетбол у вас на рабочем столе

Небольшой эксперимент с размещением виртуальных объектов в реальном пространстве с использованием ARKit.

Клип A-Ha – Take On Me с применением ARKit

Разработчики создали довольно неплохой клип на Take On Me и сделали это с помощью новой технологии Apple ARKit. Результат превзошёл все ожидания и стал одним из лучших демонстраций возможностей ARKit. Само видео длится меньше двух минут, но им наслаждаешься с первой до последней секунды:

Apple Maps с применением ARKit

Разработчик Эндрю Харт сделал демо-версию приложения, показывающего будущее навигации с ARKit и CoreLocation на iOS 11. Дополненная реальность будет добавлять стрелки и синюю линию прямо в реальный мир, делая путь, по которому надо идти, ясным и очевидным.

Сцена из фильма Звонок с использованием ARKit

Разработчик iOS Абишек Синг, который работает с платформой ARKit, создал новое демо, благодаря которому самая страшная сцена из фильма ужасов Звонок происходит прямо у вас в комнате. Самара полностью вылезает из телевизора и идёт по вашей комнате.

Какие виды AR-приложений ожидаете вы? В чем заключается ваша идея в создании лучшего AR-приложения? Ждём ваши комментарии.

5 июня на ежегодной конференции разработчиков компания Apple анонсировала собственную платформу ARKit для создания приложений дополненной реальности. Инструментарий AR (Augmented reality) доступен в бета-версии iOS 11 и уже сейчас разработчики используют его для реализации своих идей.

Новое : 11 интересных игр и приложений в дополненной реальности для iOS 11, которые уже бесплатно в App Store.

О некоторых работах других умельцев мы уже , но новые появляются едва ли не каждый день. Вот, к примеру, настоящая морская битва на полу офиса.

Несмотря на некоторую комичность реализации идеи с летающими котиками, в перспективе она может иметь широкий спектр применений. Показательным является то, что объекты дополненной реальности продолжают существовать в пространстве большого офиса, сохраняя все свои параметры даже будучи вне зоны «зрения» камеры смартфона.

В следующем ролике внимание акцентировано на реалистичности изображения и изменении физических свойств реального объекта.

Точность позиционирования - сильная сторона ARKit:

Вот BB-8 катается по квартире:

Тут виртуальный мир эффективно соединился с реальным:

А еще среди разработчиков особо популярны танцевальные приложения. Раз:

Демонстрация ARKit от Apple

Во время презентации вице-президент Apple Крейг Федериги показал несколько примеров возможностей технологии дополненной реальности. Сперва он разместил виртуальные посуду и лампу на реальном столе. При перемещении камеры эти предметы сохраняли свои пропорции, позицию и даже коректно отбрасывали тень в зависимости от угла освещения. Кроме того, Федериги продемонстрировал виртуальный конструктор Lego и обновлённую на основе ARKit физику мяча в игре Pokemon Go.

В ходе той же конференции свою разработку на движке Unreal Engine и ARKit показала студия режиссёра Питера Джексона Wingnut AR. Футуристический городок-колония под обстрелом космических боевых кораблей - заготовка будущей демо-игры.

Генеральный директор Apple Стив Кук назвал дополненную реальность таким же важным технологическим достижением, каким в свое время стали смартфоны. Сейчас трудно спрогнозировать дальнейшее совместное развитие этих достижений, ведь в плане удобства смартфон уступает очкам дополненной реальности, однако существенный рост мобильных игр и другого развлекательного контента гарантирован. Чего только стоит пример Pokemon Go.