Можно ли пользоваться iPhone в iOS 14, не касаясь дисплея

Недавно мы узнали, что разработчики Apple добавляют распознавание поз тела и жестов рук на фотографиях и видео, используя обновленную платформу Apple Vision.

Эта функция позволяет приложениям анализировать позы, движения и жесты людей. Apple предлагает нам несколько примеров – фитнес-приложение с отслеживанием движений пользователя, приложение для обучения технике безопасности и наглядное обучение, и приложение для редактирования фотографий, которое скоро сможет находить фотографии/видео на основе сходства поз человека.

В частности, обнаружение поз рук обещает пользователям предоставить новый вид взаимодействия с приложениями. Демонстрация Apple показала, как работает рисование на экране при простом соединении двух пальцев руки.

Кроме того, приложения смогут использовать распознавание для наложения эмодзи или графики на руки пользователя, как показано ниже.

Специальный каркас сможет обнаруживать сразу несколько людей на одном изображении, но его алгоритмы могут не сработать с людьми в перчатках, согнутыми руками или мешковатой одеждой. Алгоритм еще не совершенен, поэтому еще также не сумеет распознавать позы тела и жесты рук при неудобном расположении человека на картинке.

Подобную функциональность мы уже видели через ARKit, но она работает только с камерой заднего вида на совместимых моделях iPhone и iPad. С обновленной платформой Vision у разработчиков будет гораздо больше возможностей!

---