[HTC HIVE] Как использовать встроенную камеру

Раздел, посвящённый Дополненной Реальности и Виртуальной Реальности

[HTC HIVE] Как использовать встроенную камеру

Сообщение jetyb 25 окт 2017, 10:34

Здравствуйте.

Есть модель HTC Hive со встроенной передней камерой. Хочу использовать эту камеру для создания дополненной реальности:
например есть реальное рабочее место (стол, стул), камера показывает реальное их изображение, а поверх показывает 3D.

Что я хочу получать для каждого кадра:
- RGB изображение с 3D (знаю как получить)
- RGB изображение с камеры шлема
- Depth изображение с камеры глубины шлема (если она надеюсь есть)
Если есть камера глубины, то на основе этих изображений можно сформировать кадр дополненной реальности (что ближе - то реальность, что дальше - то 3D). Если камеры глубины нет - то придется в реальности натягивать зеленый экран, а дальше в постэффекте просто распознавать зеленые пиксели.

Как получить кадр с камеры шлема?

Опция отображения реального мира в HTC Hive есть, но она показывает все контурами (c Edge Detection) и без ограничения дальности.

К тому же, как я понял, это происходит на аппаратном уровне шлема, после получения кадра от Unity. Полупрозрачные черно-белые контуры реальности просто накладываются на виртуальную сцену.
Может есть какие-то плагины?

З.Ы разбираюсь сейчас сам, актуальные вопросы меняются

Добавлено.
Разобрался. Для дополненной реальности HTC не годится, надежда на HoloLens
jetyb
Адепт
 
Сообщения: 1275
Зарегистрирован: 31 окт 2011, 17:21

Re: [HTC HIVE] Как использовать встроенную камеру

Сообщение [bm] 04 дек 2017, 08:40

Для AR неплохо смотрится вот это https://bridge.occipital.com/
Mafia Rush: universal iOS game _https://goo.gl/CKq4D Android _https://goo.gl/slFLXx
Shooter Ball: Android _https://goo.gl/21QyPw
skype: bmindfield
Аватара пользователя
[bm]
UNIверсал
 
Сообщения: 424
Зарегистрирован: 11 май 2010, 22:33
Откуда: Россия, Ижевск

Re: [HTC HIVE] Как использовать встроенную камеру

Сообщение Tolking 04 дек 2017, 10:14

Для дополненной реальности HTC не годится, надежда на HoloLens

Надеешься получить заполненный буфер глубины реального мира? А в Деда Мороза веришь?
Хотя устройство за 300 000 рублей может и имеет что-нибуть чтобы делать скан расстояния до каждой точки изображения в реальном времени...
Либо какую-то железяку чтобы рассчитывать расстояние из пары изображений (2 камеры у него есть) в реальном времени по параллаксу...
Но лично я буду сильно и приятно удивлен если это так...
Ковчег построил любитель, профессионалы построили Титаник.
Аватара пользователя
Tolking
Адепт
 
Сообщения: 1912
Зарегистрирован: 08 июн 2009, 18:22
Откуда: Тула

Re: [HTC HIVE] Как использовать встроенную камеру

Сообщение Paul Siberdt 04 дек 2017, 11:38

Встроенная камера HTC Vive не может работать в качестве обычной камеры.

Сравнительно точно и дёшево буфер глубины можно получить через бинокулярную систему, чем камера Вайва не является. Смотрите в сторону МХ-гарнитур, но, увы, разрешение камеры на сегодня - еще бОльшая проблема, чем разрешение дисплеев виртуального шлема. Пока в природе не появилось ни 4К и 8К МХ-гарнитур, ни стогерцовых реалтаймовых 4К и 8К камер.
Аватара пользователя
Paul Siberdt
Адепт
 
Сообщения: 5100
Зарегистрирован: 20 июн 2009, 21:24
Откуда: Moscow, Russia
Skype: siberdt
  • Сайт


Вернуться в AR / VR

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 2