Сравнение алгоритмов нейросетевой и круговой фильтрации синтезированных RGBD изображений
Аннотация:
Проведено исследование причин возникновения конфликта вергенции-аккомодации человеческого зрения в системах виртуальной и смешанной реальностей. Рассмотрены технические и алгоритмические подходы по снижению и устранению конфликта вергенцииаккомодации в системах виртуальной реальности. В качестве технического решения выбран подход, обеспечивающий адаптивную фокусировку окуляра системы виртуальной реальности к точке конвергенции глаз человека, определяемой системой трекинга его зрачков. Рассматриваются возможные алгоритмические решения, обеспечивающие фокусировку изображения виртуальной реальности в соответствии с ожидаемой аккомодацией глаз человека. В качестве основных решений рассматриваются классическое решение фильтрации изображения в соответствии с дефокусировкой, вызванной естественной аккомодацией на заданную дистанцию, и решение, в котором соответствующая фильтрация выполняется с помощью нейросетевых технологий. Рассматриваются преимущества и недостатки предложенных решений. В качестве критерия корректности использовалось визуальное сравнение результатов дефокусировки изображения с решением, полученным методом физически корректного рендеринга с использованием модели человеческого глаза. В качестве основы физически корректного рендеринга использовался метод двунаправленной стохастической трассировки лучей с обратными фотонными картами. В работе представлен анализ преимуществ и недостатков предложенных решений.
Ключевые слова:
конфликт вергенции-аккомодации, виртуальная реальность, нейронные сети, система трекинга глаз, микродисплеи
