[3D Selection]AR/VR/MR虚拟现实环境中的3D场景物体交互方法调研


前言

本篇文章主要是记录自己调研的一些XR环境下的人物交互方法,主要以获取密集且容易被遮挡的物体的算法为主。论文粗读调研为主,如有错误,欢迎指出。

目前已收录算法:

(*号表示有视频演示)
2005 IntenSelect
2006 Smart Ray
2007 Ballon Selection *
2011 SQUAD
2015 Intent Driven Selection *
2018 Precise Head- and Eye-Based Target Selection *
2019 CrossingBased Selection with Virtual Reality Head-Mounted Displays *
2020 Fully-Occluded Target Selection *
2021 Gaze-Supported 3D Object Manipulation *
2022 MultiFingerBubble *
2023 Gaze-Hand Alignment for Selection *
2023 Bare-Hand Mid-Air Pointing Selection *
2023 Gaze-based Target Selection *
2023 FocalPoint *
后续更新中…

Keywords : Distant Object, Selection, Manipulation, Dense Environments


提示:以下是本篇文章正文内容,下面案例可供参考

一、Overview

1.1 3D Selection 综述文献

2019 Computer Graphics Forum
A Survey on 3D Virtual Object Manipulation From the Desktop to Immersive Virtual Environments.

2013 Computers & Graphics
A Survey of 3D Object Selection Techniques for Virtual Environments.

1.2 相关资源网站

3SDIT(一个收录了多种交互算法的网站,可根据交互目标的尺寸/密度等信息进行算法筛选)

在这里插入图片描述

Difeng Yu (做这块较多的国内学者)
在这里插入图片描述
截至至2019年的较为经典的交互算法收集
在这里插入图片描述

2017年之前较为经典的算法
在这里插入图片描述

很多3D手部交互大佬都推荐的一本书3D User Interfaces: Theory and Practice,涵盖了很多的交互算法设计思路:
在这里插入图片描述

2018 SIGGRAPH 的 Course (3D User Interfaces for Virtual Reality and Games: 3D Selecotin,Manipulation, and Spatial Navigation),讲解了部分交互算法的实现和心得体会:
在这里插入图片描述

1.3 部分文章对3D Selection算法的简单总结

2023 SIGCHI
Exploration of Bare-Hand Mid-Air Pointing Selection Techniques for Dense Virtual Reality Environments
按照算法本质对交互方式的分类:
例如:随着人工智能的不断发展,机器学习这门技术也越来越重要,很多人都开启了学习机器学习,本文就介绍了机器学习的基础内容。

2023 IMWUT
FocalPoint Adaptive Direct Manipulation for Selecting Small 3D Virtual Objects
按照交互物体密度/尺寸/距离对交互算法的分类: