推动国内学术交流 助力科研成果推广

期刊论文、出版出书、评职称学术咨询

社会认可、全国通用、升职加薪的通行证

基于增强现实技术的角色交互设计

分类:电子论文 时间:2022-03-29 热度:601

  [摘要]应用 3DsMax 虚拟角色建模技术以及 Unity3D 技术,开发了一款基于移动设备的角色展示系统。利用移动端摄像头扫描二维识别卡,将信息以三维立体影像的方式在移动设备的屏幕中呈现,实现在任意真实环境中与虚拟角色的互动功能。该系统是基于 Unity3D 开发的安卓应用平台,具有跨平台和开放性特点,后期可用于商业、教育或儿童认知等虚拟角色 AR 产品的交互展示,在增加趣味性、交互性的同时还可降低开发成本。

基于增强现实技术的角色交互设计

  [关键词]增强现实; 角色交互; Unity3D; 3DsMax

  0 引言

  随着计算机科学技术的发展,AR 技术的应用领域越发广阔,AR 产品逐步进入受众视野,潜移默化之中影响或改变着受众的生活方式。从二维的平面视觉到三维的角色塑造,受众对产品信息的接收,不在停留在单一方向上的被动获取。与此同时,市场需求的多样化,也要求产品角色在信息传达方式上更加多元。而虚拟现实技术的革新,带来了虚实结合、实时交互的全新用户体验[1],让受众在虚拟化空间中与产品角色进行对话,实现虚拟世界与真实世界的无缝连接[2]。

  增强现实是一种三维自然交互技术[3],角色虚拟交互是增强现实角色特有的信息传递方式。基于 AR 技术来实现虚拟角色交互设计的过程中,可通过中间扫描设备,高效、快捷地实现三维角色与现实生活场景的超现实展示,进而实现虚拟角色与受众之间的“零距离”互动。在这一人机交互过程中,一方面,虚拟角色犹如潜在的推销员,直接或间接对受众传递着产品的商业信息,极大地提升了信息传递的有效性、准确性。另一方面,虚拟角色与受众如此自然、亲近的交互方式,也为 AR 技术与行业合作提供了更加多元的角色经济发展空间。

  1 基于增强现实技术的三维虚拟角色交互实现

  增强现实技术是以计算机技术为基础,将虚拟信息自然地融合到真实世界中的技术[4]。Unity3D 作为目前实用性较强的虚拟开发工具,具有动画系统设定、图形图像处理、碰撞与触发、粒子系统调用、光照烘焙等功能。该工具的最大优点在于内置配备多种标准应用资源,允许玩家轻松实时创建互动内容[5]。在设计实现的过程中可直接投入设计使用,结合 Vuforia 开发平台及三维软件创建与实现,大大提升设计者的工作效率。

  1. 1 基于 3DsMax 三维虚拟角色建模

  角色建模是三维虚拟动画设计的基础[6]。 3DsMax 角色建模功能强大、可扩展性好[7],可结合角色后期动作对模型进行优化处理,实现角色模型设计与应用性能的提升。基于 3DsMax 的软件建模方式与设计制作特点,可将三维虚拟角色建模分为以下几点:

  1. 1. 1 前期设定

  前期设定的主要任务是整合资料与确定角色定位。包括根据项目,基于目标受众需求与喜好,提炼设计元素,确定风格与色调。结合 Photoshop 软件对角色形象进行提炼与概括,根据角色结构特点,绘制出正、侧、背角色三视图,为角色建模提供空间构成依据。

  1. 1. 2 模型创建

  模型创建的主要任务是实现交互中的三维虚拟角色的模型设定,是核心环节,涵盖以下几个创建内容:

  1) 用 Zbrush 及 3DsMax 软件进行角色建模。结合角色三视图,通过 3DsMax 中几何体建模、参数设置、修改器的使用,创建角色轮廓。结合 Zbrush 软件笔刷进行推动和堆叠动作,进一步刻画角色细节部分,并在 3DsMax 中进行面数的优化及调整。

  2) 模型中的骨骼绑定。在创建骨骼时,确定人物模型的运动关节,根据模型每个部位构造特征,进行骨骼的创建。修改骨骼参数、调整骨骼大小以适配角色模型,并在修改器中设置蒙皮参数,结合封套设置,对各个点的分配权重进行重置,并测试权重分配准确度。

  相关知识推荐:会议论文2个月可以检索吗

  3) UV 展开与贴图。根据角色造型特点,设置 UVV 展开修改器参数,在边层级中调整与合理化设置切割线位置,以便完整平铺多个部分。结合松弛参数、将贴图高效匹配到原网格形状上。随后,将展开的 UV 模板导入到 Photoshop 软件中,绘制对应位置的贴图内容。通过贴图、材质设置,在烘焙技术的应用下完成部分局部对象设计[8],以此实现角色设定预期效果。

  1. 2 AR 识别卡的设置与制作

  AR 识别卡需要结合视觉和图像识别的内容进行设置,并上传到 ARPet 数据库中,实现后续的信息匹配,主要包括以下两部分:

  1. 2. 1 识别卡的设置与设计

  利用 Photoshop、Illustrator 绘图软件进行 AR识别卡的样式设定,在识别卡设计中基于整体风格绘制二维角色交互识别卡形象。在设计匹配角色交互识别卡时,需结合识别点的提取元素特点,有效绘制识别转折点,并对识别卡进行灰度处理,提取黑白图像的尖锐处进行测试。

  1. 2. 2 Vuforia 配置

  在制作 AR 识别卡时,需要将 AR 识别卡样式上传到官方网站生成 AR 识别卡数据库,获取项目 License Key,使用摄像头扫描角色卡片生成虚拟角色。需要提前把角色卡片里面的信息进行上传,制作 Target Manager。通过扫描并匹配角色数据信息,实现真实场景与虚拟角色的叠加展现。

  1. 3 虚拟角色交互设计

  通过 Unity3D 技术结合 Vuforia 配置实现在移动设备( Android) 上的交互应用,完成受众在任意真实环境中的虚拟角色互动过程。主要涉及以下几点:

  1. 3. 1 动画编辑制作

  通过 Unity3D 中的 Timeline 组件对不同角色以及与角色绑定在同一环境下的旋转按钮进入动画编辑制作。结合动画运动规律及角色特点,通过关键帧的设置方法对动画关键位置进行设定,在设置关键动画时需注意动作的快慢在设置点上的准确表达,让动画节奏有缓有急。并设置动作的预备、极限、缓存动画,调整中间动画。

  1. 3. 2 目标的跟踪和失去优化

  为避免因帧数跟踪目标丢失导致重播动画效果。通过封装 ImageTargetMonitor 组件进行目标状态的监听并留下 OnTracked( ) 和 OnLost( ) 两个抽象函数提供给子类进行实现。在 Update( ) 函数中不断监听目标的状态并与上一次状态进行比较,如果上一次状态为失去,而这一次状态为跟踪,则表示跟踪已经成功,并对其执行响应的 OnTracked( ) 函数。当上一次状态为跟踪,而这一次状态为失去,则就标记一个 lostTime ( 失去的时间) 但不会立刻执行 OnLost( ) 函数,而会等待一段时间,在这段时间内检测跟踪目标是否失去状态以及当时间是否超过定义的失去时间阈值,如果都满足则会执行 OnLost( ) 函数。以此来实现 AR 应用所有角色进入时都有进入动画、音乐和粒子效果播放等行为。而如果没有状态监听组件,则无法得知何时进行动画、音乐和粒子效果播放等行为。ImageTargetMonitor 组件通过了 OnTracked( ) 抽象方法,子类重写 OnTracked( ) 的方法控制进入动画播放的时机。如图 1 所示。

  1. 3. 3 旋转箭头的设置

  在按钮设定过程中,结合 3D 呈现形式,并结合角色进行绑定。旋转箭头会跟随角色一同出现,并配有进场动画。为实现上述功能,制作了一个 Arrow 组件,通过在 Arrow 组件中重写 OnValidate( ) 方法,如图 2 所示。使在开发过程中可以实时看到旋转箭头绑定上材质和预览发光颜色的功能。Arrow 组件是一对旋转按钮其中包括向左旋转按钮和向右旋转按钮,而具体功能的实现是封装在 ArrowButton 组件中,而 Arrow 组件只是对外的一个接口。左右旋转按钮各对应一个 ArrowButton 组件。

  1. 3. 4 角色特效转换

  在点击角色时,会出现相应的特效表现,角色的动作状态也随之更改。通过 CharacterTransform 组件进行状态的切换,CharacterTransform 组件同样继承了 TouchListener 组件对点击进行监听。而点击角色会在正常状态和特效状态之间进行切换,并将角色原本的 Shader、Mesh 进行替换。特效状态使用动画蒙皮网格的顶点作为发射点,它使用特殊的 Shader 将顶点位置转换为与 GPU 友好的数据,从而避免花费额外的内存和 CPU 时间来处理它们,如图 3 所示。

  1. 3. 5 小游戏的设定

  在角色出现状态下,设计了猜杯子的小游戏环节。编写 CupGame 组件实现游戏的具体逻辑。通过 CupGame 中的 GamePlay( ) 方法进行游戏的播放。在游戏播放时会出现三个杯子,杯子会罩住当前角色,会通过变化位置来迷惑用户进行选择。当用户点击某个杯子后,调用 CupGame 中的 GameResult( ) 方法进行游戏的答案提交。如图 4 所示。

  1. 3. 6 系统设置按钮制作

  设置 3 个系统控制按钮,分别为闪光灯的开与关、控制应用是否静音、控制角色视角切换。3 个按钮都只有生效和失效两种状态,并抽象出 1 个设置按钮的组件、实现状态的 UI 形态控制,留下 OnActive( ) 和 OnInactive( ) 的抽象方法供子类复写,控制 3 个按钮的生效与失效的状态,避免重复编写代码。 2 实例测试分析通过对以上表述中基于增强现实技术的三维虚拟角色交互设计进行实例测试,以此来检验角色交互设计中的合理性与有效性。

  2. 1 虚拟建模与识别卡测试

  角色的合理化设定,直接影响着受众的视觉体验与整体感受,基于受众的需求分析,角色设定时根据典型代表性形象,选择: 男、女、老、少、胖五种角色形象进行建模,如图 5 所示。

  在与受众进行互动的过程中,VR 识别卡的设计具有美观性与视觉统一性特点,如图 6 所示。

  选择 Android 5. 0 系统手机进行交互测试,界面加载正常,如图 7 所示。

  在互动小游戏界面的设计中,游戏设置具有直观性与易操作的特点,如图 8 所示。

  对 5 个角色调出使用时的性能全部进行了测验,包括软件载入、识别灵敏性、系统流畅性的测试,如表 2 所示。

  以上测试结果可以得出,5 个角色的载入响应时间均不超过 6 秒,可以快速进入角色场景; 扫描识别卡时可以正确迅速显示相应角色信息; 使用系统时系统流畅。交互性能达到了较好的指标,符合性能要求。

  3 结语

  三维虚拟角色设计是链接商品信息与受众的有效手段,虚拟交互也为人机交互方式带来全新感知体验。三维虚拟角色设计的合理性关系到信息传达的有效性与准确性,基于 Unity3D 平台与 Vuforia 设计开发的三维虚拟角色交互系统,包容性大,在增加趣味性、交互性的同时还可降低开发成本,可为相关行业的虚拟角色塑造提供有效参考。——论文作者:薛莹莹

  [参考文献]

  [1]王安然. 增强现实( AR) 技术环境下真实与虚拟关系的实在性分析[J]. 自然辩证法通讯,2021,43( 4) : 40 - 46.

  [2]AZUMA R T. A survey of augmented reality[J]. Presence: teleoperators&virtual environments,1997,6 ( 4 ) : 355 - 385.

  [3]魏小东,孙靖宜. 增强现实技术应用于第二语言学习的文献综述[J]. 电化教育研究,2021,42( 3) : 81 - 88.

  [4]袁庆曙,王若楠,潘志庚,等. 空间增强现实中的人机交互技术综述[J]. 计算机辅助设计与图形学学报, 2021,33( 3) : 321 - 332

  .[5]赵文静,曹忠. 国外增强现实教育应用的研究进展[J]. 中国教育信息化,2019( 10) : 30 - 35.

  [6]于兵科. 三维虚拟动画设计中的角色建模与行为控制[J]. 现代电子技术,2020,43( 10) : 108 - 110.

  [7]金勇进,吴产乐,叶刚. 基于 Java3D 和 3DMAX 的虚拟实验元件建模与可视化研究[J]. 计算机应用研究, 2010,27( 7) : 2575 - 2578.

  [8]杨雅丽. 基于虚拟现实的 3D 动画室内场景模型建[J]. 构现代电子技术,2021,44( 6) : 85 - 89.

文章名称:基于增强现实技术的角色交互设计

文章地址:http://m.sciqk.com/p-13087.html

相关推荐:

NOW!

Take the first step of our cooperation迈出我们合作第一步

免费咨询,高端品质服务、还犹豫什么呢?


点击咨询学术顾问