不过，将物理原理应用在手势交互上并不容易，有时候用户容易将手放错位置，甚至直接将手指插入AR物体中。为了达到最自然、逼真的体验感，科研人员尝试从交互感知（手触碰AR物体的自然感）、手势操作（成功抓取和旋转AR物体）、行为理解（适应将智能手机作为“窗口”来看AR这件事）这三方面来优化Portal-ble的交互和界面。
他们开发了一系列任务来测试和了解用户的感知和行为规律，接着在方案中加入感知反馈和调节适应机制。Huang表示：Portal-ble的交互体验感有点像是在Photoshop中画直线，尽管你很难画出完美的直线，但是程序会通过自动平滑让你画出完美的直线，这也是我们希望在Portal-ble中实现的效果。
除了调节适应手势操作外，布朗大学的科研人员还加入了感知反馈机制，比如用点亮AR物体、手机振动等方式来提示手势的交互。
关于优化实验
接下来，就一起来看看布朗大学科研人员的整个实验过程吧。
为了解Portal-ble方案的可行度，科研人员设计了一些体验原型，并记录了体验者对一些问题的反馈，比如：拾取远处物体的时候是否有困难，能否准确、舒适地与移动中的物*互等，这些问题如果没有得到实际测试，是很难想象出答案。
每位科研人员被要求设计内容操控和内容创作两种任务，前者指的是：选择、转化、直接控制，比如扔飞镖、玩保龄球、堆方块、搬东西等。而后者指的是一系列自由的手势，包括在空中画方块、画直线、写名字等。此外，每位科研人员需要分别招募两名参与者。
在全部24名（12x2）参与者完成实验后，科研人员发现了三类问题：感知问题、操作问题和行为问题。
比如，其中有一多半人无法理解自己的手与AR物体相对的空间位置。这主要体现在两个方面：1，难以估计自己与AR物体之间的距离，甚至够不到远处的物体；2，不确定手该伸到多远能碰到AR物体，因此在画画的时候笔触容易接不上。
而操作上的问题则包括：捡不起东西、AR物体不小心掉下去，相当影响体验感。另外，手势跟踪的噪波会影响手势识别的准确性，而且自然的抓取手势效果并不太好。产生这些问题的原因可能有三个：手指不小心离开可识别区域、遮挡问题、周围环境光影响红外光识别。
行为问题方面，指的是参与者缺少对徒手直接交互的操作方式的心智模型。为了熟悉AR物体的深度，一些参与者会通过移动智能手机，一只手固定手机，一只手移动，或者同时配合手机和手的方式来测量。但是这些动作通常会造成参与者的手移动到无法追踪的区域，让任务更加难以完成。
此外，参与者们也难以区分交互过程中的状态，有时候已经抓到了AR物体，却会再一次做出抓取手势，有的人甚至不确定手中到底有没有抓到东西。
为了优化这些问题，科研人员在Portal-ble中加入了三种适应机制：1，用线索去提示空间距离之间的关系；2，提示物体在附近；3，用体感反馈来表现默认、悬停和抓取状态。
他们使用的线索包括视觉和声音两种，视觉指的是手在AR物体附近的时候，物体周围会显示绿色的轮廓线，抓取到物体之后，轮廓会变成蓝色，以此来显示交互的状态。而声音则指的是，你的手在与AR物体不同距离时，Portal-ble会发出不同音调的声音。科研人员还是用了一种光线投影的方法，避免了多个物体同时发出声音的状况。
