一家公司如何为您的 Wear OS 智能手表赋予超能力

一个人使用 Doublepoint 的手势控制系统做出手势。
双点

Doublepoint公司首席执行官 Ohto Pentikäinen 在向 Digital Trends 介绍其迷人的下一代手势控制系统时说道:“这是构建下一代触摸屏的问题。”你能想到的最好的方式就是苹果的双击功能

我在CES 2024期间通过视频通话与 Pentikäinen 聊天,了解更多信息。

不仅仅是一个应用程序

Ohto Pentikäinen,Doublepoint 首席执行官。
Ohto Pentikäinen,Doublepoint 首席执行官Doublepoint

您可能已经在 CES 2024 上看到了 Doublepoint 为 Wear OS 推出的应用程序, 名为 Wow Mouse ,但这只是该公司正在努力的开始。 Wow Mouse 为您的 Wear OS 智能手表添加了手势控制,有效地将其变成手腕上的鼠标,使用手指和手腕运动进行操作。但 Wow Mouse 是 Doublepoint 正在做的事情的一个相对基本的演示。

“我们提供了更全面的东西,”当被问及 Wow Mouse 应用程序时,Pentikäinen 说道,“我们能做的不仅仅是单击一下。我们当前的硬件能够做的最重要的事情是捏和按住,这意味着您实际上可以滚动以及操纵对象。”

Doublepoint 将这些称为“微手势”,它们包括从点击到选择、点击到滚动和双击等所有操作。除了Double Tap 的双捏手势之外,拥有更多手势非常有吸引力,这也是 Pentikäinen 将该技术与触摸屏进行比较的核心原因,因为它复制了我们已经在触摸屏上使用的许多相同手势。

那么,Doublepoint 的系统是如何运作的呢?

这些手势是如何工作的

“微手势检测的工作原理与基于计算机视觉的手部跟踪不同,”Pentikäinen 使用熟悉的比较解释道。 “它使用相机来计算你的手的姿势,并且当你的手指相互接触时,它每毫秒或无论帧速率是多少都会计算一次。我们检测触摸的方式使用惯性测量单元。”

惯性测量单元(IMU)听起来像是一个特殊的硬件,但实际上,它只包括加速度计、陀螺仪和磁力计。换句话说,核心传感器几乎存在于所有智能手表和其他可穿戴设备中。

Pentikäinen 说:“它会寻找手指相互接触时引起的振动。”此时,Doublepoint 的算法会将这种振动与您移动手指时发生的其他振动区分开来。然而,创新的捏合手势非常不寻常,而且对算法的吸引力至关重要,它有点不同,而且要复杂得多。

“对于捏和握,我们还需要知道您的手指何时保持在一起,我们实际上使用肌腱监测来实现这一点。我们使用光学心率传感器不是为了观察肌肉,而是为了观察将手指连接到肌肉的肌腱,并且通过运动来告诉我们何时停止触摸,”他说。

配置和精度

Apple 的 Double Tap 成功的部分原因在于它无需任何设置或配置即可工作,而且非常准确。 Doublepoint 的系统怎么样?

“我们希望从一开始就将其作为我们的卖点之一,即我们不需要任何配置,并且当您戴上它时,它会立即起作用。这意味着我们需要制定一个流程来收集各种人群的数据,并考虑体重指数 (BMI)、年龄和褪黑激素水平等相关因素。我们已经能够达到非常非常好的准确度水平。几乎在97%到98%的范围内。当然,还有很多工作要做。”他说。

同样有趣的是,具有 Doublepoint 手势识别功能的智能手表可以与其他蓝牙设备(例如具有眼球追踪功能的设备)配对,以便它们协同工作。它使此类控制系统更加自然、更加私密,因为不需要语音识别作为备份或替代方案。

高通有兴趣

出门问问 Ticwatch Pro 5 的侧面和边框。
出门问问 Ticwatch Pro 5,采用了高通最新的芯片之一。安迪·博克索尔 / 数字趋势

手势控制并不是什么新鲜事,但毫无疑问,苹果的 Double Tap 系统最近重新燃起了人们对它们的兴趣。一旦Vision Pro 耳机发布,它可能只会受到更多关注,因为其他竞争系统可能会尝试新的和不同的东西,以使控制耳机更容易、更直观。因此,听到高通公司对 Doublepoint 的技术感兴趣也就不足为奇了。

“我们确实与高通签订了供应商协议,”Pentikäinen 透露。 “这意味着我们的想法是将我们的算法嵌入到高通芯片中,当然,他们现在向许多不同的手表和健身追踪器提供商提供这些芯片。”

除了高通之外,它还与传感器公司合作,将其算法嵌入到传感器本身中。然后是该公司自己的参考智能手表平台,Pentikäinen 表示“旨在让人们了解我们可以使用[算法]做什么,并展示我们如何将其构建到产品中。”

即将推出?

Doublepoint 参考智能手表的后视图。
Doublepoint 的参考智能手表Doublepoint

这是否意味着 Doublepoint 推出的一款采用手势和捏合技术、允许您滚动、滑动、更改音量或亮度等值的新型智能手表即将推出?

“我们还没有确定我们的合作伙伴何时能够将他们的产品推向市场的时间表,但我想说这些事情目前正在迅速发展,”Pentikäinen 说。

在我们简短的谈话中,Pentikäinen 多次对 Doublepoint 的手势控制系统和触摸屏进行了比较,最后我们更好地解释了他制作它们的原因。

“触摸屏基本上是从手机开始的,现在我们随处可见它,”他说。 “它启用了各种新设备。苹果去年在手势识别方面加大了力度,他们基本上表明手势将成为改进的重要方式。因此,对我们来说,我们只是想让尽可能多的公司使用我们认为的下一个触摸屏来实现这一点。”

虽然我们必须等待采用 Doublepoint 技术的智能手表上市,但您可以通过Wow Mouse 应用程序尝试基本版本,该应用程序现在可以通过 Google Play 下载用于选定的 Wear OS 智能手表。


Posted

in

by

Tags: