您当前的位置:快讯网 > 财经

可以通过草莓派DIY识别自定义手势

2021-08-24 14:16 来源:IT之家 作者:兰心雪 阅读量:17699 

通过帅气的手势操控投射在我们面前的电子影像,是科幻电影的基本配置。

现在,有些人已经把它从科幻电影中带入现实用手指控制眼前的世界

热衷于制作智能小玩意的油管博主Teemu Laurila制作了一副AR眼镜,可以通过草莓派DIY识别自定义手势。

将您想要设置的手势输入设备,以实现酷炫操作。

我有个大胆的想法!

自制增强现实眼镜中的世界

让我们先开始行动吧!

按住手指向下拉,即可完成亮度调节命令。

手势识别在镜头成像中叠加显示。

让我们以更直接的视角,透过眼镜看效果。

DIY流程

AR眼镜充满了科技感,让现实世界充满了赛博朋克的味道。

你为什么不冷静一点有了戒指,就可以运行命令了,这不比做博主好吗

首先,我们需要设计设备将包含哪些部分。

除了机身眼镜框,硬件部分还包括一个镜头组和一个0.6 mm PETG投影镜头,配件部分采用聚乳酸材料3D打印而成。

毕竟是智能设备的DIY怎么能不邀请万能迷你电脑树莓皮玩呢

在软件部分,手势识别程序依赖于python开源项目MediaPipe。

此外,Teemu Laurila还写了两个程序脚本。

一个是捏手指控制亮度的应用实例,另一个是实时视频中捕捉手势并传输到电脑进行处理,通过智能眼镜进行显示。

所有的条件都满足了,所以试着手工组装一下。

经过多次调整,所有零件最终组合成以下设备。

要使程序在设备上可用,首先,您需要一个草莓派作为程序支持。

然后设置内存,驱动,运行环境,多媒体接口,网络等条件对整个设备进行超频。

硬件和软件环境准备就绪后,调试应用程序。

应用功能的核心——手势识别模型由三个框架组成,包括手掌识别模型BlazePalm,Landmark模型和手势识别模型。

在识别算法的训练过程中,BlazePalm模型识别手掌的初始位置,优化移动终端的实时识别。

在BlazePalm识别的手掌范围内,Landmark模型识别21个立体节点的坐标。

在此基础上,手势识别模型根据关节角度识别每个手指的状态,将状态映射到预定义的手势,并预测基本静态手势。

手势信息是通过草莓派Zero W获取的.图像信息传输到计算机,由手势识别AI处理之后传输到设备,发出相应的手势命令,同步到投影图像中

它过去的生活

等一下,有相机,迷你投影仪,电脑处理器,也投影在一边这样的AR眼镜好像在哪里见过

没错,连使用的手势识别代码都是谷歌开源的。

虽然没有谷歌智能眼镜那样的智能手机功能,但与其语音控制和触控功能相比,Teemu Laurila的智能眼镜选择使用自定义手势触发命令,这是比较黑科技的。

同时选择较大的方形镜片进行投影,方便视觉观察

这款设备是天河城Laurila完成的第二版智能眼镜,在外观和性能上进行了优化。

在选材上,用0.6毫米厚度的投影镜头代替1毫米厚度,用聚乳酸材料代替丙烯酸,增加螺栓固定支架,弃胶。

最重要的优化是相机采用方形镜头,让画面更清晰。

Teemu Laurila在GitHub平台上分享了这两个额外的代码,供感兴趣的观众自我复制。

本文地址:http://www.chinaxhk.net/finance/10227.html - 转载请保留原文链接。
免责声明:本文转载上述内容出于传递更多信息之目的,不代表本网的观点和立场,故本网对其真实性不负责,也不构成任何其他建议;本网站图片,文字之类版权申明,因为网站可以由注册用户自行上传图片或文字,本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除。

热门推荐
返回顶部