DIY穷人版谷歌眼镜,自定义手势操控,树莓派再一次被开发新玩法
本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 通过帅气的手势,操控投影在眼前的电子成像,这不就是科幻片里的基础配置嘛。 现在,有人把它从科幻电影中带入了现实。动动手指,实现对眼前世界的掌控。 热衷于制作DI智能小物件的油管博主Teemu Laurila,利用树莓派DIY了一副可识别自定义手势的AR眼镜。 将自己想设置的手势录入装置,即可实现炫酷操作。 我有了一个大胆的想法! 自制AR眼镜中的世界 先开始表演吧! 捏住手指上下拉,就可以完成调整亮度指令。Y穷(这是你的第一人称视角) 对手势识别,叠加显示在镜头成像中。 再来一个更直观点的视角,通过眼镜看看效果。 DIY过程 AR眼镜本身就充满了科技感,让现实世界充满赛博朋克的味道。 那不如更炫酷一点。打个响指,就能运行命令,这不必博人传燃? 说干就人版干,首先需要设计出,装置会包含有哪些部分。 除了本体眼镜框架,硬件部分还包括了透镜组,0.6 mm PETG投影镜片,配件部分由聚乳酸材料3D打印制成。 毕竟它是智能装置的DIY,怎么可以不请万能迷你电脑树莓派出场。 而软件部分,手势识别程序依赖于谷歌python开源项目MediaPipe。 除此之外,Teemu Laurila还写了两个程序脚本。 一个是通过捏手指控制亮度的应用示例,另一个是捕获实时视频中的手势传送到电脑进行处理,并通过智能眼镜叠加显示。 条件都齐了,那么动手组装起来试试眼镜。 经历多次调整,各部分零件最终组合成如下装置。 想让程序在装置上可用,首先,需要一个树莓派作为程序支持。 随后设置好内存、驱动、运行环境、多媒体接口、网络等条件,让整个装置超频运行。 硬件软件环境都准备好以后,调试应用程序。 应用程序功能,自的核心——手势识别模型由3个框架组成,包括手掌识别模型BlazePalm(用于识别手的整体框架和方向)、Landmark模型(识别立体手部节点)、手势识别模型(将识别到的节点分类成一系列手势)。 识别算法的训练过程中,BlazePal定义m模型识别手掌初始位置,对移动端的实时识别进行优化。 在BlazePalm识别到的手掌范围内,Landmark模型识别其中21个立体节点坐标。 手势识别模型则在此基础上,根据关节角度识别每根手指状态,将状态映射到预定义的手势上,预测基础静态手势手势。 通过树莓派Zero W,对手势信息捕获。图像信息传输到电脑中,由手势识别AI进行处理。之后再传达给装置,发出对应的手势命令,并同步在投影图像中。 它的前世今生 等一下,有摄像头,有微型投影仪,还有电脑处理器,并且还是一侧投影显示。这样操控的AR眼镜好像在哪里见过。 没错,就连用到的手势识别代码也都是谷歌开源的。 虽然没有谷歌智能眼镜类似智能手机的功能,但是相比其语音控制和触控功能,Teemu Laurila的智能眼镜选择了使用自定义手势触发命令,更多一分黑科技的味道。 另外,,树谷歌眼镜摄像头只用来拍照录像,Teemu Laurila的摄像头还承担了接受手势指令、传达指令功能。同时,投影也选择了更大尺寸的方形镜片,方便视野观察。 这款装置已经是Teemu Laurila完成的第二版智能眼镜,在外观和性能上均有优化。 材料莓派的选择上,采用了0.6mm厚度投影镜片替代1mm厚度;以聚乳酸材料代替丙烯酸;增加了螺栓固定支架,弃用胶水。 最重要的优化是,照相机使用方形透镜让画面更清晰。 Teemu Laurila将自己补充的两段代码,分享在了GitHub平台,再一供感兴趣的观众自己复刻。 参考链接: GitHub链接:
https://www.tomshardware.com/news/raspberry-pi-smart-glasses-recognize-hand-gestures
https://www.yo次被utube.com/watch?v=60Os5Iqdbsw
https://www.youtube.com/watch?v=Gu4oOYo38rQ
https://github.com/Teneppa/Camera开发Stream
https://github.com/Teneppa/HandTrackingBrightnessControl
- 最近发表
-
- AMD宣布拟以19亿美元收购云计算初创公司Pensando
- Salesforce在爱尔兰办事处再裁员50人 此前曾宣布全球裁员10%
- 商汤AI视频Agent Seko用户突破10万,AI创作进入“一站式”新阶段
- 标签: 海光芯正 光模块 AI数据中心 胡朝阳
- re圈小鬼是什么梗
- 美国劳动关系委员会指控亚马逊在疫情期间非法解雇员工
- 标签: 贪玩游戏 斗罗大陆:史莱克学院 野兽领主:新世界 小游戏发行
- 云安全日报210825:Ubuntu Linux内核发现任意代码执行漏洞,需要尽快升级
- OpenAI牵头六大巨头结盟:AGENTS.md标准横空出世,AI编程从此告别盲人摸象时代
- 云计算开发:Python练习实例-将字母输出到新文件C中
- 随机阅读
-
- AI对抗系列之--你的推荐算法被破防了吗?
- 云计算开发:Python内置函数-divmod() 函数详解
- 标签: 百图生科 BioMap 李彦宏 AI制药
- 标签: 德兰明海 便携式储能 港交所上市 新能源
- Hadoop 超燃之路
- 苹果回应iPhone12Mini停产上热搜 网友:产品挺好价格劝退
- Intel 发布全新机架级 AI 芯片 Jaguar Shores,搭载 HBM4 内存
- IBM发布IBM Watson创新功能 旨在帮助企业扩展人工智能使用
- 路过的蚂蚁也要称赞是什么梗
- 人工智能在哪些方面可以对IT运营产生重大影响
- Hadoop 超燃之路
- 支付宝推出 AI 智能皮肤检测:轻松拍脸获取肤质报告与护理建议
- Elastic 完成对 Jina AI 的收购,推动 AI 搜索技术创新
- 阿里云新加坡可用区C机房发生火灾
- 云计算开发实例:Python3对字符串切片及翻转
- 标签: DeepSeek V3.2 努比亚M153 疯狂动物城2
- 标签: 极视角 AI视觉 港交所上市 人工智能
- 标签: Momenta 物理AI 世界模型 R7
- 圣迭戈大学博士首次证明:Deepfake探测器并非牢不可破
- 标签: vivo Pocket云台 云台相机 1/1.1英寸
- 搜索
-
- 友情链接