0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

一种可将手语字母翻译成带显示器书面字母的智能手套

OpenFPGA 来源:OpenFPGA 2023-03-03 09:54 次阅读

一种智能手套,可将手语字母翻译成带显示器的书面字母。

绪论

在这个项目中,我们的主要目的是开发一款智能手套,帮助使用手语的人在日常生活中轻松交流。

学习手语是一个要求很高的过程。因此,许多健康人并不了解这个过程。在这款智能手套的帮助下,那些健康的人将能够理解那些使用手语的人。智能手套还可以用作想要学习手语的健康人的模拟器。

这个项目主要涉及到模拟字母,字母是语言的基石。在这个项目中,我们使用 FPGA 来实现将手势模拟为视觉字母的算法检测手势是通过手指上的柔性传感器测量出手的形状。

vga监视器用于直观显示FPGA中转换为字母的手势。

e90550ae-b8ec-11ed-bfe3-dac502259ad0.pnge92e4716-b8ec-11ed-bfe3-dac502259ad0.pnge94fdb9c-b8ec-11ed-bfe3-dac502259ad0.png

e9692584-b8ec-11ed-bfe3-dac502259ad0.png

上三图说明了 VGA 控制器产生的时序信号。控制器包含两个计数器。一个计数器在像素时钟上递增并控制 h_sync(水平同步)信号的时序。通过将其设置为显示时间从计数器值 0 开始,计数器值在显示时间内等于像素的列坐标。水平显示时间之后是消隐时间,消隐时间包括水平前沿、水平同步脉冲本身和水平后沿,每个都有指定的持续时间。在行的末尾,计数器重置以开始下一行。v_sync 计数器在垂直轴内应用相同的操作。

使用这些计数器,VGA 控制器输出水平同步、垂直同步、显示启用和像素坐标信号。每个 VGA 模式的同步脉冲被指定为正极性或负极性。

ea2c86c8-b8ec-11ed-bfe3-dac502259ad0.png

我们首先创建随机图像并使用 RGB 信号改变它们的颜色,如上图所示。

ea5311d0-b8ec-11ed-bfe3-dac502259ad0.png

要在屏幕上显示文本或字符串,有一个众所周知的 Font Rom Map -上图 - 包括所有 ASCII 字符(每个字符为 8x16 位)。通过使用 Font Rom,我们的代码现在能够在显示器上书写文本或字母,如下图所示 。

ea991d42-b8ec-11ed-bfe3-dac502259ad0.png

为了转换来自柔性传感器的模拟数据,我们使用了ADC-每通道具有 12 位分辨率。由于 4 个手指足以执行大多数手语字母,因此一个 4 通道ADC就足够了。

ADC的通信的逻辑如下图所示。

eae1dbe0-b8ec-11ed-bfe3-dac502259ad0.png

eb5640de-b8ec-11ed-bfe3-dac502259ad0.png

作为总结,项目的架构如下图所示。

eb6ae30e-b8ec-11ed-bfe3-dac502259ad0.pngeb87a688-b8ec-11ed-bfe3-dac502259ad0.pngeba02212-b8ec-11ed-bfe3-dac502259ad0.png

作为参考手语,我们使用了ASL,它具有下图中的手势。

ebe129ba-b8ec-11ed-bfe3-dac502259ad0.png

ec0a103c-b8ec-11ed-bfe3-dac502259ad0.png

现在执行工程就可以识别到上图中标记的字母。





审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • fpga
    +关注

    关注

    1551

    文章

    20311

    浏览量

    588691
  • 显示器
    +关注

    关注

    21

    文章

    4389

    浏览量

    136527
  • 控制器
    +关注

    关注

    110

    文章

    13871

    浏览量

    168280
  • VGA
    VGA
    +关注

    关注

    5

    文章

    492

    浏览量

    61647
收藏 人收藏

    评论

    相关推荐

    【苏南全球创客大赛第名】手语翻译手套

    款可翻译手语
    发表于 05-06 12:46

    Fortran的程序,要翻译成matlab

    下忙,有段Fortran的程序,要翻译成matlab,翻译些但数据不对
    发表于 02-18 20:58

    cold crank, warm crank 具体翻译成中文是什么

    翻译成中文具体是什么场景, 越详细越好!想入门汽车电子的小白现行谢过!
    发表于 05-23 14:26

    请问snap翻译成中文是什么?

    翻译成中文是什么 我查没有对应的
    发表于 05-07 07:35

    一种基于STM32单片机的智能手环心率计步器体温显示方案

    一种智能手环心率计步器体温显示的硬件电路?怎样去设计一种智能手环心率计步器体温显示的软件部分?
    发表于 07-16 07:15

    机器人手语翻译器Project Aslan的介绍

    些技术尝试弥合听觉和聋人社区和正常人之间的差距,包括将手势转换为文字或音频的智能手套和平板电脑设备,甚至来自东芝的全尺寸机器人。现在,安特卫普大学的个团队正在开发一种机器人
    发表于 09-19 19:00 5次下载

    借助手部动作控制机械臂的手语翻译成文本和语音手套

    手语翻译成文本和语音手套.zip》资料免费下载
    发表于 10-21 11:57 0次下载
    借助手部动作控制机械臂的<b>手语</b><b>翻译成</b>文本和语音<b>手套</b>

    Arduino手语手套

    手语手套.zip》资料免费下载
    发表于 11-30 14:25 0次下载
    Arduino<b>手语</b><b>手套</b>

    基于Arduino Nano R3的手语翻译手套

    个目的,即帮助聋人社区轻松地与附近的环境进行交流和互动。目的是转换代表脚本中提到的 26 个英文字母的基本符号,并将它们显示智能手机屏幕上。电路组装项目详情该项目的灵感来自
    发表于 12-21 10:47 0次下载

    Magic Leap头戴式设备识别手语和文本“感官眼镜”

    翻译手语的方法。新专利信息的另部分详细介绍了使用头戴式设备识别标牌和店面上的文字,并将该文本翻译成耳机中显示信息的能力。Magic Leap将这种方法称为手语和文本翻译“感官眼镜”。
    发表于 03-21 14:36 1650次阅读

    纽约大学学生创建AR应用程序_可实时翻译手语

    智能眼镜的手语翻译服务,但现在纽约大学的学生们已经证明,在智能手机和原型应用的今天,这成就是有可能实现的。利用计算机视觉和增强现实技术,ARSL应用程序使用户能够使用智能手机摄像头捕捉手语,并实时翻​​
    的头像 发表于 03-31 09:09 4500次阅读

    SignAloud手套将美语手语翻译成英语

    翻译成英语,然后将之说出来。它叫做SignAloud手套。 这两名学生也因此获得了10000美元的勒梅森-麻省理工学生奖金(Lemelson-MIT Student Prize)。这款手套内置有传感,能够通过测量坐标和手指的弯曲,来捕捉美语手语信息。随后,传感数据通过蓝
    的头像 发表于 04-24 02:44 3773次阅读

    为什么国内将silicon翻译成硅而不是矽

    、闪存、内存等芯片都是基于半导体技术的,而我们现在常用的半导体实质上是硅基半导体,硅是这个行业最重要的材料。说到硅,很多人也见过另个词矽,为什么国内现在翻译成硅而不是矽了呢?
    的头像 发表于 12-21 11:25 4796次阅读

    研究人员发明使用智能手机应用程序将手语翻译语音的智能手套

    手套可以帮助更多的人学习手语。这个手套里面是个系统,手套上边有薄薄的、可伸缩的传感,可以延伸到五个手指的长度。而这些传感是由导电纱制成的可以捕捉手的动作和相应手指的位置,而这些动作和位置代表手语中的字母、数字、单
    的头像 发表于 07-15 14:26 2651次阅读

    如何使用模仿患者声音的计算机程序将文本重新翻译成语音

    翻译成句子的能力——速度接近正常语音,词汇量超过1000个单词。这些进步为那些不能说话的人提供了以接近对话水平的速度进行交流的能力,甚至展示了如何使用模仿患者声音的计算机程序将文本重新翻译成
    的头像 发表于 09-04 11:33 375次阅读
    如何使用模仿患者声音的计算机程序将文本重新<b>翻译成</b>语音