0
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心
发布
  • 发文章

  • 发资料

  • 发帖

  • 提问

  • 发视频

创作活动

完善资料让更多小伙伴认识你,还能领取20积分哦, 立即完善>

3天内不再提示

基于ToF传感器的3D手势识别解决方案

意法半导体中国 来源:意法半导体中国 作者:意法半导体中国 2022-01-17 14:17 次阅读

‍‍‍‍‍‍‍‍手势识别是计算机科学和语言技术领域的一个研究课题,其目的是通过数学算法解析人类手势。它可以在机器和人类之间搭建更高效的沟通桥梁,让生活更丰富多彩、更智能化。人们在基于图像/视频的手势识别方面已经做了大量研究(通常使用2D摄像机),今天我们将讨论新的解决方案 - 基于ToF传感器的3D手势识别。

在新冠疫情肆虐的当前形势下,人们对“非接触式”解决方案用户界面的要求越来越高,同时保持社交距离正成为“新常态”;然而在日常生活中,我们仍然需要接触公共场所中的多个目标,特别是使用ATM机、自动售货机、工厂机器等设备的界面。将意法半导体的新型传感技术和强大的人工智能算法结合之后,我们可以通过3D手势识别演示实现此解决方案。让我们看看演示过程。

演示概述

该演示目前能够识别8种手势,包括:向左滑动、向右滑动、向上滑动、向下滑动、单击、双击、顺时针旋转和逆时针旋转。

我们采用意法半导体的最新飞行时间(ToF)8X8多区域测距传感器VL53L5CX作为输入,然后在STM32上运行深度学习神经网络算法,最后在PC GUI上显示识别结果。

硬件方面,我们组合运用STM32F401RC Nucleo板和VL53L5 EVK扩展板。

输入传感器

VL53L5CX是最先进的飞行时间(ToF)多区域测距传感器,壮大了意法半导体的FlightSense产品阵容。该产品是意法半导体今年最新发布一款ToF传感器。

特性:

快速、精确的多区域测距传感器

– 多区域测距输出可覆盖4x4或8x8个单独区域

– 自主低功耗模式,通过可编程中断阈值唤醒主机

– 范围可达400 cm

完全集成的微型模块,具有宽视野(FoV)

– 发射器:940nm不可见光垂直腔面发射激光器(VCSEL)和集成模拟驱动器

– 在发射器和接收器上使用衍射光学元件(DOE)的63 °对角视野FoV

– 大小:6.4 x 3.0 x 1.5 mm

方便集成

– 单回流焊元件

– 灵活的电源选择,单个3.3 V或2.8 V操作或3.3 V或2.8 V AVDD与1.8 V IOVDD组合

采集与标记数据集

获取足够数量的关于不同手势的代表性数据对于训练人工神经网络模型是非常重要的。

当执行一个手势动作时,我们可以通过使用Python语言开发的特定GUI轻松从ToF传感器获取并标记原始数据,并创建自己的数据集。

该数据集包含了每种手势(我们的演示中有8种:向左滑动、向右滑动、单击、双击、顺时针旋转、逆时针旋转、向上滑动、向下滑动)的数千个样本,这些手势由少数几人提供。

显然,如果你希望创建自定义的手势,也可以使用相同的工具为这个手势创建新的数据集。

构建和训练神经网络

对于神经网络部分,我们选择运用简单、灵活、功能强大的Keras框架构建神经网络。因为手势是一种顺序动作,所以我们选择CNN + GRU层来创建模型,经过大约50个epoch的训练,我们训练和验证数据集的准确率可达到95%以上,而损失仅有0.08左右,已经很不错了。对于测试数据集,我们也可以针对每种手势获得不错的准确率。F1评分可达96%。

最后,我们可以将训练效果最好的模型和权重保存为gesture.h5的模型,以便在MCU端实施。

在MCU端实施手势模型

先决条件:

需要在STM32CubeMX中安装X-Cube-AI扩展包。目前的最新版本是7.0.0,它也支持sklearn机器学习模型转化。

X-Cube-AI配置向导:

配置完使用哪块板件后,可以从软件包->选择组件加载X-Cube-AI,或使用快捷键Alt+O。

需在“Software packs component selector”窗口选中X-Cube-AI/Core 这个选项,才能调用神经网络模型并生成相关的STM32 NN库。单击[OK],完成选择。如下图所示:

启用X-CUBE-AI组件:

单击[STMicroelectronics X-CUBE-AI 7.0.0] 打开初始AI配置窗口。选中 [Artificial Intelligence X-CUBE-AI] ,启用X-CUBE-AI内核组件。还必须选中[Device Application],才能添加AI插件应用程序。

加载神经网络(NN):

1.添加网络

2.将模型名称改为“gesture”。

3.选择“Keras”作为输入模型类型。

4.点击“Browse”按钮以选择要实现的模型。gesture.h5

5.点击“Analyze”按钮以分析模型。

分析完毕后,将显示模型层详细报告,还附有该模型需要使用的MACC、flash、ram信息。

最后,在CubeMX中点击“生成代码”,然后会在您的项目中创建一个X-CUBE-AI文件夹,可以在该文件夹中找到一些有用的文件。

包括拓扑网络的gesture.c和gesture.h文件。

包括权重/偏差的gesture_data.c和gesture_data.h文件。

app_x-cube-ai.c and app_x-cube-ai.h 文件还提供AI客户端应用程序可以使用的通用多网络推理API接口。

如果后续需要更新数据集或是重新训练更新权重以获得更好的性能效果,只要更新gesture_data.c和gesture_data.h文件就可以。所以,更新过程很方便的。

显示结果

最后,将uart日志打印到PC端,从而在GUI端显示我们的预测结果。当您在距离自己20~80cm的ToF传感器前做一个顺时针旋转的手势时,GUI将会显示预测结果,如下所示。百分比是该手势的概率。

3D手势演示到这里已经结束,该解决方案可用于以下几个应用场景。

智能家电:当您的手上脏或湿的时候,通过手势识别控制不同的家电。

交互式娱乐:如游戏机。

人机交互:让机器更智能,让人更安全,特别是在新冠病毒肆虐的环境或一些危险环境中。

现在,您可以尝试使用VL53L5传感器、STM32开发板、以及强大的X-Cube-AI库创建自己的手势识别演示。我们正在一些活动中展示该演示项目;如果您对我们的手势演示感兴趣,请联系意法半导体的AI创新应用中心,我们会选定目标客户根据产品的特定用例对该演示进行产品级支持。

我们策划了一系列AI主题文章,详细介绍意法半导体在Deep Edge AI领域的努力成果。 本文是该系列文章中的第八篇,点击上方的话题,订阅我们的AI技术专题系列 。 欢迎您在文后积极留言,告诉我们想了解意法半导体AI的哪些方面,我们将为您呈现更多精彩内容。

原文标题:AI技术专题之八:基于ToF传感器的3D手势识别

文章出处:【微信公众号:意法半导体中国】欢迎添加关注!文章转载请注明出处。

审核编辑;汤梓红

  • 传感器
    +关注

    关注

    2410

    文章

    38563

    浏览量

    706561
  • 3D
    3D
    +关注

    关注

    5

    文章

    2326

    浏览量

    105318
  • AI
    AI
    +关注

    关注

    86

    文章

    21834

    浏览量

    257024
收藏 人收藏

    评论

    相关推荐

    如何使用60GHz雷达传感器设计汽车车内手势检测系统

    。 如今,许多汽车的车内传感器解决方案大多基于前端飞行时间 (ToF) 或摄像头,但这些不具备智能,也无法用于多种应用。设想一下,如果用于手势控制的相同器件也可以检测留在车内的儿童的动作,或有不速之客试图
    发表于 11-03 07:26

    XL5300TOF测距模块特点及其应用 全集成系统级封装模块

    XL5300TOF直接飞行时间(dToF)传感器采用单模块封装设计,集成了单光子雪崩二极管(SPAD)接收阵列以及VCSEL激光发射。该传感器可对物体进行精确的距离测量而不受物体颜色、反射率和纹理
    发表于 11-22 10:45

    XL5300TOF测距模块特点及其应用,全集成系统级封装模块

    XL5300TOF直接飞行时间(dToF)传感器采用单模块封装设计,集成了单光子雪崩二极管(SPAD)接收阵列以及VCSEL激光发射。该传感器可对物体进行精确的距离测量而不受物体颜色、反射率和纹理
    发表于 03-21 16:11

    2011年全球3D手势识别技术市场格局分析

    红外光束从物体表面反射并返回至某特定CMOS传感器所用的时间,从而可以在任何光照下、任意距离、产生高度精确的3-D深度图。Time-of-flight传感器与微软通过GestureTek授权而研发的3-D摄像头手势识别运算法则非常吻合。
    发表于 03-02 14:21

    设计与实现一个基于3D加速度传感器的便携式计步器

    设计与实现一个基于3D加速度传感器的便携式计步器
    发表于 04-21 13:18

    世纪晟3D动态人像识别解决方案

    ,并进行智能识别匹配的过程。世纪晟3D人像识别系统可在秒级内完成单张人像千万级数据库精准查询,支持10亿级以上的人脸库。系统通过抓拍人像,选取130个人脸特征点,以建立一个3D人脸特征库。该人脸特征库更能
    发表于 04-20 10:01

    3D ToF编译环搭建的问题

    1、我在https://github.com/djmuhlestein/fx2lib/ 下载了3D ToF的源码; 2、按照说明,在win32 的环境下分别安装了 SDCC(2.9.0)和GNU
    发表于 06-21 08:23

    带有3D手势识别和手部位置追踪系统

    Microchip MGC3030 手势控制是一个电场感测片上系统 (SoC),板载处理功能带有 3D 手势识别和手部位置追踪。它采用 Microchip 的 GestIC® 技术,采用约 100
    发表于 07-03 09:40

    一枚芯片,四片铜箔,简单实现3D手势控制

    。连接上四个传感器,可以达到3D手势控制的效果,其实也就是可以实现上下左右滑、旋转、点击、拖曳这种X、Y、Z三维立体轴上的移动物体识别。应用的话,就看个人脑洞的发挥啦,从这家公司的官网视频资料,可以看到
    发表于 08-06 13:59

    Voxel 3D 飞行时间传感器机器人视觉参考设计

    的性能,此外还探讨了 3D 传感器(积分时间、饱和度)、信号处理(滤波)和外部红外 (IR) 辐射源对测量的影响。凭借 3D TOF 解决方案的距离测量准确性,扫地机器人能够检测和识别物体并构建房间地图
    发表于 10-11 15:37

    针对显示屏的2D/3D触摸与手势开发工具包DV102014

    最新的PCAP控制MTCH6303及MGC3130 3D手势控制。它包含一个8英寸的透明触摸传感器,以便对多种常用显示屏进行快速原型开发。MTCH6303可以100 Hz的五指扫描率提供多点触摸坐标
    发表于 11-07 10:45

    ELMOS用于手势识别的光电传感器E527.16

      德国艾尔默斯半导体公司(ELMOS)日前宣布推出一款用于手势识别的非接触式光电传感器芯片E527.16.该款芯片是基于HALIOS的基本工作原理:一个LED管发射出经过调制的红外光,当这些红外光
    发表于 11-13 16:00

    ST表面贴装多功能3D方位传感器FC30

    。全新FC30芯片集成3D方位和鼠标单击/双击检测功能,使设计人员能够在产品设计内集成鼠标按键控制功能。  “FC30是一系列全新多功能传感器的首款产品,以完整的转钥解决方案,让客户在系统微控制上简化
    发表于 11-15 16:48

    TOF 3D RGB点云深度模组

    TOF 3D RGB点云模组
    发表于 03-26 11:36

    3D ToF怎么引领行业应用浪潮?

    加持,智能机能够拍出更好的虚化照片,能够化身为体感游戏机……作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
    发表于 08-01 07:00

    ST 3D TOF传感器 VL53L1X 资料样品免费申请

    STTOF环境光传感器VL53L1XVL53L0X用于3D激光测距解决方案STVL53L1X样品申请价格咨询ST代理商18820954295 马工VL53L1X样品代理价格QQ咨询
    发表于 12-10 10:26

    传感器是苹果3D摄像头预示下一个风口

    新一代iPhone 8前置镜头配置3D传感器,其不仅支持AR增强现实技术,还可以与相机配合,完成面部识别验证。
    发表于 05-14 06:33

    3D传感器如何为车内安全保驾护航?

    和其他乘客的预警功能。例如,驾驶员在打瞌睡,或是有人将婴儿或宠物留在车内,诸如此类场景,传感器都将进行识别和发出预警;在发生车祸后,3D传感器可以对车内生存者状态进行感知,并将信息发送给负责急救
    发表于 07-29 07:38

    3D ToF技术市场将引爆新一轮行业应用浪潮

    加持,智能机能够拍出更好的虚化照片,能够化身为体感游戏机……作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
    发表于 08-06 06:27

    3D传感器在环境感知、捕捉方面的作用

    ,以及将物品从一个位置移动到另一个位置等。这些应用都依赖于经济且强大的3D视觉传感器,目前,该领域存在多种竞争型技术。所有这些技术都有各自的优点和缺点,具有不同的工作距离、分辨率、处理能力以及成本。每种技术都有其重要的市场价值,大体因为目前还没有能够应对所有应用场景的单一最佳解决方案
    发表于 08-10 06:27

    走进飞行时间传感技术揭秘TOF传感器工作原理及应用领域

    浮出水面,可用于多场景的识别应用,例如前置及后置镜头用于手势识别或者安全支付的脸部3D辨识,以及AR/VR也是ToF3D感知上的应用方向。 图2可以看到,目前ToF传感器在细分领域的市场份额,主要
    发表于 11-14 15:00

    3D传感器有哪些类型

    目标表面的横截面轮廓,从而生成高密度3D点云。整个零件的3D点云用于执行尺寸和体积测量以及决策。智能线轮廓传感器提供内置的测量工具,还可以生成与3D数据同步的高度详细的2D表面图像。然后可以使用常见
    发表于 12-09 14:09

    AR0237IR图像传感器推动3D成像技术的发展

    Lumentum的VCSEL技术,不同于其他图像传感器使用RGB模式生成观看图像流并需要另一个IR模块来检测运动的生动性。该方案采用深入感知,以及反欺诈和3D识别等先进算法,增加了高动态范围的功能,提高了各种
    发表于 12-16 16:14

    基于ToF3D活体检测算法研究

    人脸。这是由于目前基于RGB等2D空间的主流活体检测方案未考虑光照、遮挡等干扰因素对于检测的影响,而且存在计算量大的缺点。而数迹智能团队研发的3D SmartToF活体检测方案则可以有效解决此问题。那么
    发表于 01-06 07:30

    CMOS传感器3D视觉/感测和度量中的应用

    CMOS传感器3D视觉、感测和度量中的应用
    发表于 02-22 06:20

    氮化铝(AlN)陶瓷电路板技术应用——ToF传感器

    。但随着技术不断的发展,仅为前摄人脸解锁这么一个功能在手机里植入一个3D摄像头,显然已不能满足广大用户对3D技术的应用需求。为了开拓更多更广的应用,越来越多的制造商开始采用ToF技术。ToF图像传感器能够
    发表于 02-23 11:16

    如何用无源传感器PIR搭建属于自己的手势识别模块?

    主流的手势识别方法及其原理是什么?各种手势识别方法的优缺点是什么?都是手势识别有什么区别吗?如何用无源传感器PIR搭建属于自己的手势识别模块?
    发表于 07-04 07:45

    怎样去设计一种基于OPT9221和OPT8241的3D ToF摄像头电路?

    3D ToF摄像头有哪些特性?3D ToF摄像头有哪些功能?怎样去设计一种基于OPT9221和OPT8241的3D ToF摄像头检测电路?
    发表于 07-04 07:15

    如何实现基于MEMS加速度传感器手势识别系统的设计?

    如何实现基于MEMS加速度传感器手势识别系统的设计?
    发表于 12-20 07:55

    触摸和3D手势控制

    Microchip的触摸传感3D控制技术屡获殊荣,能广泛应用于各种应用,包括触摸按键(1D)、触摸屏(2D)以及3D手势控制。
    发表于 07-14 16:36 22次下载

    3D卷积神经网络的手势识别

    传统2D卷积神经网络对于视频连续帧图像的特征提取容易丢失目标时间轴上的运动信息,导致识别准确度较低。为此,提出一种基于多列深度3D卷积神经网络(3D CNN)的手势识别方法。采用3D卷积核对连续帧
    发表于 01-30 13:59 2次下载
    <b>3D</b>卷积神经网络的<b>手势</b><b>识别</b>

    3D ToF 技术大热,哪些方案值得关注?

    3D视觉摄像头解决方案比较主流的有三种,分别是结构光、双目视觉,以及ToF(Time of Flighgt,飞行时间)。其中,ToF 3D解决方案的渗透率或将超过结构光,国内智能手机厂商率先布局
    发表于 07-02 18:25
    <b>3D</b> <b>ToF</b> 技术大热,哪些<b>方案</b>值得关注?

    基于Kinect传感器的动态手势识别方法

    基于Kinect传感器的动态手势识别方法
    发表于 06-23 16:44 17次下载

    MIT:让液晶显示识别手势

    MIT:让液晶显示识别手势 目前的手势识别(gesture recognition)技术,需要一个能够侦测深度的3D影像传感器;为此美国麻省理工学院(MIT)的研究人员开发出一种光电二极
    发表于 12-23 09:11 600次阅读

    奥地利微电子推出3D霍尔传感器AS5410

    奥地利微电子公司近日推出全球首款基于全功能3D霍尔平台的线性位置传感器AS5410。独特的3D霍尔传感器解决方案可在汽车和工业应用中感应绝对位置,提供超高分辨率的位置信息
    发表于 06-08 09:03 1941次阅读

    TI超强性能全新技术3D传感器横空出世

    日前,德州仪器 (TI) 宣布同业界领先的端对端 3D 传感器手势识别中间件解决方案供应商 SoftKinetic 合作,在电视、笔记本电脑 (PC) 以及其它消费类及工业设备中推广手势控制技术
    发表于 12-29 08:58 1618次阅读

    移动设备作图新武器:3D手势输入

    美国专利商标局日前公布了苹果最新申请的“3D手势输入”专利。据国外媒体报道称,该技术允许用户通过特殊手势实现3D手势输入,达到以3D的方式操控3D数字图像的目的。
    发表于 08-23 13:38 1366次阅读
    移动设备作图新武器:<b>3D</b><b>手势</b>输入

    3D手势识别给人机交互插上翅膀

    Andreas Guete表示,Microchip开发的GestIC®技术只有一个目标:给3D手势识别提供高性价比的单芯片解决方案,而MGC3030和MGC3130完全实现了此目标。
    发表于 01-29 17:03 3347次阅读

    ADI光学传感器改善手势识别应用的可靠性

    ADI最近发布了一款用于手势识别的光学传感器,可通过单个传感器测量对象的位置、距离和手势,相比现有解决方案具有更佳的检测精度和可靠性。
    发表于 06-27 11:18 896次阅读

    人机交互技术换代,如何搭上通往3D手势识别的直通车?

     Microchip专门为GestIC技术开发出MGC3030和MGC3130两个专用的3D手势识别和运动跟踪控制芯片,片上集成的Colibri手势识别套件,Colibri套件结合了隐马尔可夫模型
    发表于 10-26 17:24 1008次阅读
    人机交互技术换代,如何搭上通往<b>3D</b><b>手势</b><b>识别</b>的直通车?

    基于电场感应原理的3D手势识别技术,你会玩吗?

    光学3D手势识别还是有一定的技术门槛,想要玩转不是一件容易的事,有些技术还需要进一步实用验证和打磨。
    发表于 11-05 07:37 5142次阅读
    基于电场感应原理的<b>3D</b><b>手势</b><b>识别</b>技术,你会玩吗?

    3D成像:飞行时间法(ToF)可望推动CMOS图像传感器的发展

    飞行时间法(ToF)提供了非凡的3D视角,可望推动新一代专用CMOS图像传感器的发展。
    的头像 发表于 04-02 09:33 2.1w次阅读
    <b>3D</b>成像:飞行时间法(<b>ToF</b>)可望推动CMOS图像<b>传感器</b>的发展

    3D传感器市场扩大:探讨传感器在数字化转型中蕴含的大量机会

    3D成像、自动驾驶、驾驶员辅助、AR/VR、手势识别、人脸识别、语音降噪等等新的应用不胜枚举,而赋能这些新应用的一类关键技术就是传感器
    的头像 发表于 04-29 16:58 3899次阅读

    揭秘八款创新硬件的传感器作用 光谱传感器,3D传感……

    1、3D传感,开启人脸识别市场新天地 苹果手机首次引入3D传感技术用于人脸识别之后,各大手机品牌纷纷表示将增加3D传感模块。打破技术壁垒,ams已经能提供全面的3D 传感解决方案,包括 VCSEL和
    发表于 05-02 09:49 1w次阅读

    适用于显示屏的2D多点触摸与3D手势模块

    本视频将展示结合多点触摸与3D手势模块的Microchip显示解决方案。支持2D/3D功能的显示屏是Microchip基于GestIC®技术的最新解决方案。显示屏上结合了3D手势与2D多点触摸功能,可降低安装单个显示模块的复杂度。
    的头像 发表于 06-06 02:45 4119次阅读

    追溯3D人脸识别背后的技术之源

    小米的3D人脸识别技术由以色列领先的3D传感器公司Mantis Vision及模组合作伙伴提供支持。
    的头像 发表于 06-04 09:22 4894次阅读

    vivo正式发布TOF 3D超感应技术

    经过快一个星期的宣传与预热,今天vivo正式发布了TOF 3D超感应技术,这是继屏幕指纹、升降式摄像头之后,vivo给行业与消费者带来了又一项黑科技,相较于大家所熟知的将TOF应用到人脸识别,vivo发布TOF 3D超感应技术应用更加广泛。
    的头像 发表于 07-02 10:12 3394次阅读

    vivo宣称新品采用3D ToF技术,是否比3D结构光更胜一筹?

    主流的人脸识别有哪些?你肯定回答2D红外和3D结构光,但是近日vivo宣称下半年将推出3D ToF,运用到vivo新品中,并量产商用。是不是又一次被蓝厂惊掉了下巴。3D ToF 果真碾压 3D 结构光吗?
    发表于 07-11 05:16 1649次阅读

    3D飞行时间传感器设计过程和资源介绍

    开始使用TOF 3D传感器:推荐的设计过程和资源
    的头像 发表于 08-23 01:38 2355次阅读

    微芯电容传感3D手势方案打进欧美日韩汽车市场

    由于可靠性问题,电容传感3D手势方案一直很难做进汽车市场。不过,微芯(Microchip)这次令人刮目相看,电容传感3D手势方案不仅做到经常日晒雨淋的车门把手上,而且做进日韩欧美的一线汽车品牌之中。
    的头像 发表于 09-10 10:56 1.4w次阅读

    三星或将采用ToF 3D面部识别技术 砍掉虹膜识别

    根据韩媒报导,三星预计2019年将在新的Galaxy S10及 Galaxy A系列的智能手机上采用ToF 3D面部识别技术,并极有可能砍掉虹膜识别
    发表于 11-22 09:26 1658次阅读

    炬佑智能赋能3D传感 跻身全球领先ToF传感器供应商

    炬佑智能在开发动态ToF领域全面布局,并推出充分发挥ToF 3D感知技术优势的解决方案
    的头像 发表于 12-03 11:29 6754次阅读

    ToF传感器2019年大爆发 未来向4D感知迈进

    麦姆斯咨询:炬佑智能相信ToF传感器将实现从3D感知向4D感知的转变,炬佑智能愿意和产业链上下游企业深度合作,共同推动ToF传感技术的发展!
    的头像 发表于 01-21 14:33 1.4w次阅读

    3D-ToF空间深度传感器的工作原理及应用场合介绍

    3D-ToF空间深度传感器
    的头像 发表于 04-24 06:17 5917次阅读
    <b>3D-ToF</b>空间深度<b>传感器</b>的工作原理及应用场合介绍

    真的是华为P30 Pro?10倍光学变焦+四摄3D传感

    早先有爆料称,P30系列会搭载全新的CMOS传感器,并有望搭配潜望式摄像头来实现10倍光学变焦。同时,P30 Pro还有望搭载四摄,其中一颗为TOF 3D传感器,可实现3D人脸识别3D建模等功能。
    的头像 发表于 03-02 10:35 1w次阅读

    3D传感器:机器人安全的新方法和新应用

    然而,提供3D深度讯息的新型传感器,如3D飞时(TOF)镜头、3D光达和立体视觉镜头,可更准确地检测和定位对区域的入侵。若守卫机器人的3D系统在几公尺之外检测到人的腿,它将允许机器人继续操作,直到对方实际伸出其手臂朝向机器人为止。
    的头像 发表于 04-19 15:02 3318次阅读

    英飞凌针对移动设备市场推出3D图像传感器解决方案

    英飞凌科技股份公司针对移动设备市场开发出一款卓越的3D图像传感器解决方案,即REAL3™ IRS2381C。
    发表于 06-03 17:47 1393次阅读

    3D ToF技术大热 系统级解决方案有望引爆行业应用市场

    作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
    的头像 发表于 06-07 12:51 4237次阅读

    3D ToF感测市场大热,ADI ToF方案凭借哪些优势抢占市场先机?

    行业预计,2019年使用TOF 3D传感器技术的智能手机出货量将达到2000万台。工业和汽车应用前景广阔。ADI系统应用工程经理李佳对记者表示,ADI公司的ToF技术之所以受到瞩目,是因为这项技术能
    的头像 发表于 06-24 08:32 8463次阅读

    Seeed推出3D手势识别产品 采用Microchip电近场感应技术

    3D手势识别和跟踪板通过电近场感应来确定近场位置和运动。
    的头像 发表于 07-08 16:22 3258次阅读

    手机大厂如何提升3D识别系统性能?1D ToF的创新应用有哪些?

    1D ToF的创新应用有哪些?它是如何提升3D识别系统可靠性、稳定性,降低系统功耗的?拥有传感器核心技术的ams,能从哪些方面提升你的手机系统设计水平呢?
    发表于 08-02 14:16 3232次阅读

    多个3D智能传感器组网的多传感器网络介绍

    由多个3D智能传感器组网的多传感器网络是应对这一挑战的理想解决方案,同步扫描以及跨多部扫描设备执行校准和拼接的能力带来诸多关键优势。
    发表于 11-04 15:47 1565次阅读

    dfrobot3D手势识别迷你传感器简介

    DFRobot 3D手势识别传感器是一款集成3D手势识别和运动跟踪为一体的交互式传感器传感器可以在有效范围内识别手指的顺时针/逆时针转动方向和手指的运动方向等。
    的头像 发表于 01-03 15:40 1346次阅读
    dfrobot<b>3D</b><b>手势</b><b>识别</b>迷你<b>传感器</b>简介

    英飞凌推出全球最小3D深度图像传感器REAL3™单芯片解决方案

    1月9日消息,英飞凌发布全球最小3D图像传感器3D面部解锁设备迎来新技术。据外媒报道,德国科技大厂英飞凌科技(Infineon)携手3D飞时测距(ToF)系统专业伙伴
    发表于 01-11 09:03 1008次阅读

    3D集成技术解决方案传感器应用中的主要挑战

    从低密度的后通孔TSV 硅3D集成技术,到高密度的引线混合键合或3D VSLI CoolCubeTM解决方案,研究人员发现许多开发新产品的机会。本文概述了当前新兴的硅3D集成技术,讨论了图像传感器
    发表于 01-16 09:53 629次阅读

    英飞凌联手高通 打造高质量的3D ToF传感器技术

    的应用范围。这个参考设计采用REAL3TM 3D飞行时间(ToF传感器,支持智能手机制造商实现既经济高效又易于设计的标准化集成。4年来,英飞凌凭借其3D ToF传感器技术活跃在移动终端市场上。不仅如此
    的头像 发表于 03-09 15:18 2094次阅读

    采用3D ToF传感器的驾驶员眼动跟踪监控系统

    3月20日消息,据外媒报道,Eyeware和Melexis合作开发基于3D ToF传感器的驾驶员监控系统眼动跟踪解决方案。据悉,Eyeware是一家总部位于瑞士的3D眼动跟踪技术公司,其使命是将
    的头像 发表于 03-22 17:17 2981次阅读

    基于3D ToF传感器的DMS,增强头部和视线追踪的可靠性

    基于3D ToF传感器的驾驶员监控系统(DMS)。该系统采用Melexis最新的MLX75027 3D ToF传感器,并利用Eyeware的注意力监控技术,即使在阳光下也能精确跟踪监控驾驶员视线和头部运动。
    的头像 发表于 03-26 14:24 3823次阅读

    3D深度传感ToF技术的基本原理解析

    本文将探讨ToF深度传感的基本原理和两种主要的方法,并与其他常用的深度测量技术进行比较。然后,详细介绍ADI公司的3D 深度传感ToF技术的核心—— ADDI9036 模拟前端,这是一个完整的ToF信号处理器件,集成了深度处理,将来自VGA CCD 传感
    发表于 04-12 11:30 1.2w次阅读
    <b>3D</b>深度<b>传感</b><b>ToF</b>技术的基本原理解析

    典型3D ToF系统组成有哪些?

    数迹智能就是一家主要立足于控制方案端的3D ToF系统解决方案提供商,我们在3D ToF系统方案中的软件算法核心技术上会成为未来3D图像信号处理中的“长矛利剑”。
    发表于 07-16 17:24 3233次阅读

    图像传感器Hydra3D的特点

    据麦姆斯咨询报道,全球成像解决方案创新公司Teledynee2v近日推出其最新款飞行时间(ToF)CMOS图像传感器Hydra3D
    发表于 08-04 15:33 689次阅读

    Hydra3D传感器有哪些优势

    日前,Teledynee2v公司宣布推出专为3D检测和距离测量定制的新型Hydra3D飞行时间(ToF)CMOS图像传感器。该ToF传感器具备高分辨率和灵活配置的特点,可用于各类工业应用,包括:视觉引导机器人技术、物流以及自动导引车。
    发表于 08-13 16:14 486次阅读

    三星即将发布其首款名为“ISOCELL Vizion”的3D ToF传感器

    据麦姆斯咨询报道,三星在2020年9月18日向欧盟知识产权局(EUIPO)提交了一份商标申请文件,显示该公司可能即将发布其首款名为“ISOCELL Vizion”的3D ToF传感器。这款3D ToF传感器或将用于明年问世的新款Galaxy S21系列(或为S30系列)智能手
    的头像 发表于 09-26 10:37 1852次阅读
    三星即将发布其首款名为“ISOCELL Vizion”的<b>3D</b> <b>ToF</b><b>传感器</b>

    三星正在开发其3D ToF Sensor版本

    根据描述,三星的新型传感器将带来更好的人脸识别以及更好的深度感应功能。值得注意的是,有传言称苹果将在即将面世的iPhone 12系列中添加3D ToF相机。该公司已经在其iPad上安装了LiDAR传感器
    的头像 发表于 09-30 14:44 2115次阅读

    3D ToF相机传感器在无人机上的10大出色应用

    无人机或地面系统上的闪光激光雷达(也称为ToF相机传感器)具有许多强大的用途,包括物体扫描、测量距离、室内导航、避障、手势识别、跟踪物体、测量体积、反应式高度计、3D摄影、增强现实游戏等。
    发表于 09-30 15:47 1918次阅读

    英飞凌推出REAL3 ToF图像传感器

    新款REAL3 ToF图像传感器芯片可以实现更好的拍照效果:(1)在弱光条件下更快地自动对焦;(2)基于图像分割的夜景人像模式。 游戏与运动、虚拟电子商务、3D在线教育:采用三维(3D)深度传感器
    的头像 发表于 11-09 14:00 1795次阅读

    ToF传感器3D识别的新宠儿 物联网应用潜力巨大

    ToF传感器火了。 从去年开始,一票传感器厂商和手机厂商的目光都投向了ToF传感器。直到今年,英飞凌、AMS等传感器厂商,以及苹果、华为、三星等手机厂商仍在不断推进ToF传感器的技术和应用升级,可以
    的头像 发表于 11-12 15:16 1944次阅读

    使用3D传感器开发智能解决方案,准确地感知现实世界

    CronAI公司的senseEDGE平台是一种具有“自我优化、3D数据、深度学习”的边缘推理感知处理平台。它使创新者能够使用3D传感器开发智能解决方案,准确地感知现实世界,例如汽车ADAS驾驶系统所需求的传感技术。
    的头像 发表于 11-25 14:11 2928次阅读

    ToF传感器的市场需求迎来爆发

    什么是ToF传感器ToF传感器又名飞行传感器,是一种接近传感器。简单来说,ToF传感器的主要原理是利用自身发出的对脉冲发射光在某种介质中行进一段时间到达物体并反射回传感器所用的时间来测量传感器与物体之间的距离,进而再通
    的头像 发表于 11-26 14:31 2833次阅读

    ToF 3D图像传感器的特性介绍

    SONY 发表了一款适用于工业生产机械设备的背照式航行时间(TOF3D图像传感器*1。这款精巧的高清分辨率传感器选用了SONY 的感测和测距技术应用,能够获取覆盖短距离和远距离的深度图。
    发表于 09-01 17:46 1040次阅读

    3D激光雷达和相机校准是如何考虑传感器之间误差的?

    的误差的; 为了融合来自3D激光雷达和相机的信息,需要知道传感器坐标系之间的外部校准。 传统的外部校准方案有三个缺点: 传统的校准方法忽略了传感器误差,导致了校准失真
    的头像 发表于 05-26 09:15 3711次阅读
    <b>3D</b>激光雷达和相机校准是如何考虑<b>传感器</b>之间误差的?

    艾迈斯欧司朗推出VCSEL 3D手势识别新品,使AR/VR交互体验更上一层楼

    四个不同版本的Bidos P2433 Q产品支持先进的3D ToF系统,可用于AR/VR眼镜手势识别
    发表于 10-19 10:50 2270次阅读
    艾迈斯欧司朗推出VCSEL <b>3D</b><b>手势</b><b>识别</b>新品,使AR/VR交互体验更上一层楼

    善解人意的“机器眼睛”:飞行时间(TOF传感器

    TOF是能够识别场景及物体并创建3D视图的一项智能感测技术。TOF传感器通过测量光束到达物体和返回所用的时间来确定物体距离,所生成和捕获的数据非常准确,可提供行人检测,基于面部特征的用户身份验证,以及使用SLAM(同时定位和映射)算法的环境映射
    发表于 12-17 09:37 2236次阅读
    善解人意的“机器眼睛”:飞行时间(<b>TOF</b>)<b>传感器</b>

    3D视觉传感器的精度是指什么

    经常听到有人问“3D视觉传感器/3D激光视觉传感器的精度是指什么?跟重复精度有什么区别?”“3D视觉传感器/3D激光视觉传感器线性度的定义?”等,今天小编带大家一次性搞懂这几个定义!
    发表于 03-28 13:33 1170次阅读
    <b>3D</b>视觉<b>传感器</b>的精度是指什么

    意法半导体推出非接触式的手势控制解决方案

    测距传感器和免费的配套工程软件。采用ToF传感器手势识别是一项突破性的人机交互技术,让用户能够与各种设备进行复杂的互动。
    的头像 发表于 05-19 10:31 1086次阅读

    RT-Thread大会:基于电容式触摸技术的3D手势识别方案

    瑞萨最高等级的电容触摸单元: 最新的硬件IP- CTSU2 高精度传感器 抗干扰- (IEC61000 4-3 Level 4 Medical) 可实现快速扫描接近传感3D手势识别
    的头像 发表于 05-27 10:23 575次阅读
    RT-Thread大会:基于电容式触摸技术的<b>3D</b><b>手势</b><b>识别</b><b>方案</b>

    3D TOF智能座舱应用的上车趋势

    近日,由智车行家主办的2022第二届座舱监控系统(IMS)前瞻技术展示交流会在苏州圆满落幕。奥比中光子公司深圳奥锐达科技有限公司(以下简称“奥锐达”)携最新智能座舱3D TOF方案参展,奥锐达
    的头像 发表于 07-13 10:34 1147次阅读

    3D视觉主要技术路径 3D结构光技术原理

    3D传感器作为3D视觉的眼睛,通过多个摄像头与深度传感器的组合能够获得物体三维位置及尺寸等数据,实现三维信息采集。目前3D视觉传感器主要有双目相机、结构光相机及TOF(Time of flight)相机。
    发表于 11-22 21:21 1267次阅读

    英飞凌ToF图像传感器助力追觅新型扫地机器人

    英飞凌科技3D传感业务副总裁Christian Herzum表示:“追觅推出的高端扫地机器人在摄像头中搭载了英飞凌先进的3D ToF传感器技术。该图像传感器与追觅先进的环境感知技术相结合,让扫地机器人能够顺利识别并避开障碍物。
    的头像 发表于 11-30 15:39 293次阅读

    ToF技术持续突破,英飞凌虹软携手开启3D感知新世界

    和数字化进程。虹软科技作为英飞凌的长期合作伙伴应邀出席,会上虹软科技产品副总裁Alex发表了“用ToF感知3D世界”主题演讲,介绍了3D视觉传感技术在安全(人脸识别,支付)、摄影、娱乐(增强现实/XR)三大主要应用场景的实际应用和创新技术方案
    的头像 发表于 12-20 09:16 476次阅读

    3D Flash 激光雷达测绘和手势识别

    3D Flash 激光雷达测绘和手势识别
    的头像 发表于 01-05 09:43 380次阅读

    Teledyne e2v发布适用于任何光照条件、无运动伪影的ToF传感器Hydra3D+

    ToF传感器专为寻求即时和灵活的3D检测的客户精心设计,可提供高质无损的3D性能。其紧凑型传感器可进行2D3D大视野场景拍摄,系统极具性价比。
    的头像 发表于 01-13 14:41 172次阅读

    全新iToF图像传感器助力打造小型3D摄像头

    英飞凌与专注于3D ToF领域的优质合作伙伴湃安德(pmd)联合推出IRS2877C飞行时间(ToF)VGA传感器的性能进阶版——IRS2976C。
    的头像 发表于 04-03 09:33 332次阅读

    下载硬声App