手势识别是计算机科学和语言技术领域的一个研究课题,其目的是通过数学算法解析人类手势。它可以在机器和人类之间搭建更高效的沟通桥梁,让生活更丰富多彩、更智能化。人们在基于图像/视频的手势识别方面已经做了大量研究(通常使用2D摄像机),今天我们将讨论新的解决方案 - 基于ToF传感器的3D手势识别。
在新冠疫情肆虐的当前形势下,人们对“非接触式”解决方案用户界面的要求越来越高,同时保持社交距离正成为“新常态”;然而在日常生活中,我们仍然需要接触公共场所中的多个目标,特别是使用ATM机、自动售货机、工厂机器等设备的界面。将意法半导体的新型传感技术和强大的人工智能算法结合之后,我们可以通过3D手势识别演示实现此解决方案。让我们看看演示过程。
演示概述
该演示目前能够识别8种手势,包括:向左滑动、向右滑动、向上滑动、向下滑动、单击、双击、顺时针旋转和逆时针旋转。
我们采用意法半导体的最新飞行时间(ToF)8X8多区域测距传感器VL53L5CX作为输入,然后在STM32上运行深度学习神经网络算法,最后在PC GUI上显示识别结果。
在硬件方面,我们组合运用STM32F401RC Nucleo板和VL53L5 EVK扩展板。
输入传感器
VL53L5CX是最先进的飞行时间(ToF)多区域测距传感器,壮大了意法半导体的FlightSense产品阵容。该产品是意法半导体今年最新发布一款ToF传感器。
特性:
快速、精确的多区域测距传感器
– 多区域测距输出可覆盖4x4或8x8个单独区域
– 自主低功耗模式,通过可编程中断阈值唤醒主机
– 范围可达400 cm
完全集成的微型模块,具有宽视野(FoV)
– 发射器:940nm不可见光垂直腔面发射激光器(VCSEL)和集成模拟驱动器
– 在发射器和接收器上使用衍射光学元件(DOE)的63 °对角视野FoV
– 大小:6.4 x 3.0 x 1.5 mm
方便集成
– 单回流焊元件
– 灵活的电源选择,单个3.3 V或2.8 V操作或3.3 V或2.8 V AVDD与1.8 V IOVDD组合
采集与标记数据集
获取足够数量的关于不同手势的代表性数据对于训练人工神经网络模型是非常重要的。
当执行一个手势动作时,我们可以通过使用Python语言开发的特定GUI轻松从ToF传感器获取并标记原始数据,并创建自己的数据集。
该数据集包含了每种手势(我们的演示中有8种:向左滑动、向右滑动、单击、双击、顺时针旋转、逆时针旋转、向上滑动、向下滑动)的数千个样本,这些手势由少数几人提供。
显然,如果你希望创建自定义的手势,也可以使用相同的工具为这个手势创建新的数据集。
构建和训练神经网络
对于神经网络部分,我们选择运用简单、灵活、功能强大的Keras框架构建神经网络。因为手势是一种顺序动作,所以我们选择CNN + GRU层来创建模型,经过大约50个epoch的训练,我们训练和验证数据集的准确率可达到95%以上,而损失仅有0.08左右,已经很不错了。对于测试数据集,我们也可以针对每种手势获得不错的准确率。F1评分可达96%。
最后,我们可以将训练效果最好的模型和权重保存为gesture.h5的模型,以便在MCU端实施。
在MCU端实施手势模型
先决条件:
需要在STM32CubeMX中安装X-Cube-AI扩展包。目前的最新版本是7.0.0,它也支持sklearn机器学习模型转化。
X-Cube-AI配置向导:
配置完使用哪块板件后,可以从软件包->选择组件加载X-Cube-AI,或使用快捷键Alt+O。
需在“Software packs component selector”窗口选中X-Cube-AI/Core 这个选项,才能调用神经网络模型并生成相关的STM32 NN库。单击[OK],完成选择。如下图所示:
启用X-CUBE-AI组件:
单击[STMicroelectronics X-CUBE-AI 7.0.0] 打开初始AI配置窗口。选中 [Artificial Intelligence X-CUBE-AI] ,启用X-CUBE-AI内核组件。还必须选中[Device Application],才能添加AI插件应用程序。
加载神经网络(NN):
1.添加网络。
2.将模型名称改为“gesture”。
3.选择“Keras”作为输入模型类型。
4.点击“Browse”按钮以选择要实现的模型。gesture.h5
5.点击“Analyze”按钮以分析模型。
分析完毕后,将显示模型层详细报告,还附有该模型需要使用的MACC、flash、ram信息。
最后,在CubeMX中点击“生成代码”,然后会在您的项目中创建一个X-CUBE-AI文件夹,可以在该文件夹中找到一些有用的文件。
包括拓扑网络的gesture.c和gesture.h文件。
包括权重/偏差的gesture_data.c和gesture_data.h文件。
app_x-cube-ai.c and app_x-cube-ai.h 文件还提供AI客户端应用程序可以使用的通用多网络推理API接口。
如果后续需要更新数据集或是重新训练更新权重以获得更好的性能效果,只要更新gesture_data.c和gesture_data.h文件就可以。所以,更新过程很方便的。
显示结果
最后,将uart日志打印到PC端,从而在GUI端显示我们的预测结果。当您在距离自己20~80cm的ToF传感器前做一个顺时针旋转的手势时,GUI将会显示预测结果,如下所示。百分比是该手势的概率。
3D手势演示到这里已经结束,该解决方案可用于以下几个应用场景。
智能家电:当您的手上脏或湿的时候,通过手势识别控制不同的家电。
交互式娱乐:如游戏机。
人机交互:让机器更智能,让人更安全,特别是在新冠病毒肆虐的环境或一些危险环境中。
现在,您可以尝试使用VL53L5传感器、STM32开发板、以及强大的X-Cube-AI库创建自己的手势识别演示。我们正在一些活动中展示该演示项目;如果您对我们的手势演示感兴趣,请联系意法半导体的AI创新应用中心,我们会选定目标客户根据产品的特定用例对该演示进行产品级支持。
我们策划了一系列AI主题文章,详细介绍意法半导体在Deep Edge AI领域的努力成果。 本文是该系列文章中的第八篇,点击上方的话题,订阅我们的AI技术专题系列 。 欢迎您在文后积极留言,告诉我们想了解意法半导体AI的哪些方面,我们将为您呈现更多精彩内容。
原文标题:AI技术专题之八:基于ToF传感器的3D手势识别
文章出处:【微信公众号:意法半导体中国】欢迎添加关注!文章转载请注明出处。
审核编辑;汤梓红
相关推荐
。 如今,许多汽车的车内传感器解决方案大多基于前端飞行时间 (ToF) 或摄像头,但这些不具备智能,也无法用于多种应用。设想一下,如果用于手势控制的相同器件也可以检测留在车内的儿童的动作,或有不速之客试图
发表于 11-03 07:26
XL5300TOF直接飞行时间(dToF)传感器采用单模块封装设计,集成了单光子雪崩二极管(SPAD)接收阵列以及VCSEL激光发射器。该传感器可对物体进行精确的距离测量而不受物体颜色、反射率和纹理
发表于 11-22 10:45
XL5300TOF直接飞行时间(dToF)传感器采用单模块封装设计,集成了单光子雪崩二极管(SPAD)接收阵列以及VCSEL激光发射器。该传感器可对物体进行精确的距离测量而不受物体颜色、反射率和纹理
发表于 03-21 16:11
红外光束从物体表面反射并返回至某特定CMOS传感器所用的时间,从而可以在任何光照下、任意距离、产生高度精确的3-D深度图。Time-of-flight传感器与微软通过GestureTek授权而研发的3-D摄像头手势识别运算法则非常吻合。
发表于 03-02 14:21
设计与实现一个基于3D加速度传感器的便携式计步器
发表于 04-21 13:18
,并进行智能识别匹配的过程。世纪晟3D人像识别系统可在秒级内完成单张人像千万级数据库精准查询,支持10亿级以上的人脸库。系统通过抓拍人像,选取130个人脸特征点,以建立一个3D人脸特征库。该人脸特征库更能
发表于 04-20 10:01
1、我在https://github.com/djmuhlestein/fx2lib/ 下载了3D ToF的源码;
2、按照说明,在win32 的环境下分别安装了 SDCC(2.9.0)和GNU
发表于 06-21 08:23
Microchip MGC3030 手势控制器是一个电场感测片上系统 (SoC),板载处理功能带有 3D 手势识别和手部位置追踪。它采用 Microchip 的 GestIC® 技术,采用约 100
发表于 07-03 09:40
。连接上四个传感器,可以达到3D手势控制的效果,其实也就是可以实现上下左右滑、旋转、点击、拖曳这种X、Y、Z三维立体轴上的移动物体识别。应用的话,就看个人脑洞的发挥啦,从这家公司的官网视频资料,可以看到
发表于 08-06 13:59
的性能,此外还探讨了 3D 传感器(积分时间、饱和度)、信号处理(滤波)和外部红外 (IR) 辐射源对测量的影响。凭借 3D TOF 解决方案的距离测量准确性,扫地机器人能够检测和识别物体并构建房间地图
发表于 10-11 15:37
最新的PCAP控制器MTCH6303及MGC3130 3D手势控制器。它包含一个8英寸的透明触摸传感器,以便对多种常用显示屏进行快速原型开发。MTCH6303可以100 Hz的五指扫描率提供多点触摸坐标
发表于 11-07 10:45
德国艾尔默斯半导体公司(ELMOS)日前宣布推出一款用于手势识别的非接触式光电传感器芯片E527.16.该款芯片是基于HALIOS的基本工作原理:一个LED管发射出经过调制的红外光,当这些红外光
发表于 11-13 16:00
。全新FC30芯片集成3D方位和鼠标单击/双击检测功能,使设计人员能够在产品设计内集成鼠标按键控制功能。 “FC30是一系列全新多功能传感器的首款产品,以完整的转钥解决方案,让客户在系统微控制器上简化
发表于 11-15 16:48
TOF 3D RGB点云模组
发表于 03-26 11:36
加持,智能机能够拍出更好的虚化照片,能够化身为体感游戏机……作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
发表于 08-01 07:00
STTOF环境光传感器VL53L1XVL53L0X用于3D激光测距解决方案STVL53L1X样品申请价格咨询ST代理商18820954295 马工VL53L1X样品代理价格QQ咨询
发表于 12-10 10:26
新一代iPhone 8前置镜头配置3D传感器,其不仅支持AR增强现实技术,还可以与相机配合,完成面部识别验证。
发表于 05-14 06:33
和其他乘客的预警功能。例如,驾驶员在打瞌睡,或是有人将婴儿或宠物留在车内,诸如此类场景,传感器都将进行识别和发出预警;在发生车祸后,3D传感器可以对车内生存者状态进行感知,并将信息发送给负责急救
发表于 07-29 07:38
加持,智能机能够拍出更好的虚化照片,能够化身为体感游戏机……作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
发表于 08-06 06:27
,以及将物品从一个位置移动到另一个位置等。这些应用都依赖于经济且强大的3D视觉传感器,目前,该领域存在多种竞争型技术。所有这些技术都有各自的优点和缺点,具有不同的工作距离、分辨率、处理能力以及成本。每种技术都有其重要的市场价值,大体因为目前还没有能够应对所有应用场景的单一最佳解决方案。
发表于 08-10 06:27
浮出水面,可用于多场景的识别应用,例如前置及后置镜头用于手势识别或者安全支付的脸部3D辨识,以及AR/VR也是ToF在3D感知上的应用方向。 图2可以看到,目前ToF传感器在细分领域的市场份额,主要
发表于 11-14 15:00
目标表面的横截面轮廓,从而生成高密度3D点云。整个零件的3D点云用于执行尺寸和体积测量以及决策。智能线轮廓传感器提供内置的测量工具,还可以生成与3D数据同步的高度详细的2D表面图像。然后可以使用常见
发表于 12-09 14:09
Lumentum的VCSEL技术,不同于其他图像传感器使用RGB模式生成观看图像流并需要另一个IR模块来检测运动的生动性。该方案采用深入感知,以及反欺诈和3D识别等先进算法,增加了高动态范围的功能,提高了各种
发表于 12-16 16:14
人脸。这是由于目前基于RGB等2D空间的主流活体检测方案未考虑光照、遮挡等干扰因素对于检测的影响,而且存在计算量大的缺点。而数迹智能团队研发的3D SmartToF活体检测方案则可以有效解决此问题。那么
发表于 01-06 07:30
CMOS传感器在3D视觉、感测和度量中的应用
发表于 02-22 06:20
。但随着技术不断的发展,仅为前摄人脸解锁这么一个功能在手机里植入一个3D摄像头,显然已不能满足广大用户对3D技术的应用需求。为了开拓更多更广的应用,越来越多的制造商开始采用ToF技术。ToF图像传感器能够
发表于 02-23 11:16
主流的手势识别方法及其原理是什么?各种手势识别方法的优缺点是什么?都是手势识别有什么区别吗?如何用无源传感器PIR搭建属于自己的手势识别模块?
发表于 07-04 07:45
3D ToF摄像头有哪些特性?3D ToF摄像头有哪些功能?怎样去设计一种基于OPT9221和OPT8241的3D ToF摄像头检测电路?
发表于 07-04 07:15
如何实现基于MEMS加速度传感器的手势识别系统的设计?
发表于 12-20 07:55
Microchip的触摸传感和3D控制技术屡获殊荣,能广泛应用于各种应用,包括触摸按键(1D)、触摸屏(2D)以及3D手势控制。
发表于 07-14 16:36
•22次下载
传统2D卷积神经网络对于视频连续帧图像的特征提取容易丢失目标时间轴上的运动信息,导致识别准确度较低。为此,提出一种基于多列深度3D卷积神经网络(3D CNN)的手势识别方法。采用3D卷积核对连续帧
发表于 01-30 13:59
•2次下载
3D视觉摄像头解决方案比较主流的有三种,分别是结构光、双目视觉,以及ToF(Time of Flighgt,飞行时间)。其中,ToF 3D解决方案的渗透率或将超过结构光,国内智能手机厂商率先布局
发表于 07-02 18:25
基于Kinect传感器的动态手势识别方法
发表于 06-23 16:44
•17次下载
MIT:让液晶显示器能识别手势
目前的手势识别(gesture recognition)技术,需要一个能够侦测深度的3D影像传感器;为此美国麻省理工学院(MIT)的研究人员开发出一种光电二极
发表于 12-23 09:11
•600次阅读
奥地利微电子公司近日推出全球首款基于全功能3D霍尔平台的线性位置传感器AS5410。独特的3D霍尔传感器解决方案可在汽车和工业应用中感应绝对位置,提供超高分辨率的位置信息
发表于 06-08 09:03
•1941次阅读
日前,德州仪器 (TI) 宣布同业界领先的端对端 3D 传感器及手势识别中间件解决方案供应商 SoftKinetic 合作,在电视、笔记本电脑 (PC) 以及其它消费类及工业设备中推广手势控制技术
发表于 12-29 08:58
•1618次阅读
美国专利商标局日前公布了苹果最新申请的“3D手势输入”专利。据国外媒体报道称,该技术允许用户通过特殊手势实现3D手势输入,达到以3D的方式操控3D数字图像的目的。
发表于 08-23 13:38
•1366次阅读
Andreas Guete表示,Microchip开发的GestIC®技术只有一个目标:给3D手势识别提供高性价比的单芯片解决方案,而MGC3030和MGC3130完全实现了此目标。
发表于 01-29 17:03
•3347次阅读
ADI最近发布了一款用于手势识别的光学传感器,可通过单个传感器测量对象的位置、距离和手势,相比现有解决方案具有更佳的检测精度和可靠性。
发表于 06-27 11:18
•896次阅读
Microchip专门为GestIC技术开发出MGC3030和MGC3130两个专用的3D手势识别和运动跟踪控制器芯片,片上集成的Colibri手势识别套件,Colibri套件结合了隐马尔可夫模型
发表于 10-26 17:24
•1008次阅读
光学3D手势识别还是有一定的技术门槛,想要玩转不是一件容易的事,有些技术还需要进一步实用验证和打磨。
发表于 11-05 07:37
•5142次阅读
飞行时间法(ToF)提供了非凡的3D视角,可望推动新一代专用CMOS图像传感器的发展。
发表于 04-02 09:33
•2.1w次阅读
3D成像、自动驾驶、驾驶员辅助、AR/VR、手势识别、人脸识别、语音降噪等等新的应用不胜枚举,而赋能这些新应用的一类关键技术就是传感器。
发表于 04-29 16:58
•3899次阅读
1、3D传感,开启人脸识别市场新天地 苹果手机首次引入3D传感技术用于人脸识别之后,各大手机品牌纷纷表示将增加3D传感模块。打破技术壁垒,ams已经能提供全面的3D 传感解决方案,包括 VCSEL和
发表于 05-02 09:49
•1w次阅读
本视频将展示结合多点触摸与3D手势模块的Microchip显示解决方案。支持2D/3D功能的显示屏是Microchip基于GestIC®技术的最新解决方案。显示屏上结合了3D手势与2D多点触摸功能,可降低安装单个显示模块的复杂度。
发表于 06-06 02:45
•4119次阅读
小米的3D人脸识别技术由以色列领先的3D传感器公司Mantis Vision及模组合作伙伴提供支持。
发表于 06-04 09:22
•4894次阅读
经过快一个星期的宣传与预热,今天vivo正式发布了TOF 3D超感应技术,这是继屏幕指纹、升降式摄像头之后,vivo给行业与消费者带来了又一项黑科技,相较于大家所熟知的将TOF应用到人脸识别,vivo发布TOF 3D超感应技术应用更加广泛。
发表于 07-02 10:12
•3394次阅读
主流的人脸识别有哪些?你肯定回答2D红外和3D结构光,但是近日vivo宣称下半年将推出3D ToF,运用到vivo新品中,并量产商用。是不是又一次被蓝厂惊掉了下巴。3D ToF 果真碾压 3D 结构光吗?
发表于 07-11 05:16
•1649次阅读
开始使用TOF 3D传感器:推荐的设计过程和资源
发表于 08-23 01:38
•2355次阅读
由于可靠性问题,电容传感和3D手势方案一直很难做进汽车市场。不过,微芯(Microchip)这次令人刮目相看,电容传感和3D手势方案不仅做到经常日晒雨淋的车门把手上,而且做进日韩欧美的一线汽车品牌之中。
发表于 09-10 10:56
•1.4w次阅读
根据韩媒报导,三星预计2019年将在新的Galaxy S10及 Galaxy A系列的智能手机上采用ToF 3D面部识别技术,并极有可能砍掉虹膜识别。
发表于 11-22 09:26
•1658次阅读
炬佑智能在开发动态ToF领域全面布局,并推出充分发挥ToF 3D感知技术优势的解决方案。
发表于 12-03 11:29
•6754次阅读
麦姆斯咨询:炬佑智能相信ToF传感器将实现从3D感知向4D感知的转变,炬佑智能愿意和产业链上下游企业深度合作,共同推动ToF传感技术的发展!
发表于 01-21 14:33
•1.4w次阅读
3D-ToF空间深度传感器
发表于 04-24 06:17
•5917次阅读
早先有爆料称,P30系列会搭载全新的CMOS传感器,并有望搭配潜望式摄像头来实现10倍光学变焦。同时,P30 Pro还有望搭载四摄,其中一颗为TOF 3D传感器,可实现3D人脸识别、3D建模等功能。
发表于 03-02 10:35
•1w次阅读
然而,提供3D深度讯息的新型传感器,如3D飞时(TOF)镜头、3D光达和立体视觉镜头,可更准确地检测和定位对区域的入侵。若守卫机器人的3D系统在几公尺之外检测到人的腿,它将允许机器人继续操作,直到对方实际伸出其手臂朝向机器人为止。
发表于 04-19 15:02
•3318次阅读
英飞凌科技股份公司针对移动设备市场开发出一款卓越的3D图像传感器解决方案,即REAL3™ IRS2381C。
发表于 06-03 17:47
•1393次阅读
作为3D深度视觉领域三大主流方案之一,ToF技术除了应用在手机上之外,也在VR/AR手势交互、汽车电子ADAS、安防监控以及新零售等多个领域都开始大显身手,应用前景十分广阔。
发表于 06-07 12:51
•4237次阅读
行业预计,2019年使用TOF 3D传感器技术的智能手机出货量将达到2000万台。工业和汽车应用前景广阔。ADI系统应用工程经理李佳对记者表示,ADI公司的ToF技术之所以受到瞩目,是因为这项技术能
发表于 06-24 08:32
•8463次阅读
3D手势识别和跟踪板通过电近场感应来确定近场位置和运动。
发表于 07-08 16:22
•3258次阅读
1D ToF的创新应用有哪些?它是如何提升3D识别系统可靠性、稳定性,降低系统功耗的?拥有传感器核心技术的ams,能从哪些方面提升你的手机系统设计水平呢?
发表于 08-02 14:16
•3232次阅读
由多个3D智能传感器组网的多传感器网络是应对这一挑战的理想解决方案,同步扫描以及跨多部扫描设备执行校准和拼接的能力带来诸多关键优势。
发表于 11-04 15:47
•1565次阅读
DFRobot 3D手势识别传感器是一款集成3D手势识别和运动跟踪为一体的交互式传感器,传感器可以在有效范围内识别手指的顺时针/逆时针转动方向和手指的运动方向等。
发表于 01-03 15:40
•1346次阅读
1月9日消息,英飞凌发布全球最小3D图像传感器, 3D面部解锁设备迎来新技术。据外媒报道,德国科技大厂英飞凌科技(Infineon)携手3D飞时测距(ToF)系统专业伙伴
发表于 01-11 09:03
•1008次阅读
从低密度的后通孔TSV 硅3D集成技术,到高密度的引线混合键合或3D VSLI CoolCubeTM解决方案,研究人员发现许多开发新产品的机会。本文概述了当前新兴的硅3D集成技术,讨论了图像传感器
发表于 01-16 09:53
•629次阅读
的应用范围。这个参考设计采用REAL3TM 3D飞行时间(ToF)传感器,支持智能手机制造商实现既经济高效又易于设计的标准化集成。4年来,英飞凌凭借其3D ToF传感器技术活跃在移动终端市场上。不仅如此
发表于 03-09 15:18
•2094次阅读
3月20日消息,据外媒报道,Eyeware和Melexis合作开发基于3D ToF传感器的驾驶员监控系统眼动跟踪解决方案。据悉,Eyeware是一家总部位于瑞士的3D眼动跟踪技术公司,其使命是将
发表于 03-22 17:17
•2981次阅读
基于3D ToF传感器的驾驶员监控系统(DMS)。该系统采用Melexis最新的MLX75027 3D ToF传感器,并利用Eyeware的注意力监控技术,即使在阳光下也能精确跟踪监控驾驶员视线和头部运动。
发表于 03-26 14:24
•3823次阅读
本文将探讨ToF深度传感的基本原理和两种主要的方法,并与其他常用的深度测量技术进行比较。然后,详细介绍ADI公司的3D 深度传感ToF技术的核心—— ADDI9036 模拟前端,这是一个完整的ToF信号处理器件,集成了深度处理器,将来自VGA CCD 传感
发表于 04-12 11:30
•1.2w次阅读
数迹智能就是一家主要立足于控制方案端的3D ToF系统解决方案提供商,我们在3D ToF系统方案中的软件算法核心技术上会成为未来3D图像信号处理器中的“长矛利剑”。
发表于 07-16 17:24
•3233次阅读
据麦姆斯咨询报道,全球成像解决方案创新公司Teledynee2v近日推出其最新款飞行时间(ToF)CMOS图像传感器Hydra3D。
发表于 08-04 15:33
•689次阅读
日前,Teledynee2v公司宣布推出专为3D检测和距离测量定制的新型Hydra3D飞行时间(ToF)CMOS图像传感器。该ToF传感器具备高分辨率和灵活配置的特点,可用于各类工业应用,包括:视觉引导机器人技术、物流以及自动导引车。
发表于 08-13 16:14
•486次阅读
据麦姆斯咨询报道,三星在2020年9月18日向欧盟知识产权局(EUIPO)提交了一份商标申请文件,显示该公司可能即将发布其首款名为“ISOCELL Vizion”的3D ToF传感器。这款3D ToF传感器或将用于明年问世的新款Galaxy S21系列(或为S30系列)智能手
发表于 09-26 10:37
•1852次阅读
根据描述,三星的新型传感器将带来更好的人脸识别以及更好的深度感应功能。值得注意的是,有传言称苹果将在即将面世的iPhone 12系列中添加3D ToF相机。该公司已经在其iPad上安装了LiDAR传感器。
发表于 09-30 14:44
•2115次阅读
无人机或地面系统上的闪光激光雷达(也称为ToF相机传感器)具有许多强大的用途,包括物体扫描、测量距离、室内导航、避障、手势识别、跟踪物体、测量体积、反应式高度计、3D摄影、增强现实游戏等。
发表于 09-30 15:47
•1918次阅读
新款REAL3 ToF图像传感器芯片可以实现更好的拍照效果:(1)在弱光条件下更快地自动对焦;(2)基于图像分割的夜景人像模式。 游戏与运动、虚拟电子商务、3D在线教育:采用三维(3D)深度传感器
发表于 11-09 14:00
•1795次阅读
ToF传感器火了。 从去年开始,一票传感器厂商和手机厂商的目光都投向了ToF传感器。直到今年,英飞凌、AMS等传感器厂商,以及苹果、华为、三星等手机厂商仍在不断推进ToF传感器的技术和应用升级,可以
发表于 11-12 15:16
•1944次阅读
CronAI公司的senseEDGE平台是一种具有“自我优化、3D数据、深度学习”的边缘推理感知处理平台。它使创新者能够使用3D传感器开发智能解决方案,准确地感知现实世界,例如汽车ADAS驾驶系统所需求的传感技术。
发表于 11-25 14:11
•2928次阅读
什么是ToF传感器?ToF传感器又名飞行传感器,是一种接近传感器。简单来说,ToF传感器的主要原理是利用自身发出的对脉冲发射光在某种介质中行进一段时间到达物体并反射回传感器所用的时间来测量传感器与物体之间的距离,进而再通
发表于 11-26 14:31
•2833次阅读
SONY 发表了一款适用于工业生产机械设备的背照式航行时间(TOF)3D图像传感器*1。这款精巧的高清分辨率传感器选用了SONY 的感测器和测距技术应用,能够获取覆盖短距离和远距离的深度图。
发表于 09-01 17:46
•1040次阅读
的误差的; 为了融合来自3D激光雷达和相机的信息,需要知道传感器坐标系之间的外部校准。 传统的外部校准方案有三个缺点: 传统的校准方法忽略了传感器误差,导致了校准失真
发表于 05-26 09:15
•3711次阅读
四个不同版本的Bidos P2433 Q产品支持先进的3D ToF系统,可用于AR/VR眼镜手势识别。
发表于 10-19 10:50
•2270次阅读
。 TOF是能够识别场景及物体并创建3D视图的一项智能感测技术。TOF传感器通过测量光束到达物体和返回所用的时间来确定物体距离,所生成和捕获的数据非常准确,可提供行人检测,基于面部特征的用户身份验证,以及使用SLAM(同时定位和映射)算法的环境映射
发表于 12-17 09:37
•2236次阅读
经常听到有人问“3D视觉传感器/3D激光视觉传感器的精度是指什么?跟重复精度有什么区别?”“3D视觉传感器/3D激光视觉传感器线性度的定义?”等,今天小编带大家一次性搞懂这几个定义!
发表于 03-28 13:33
•1170次阅读
测距传感器和免费的配套工程软件。采用ToF传感器的手势识别是一项突破性的人机交互技术,让用户能够与各种设备进行复杂的互动。
发表于 05-19 10:31
•1086次阅读
瑞萨最高等级的电容触摸单元:
最新的硬件IP- CTSU2
高精度传感器
抗干扰- (IEC61000 4-3 Level 4 Medical)
可实现快速扫描接近传感及3D手势识别
发表于 05-27 10:23
•575次阅读
近日,由智车行家主办的2022第二届座舱监控系统(IMS)前瞻技术展示交流会在苏州圆满落幕。奥比中光子公司深圳奥锐达科技有限公司(以下简称“奥锐达”)携最新智能座舱3D TOF方案参展,奥锐达
发表于 07-13 10:34
•1147次阅读
3D传感器作为3D视觉的眼睛,通过多个摄像头与深度传感器的组合能够获得物体三维位置及尺寸等数据,实现三维信息采集。目前3D视觉传感器主要有双目相机、结构光相机及TOF(Time of flight)相机。
发表于 11-22 21:21
•1267次阅读
英飞凌科技3D传感业务副总裁Christian Herzum表示:“追觅推出的高端扫地机器人在摄像头中搭载了英飞凌先进的3D ToF传感器技术。该图像传感器与追觅先进的环境感知技术相结合,让扫地机器人能够顺利识别并避开障碍物。
发表于 11-30 15:39
•293次阅读
和数字化进程。虹软科技作为英飞凌的长期合作伙伴应邀出席,会上虹软科技产品副总裁Alex发表了“用ToF感知3D世界”主题演讲,介绍了3D视觉传感技术在安全(人脸识别,支付)、摄影、娱乐(增强现实/XR)三大主要应用场景的实际应用和创新技术方案。
发表于 12-20 09:16
•476次阅读
3D Flash 激光雷达测绘和手势识别
发表于 01-05 09:43
•380次阅读
此ToF传感器专为寻求即时和灵活的3D检测的客户精心设计,可提供高质无损的3D性能。其紧凑型传感器可进行2D和3D大视野场景拍摄,系统极具性价比。
发表于 01-13 14:41
•172次阅读
英飞凌与专注于3D ToF领域的优质合作伙伴湃安德(pmd)联合推出IRS2877C飞行时间(ToF)VGA传感器的性能进阶版——IRS2976C。
发表于 04-03 09:33
•332次阅读
评论