计算机视觉加速全局快门传感器应用

发布于:2022/4/6 10:01:40 | 1891 次阅读

    计算机视觉作为一种人工智能的基础技术应用,使用场景多样,市场潜力巨大。而计算机视觉又与传感器密切相关,只有经过传感器对环境信息的采集,才能进而实现数据的存储、处理以及后续的推理判断与执行。近日,意法半导体(ST)举办线上媒体沟通会,与会嘉宾在对人工智能时代传感器的技术发展与市场应用进行介绍时指出,计算机视觉将加速全局快门传感器的应用。
    计算机视觉应用于四大场景
    计算机视觉是人工智能领域的一个重要分支,其可以让计算机等智能设备从图像、视频以及其他视觉输入的数据库中提取有意义的信息,并对这些数据进行处理,进而采取行动。目前,计算机视觉在生产生活当中已有了很多实际应用,比如智能手机中的面部识别技术就已经被广泛应用于屏幕解锁和电子支付等方面。
    根据意法半导体亚太区影像事业部技术市场经理林国志的介绍,计算机视觉的应用场景大致可以归纳为四大类:首先是深度感应,主要用于面容识别、3D扫描等场景。这类应用场景大致通过两个全局快门传感器搭建一组双目摄像头系统,或者使用一个全局快门传感器搭建结构光摄像头系统。
    其次是生物识别,主要是采集人体各个部位的信息并用于身份识别,除人脸识别之外,还包括手势检测、指纹识别、虹膜识别等。
    再次是增强现实、虚拟现实和混合现实等应用场景,包括6DoF(六个自由度追踪)和SLAM(同步定位与地图构建)。6DoF主要针对头部行为,当用户戴上VR头显设备后就会得到6D感知能力,头部可以做出左右、上下、前后六个角度的动作。当用户需要掌握自己所处房间状况时,则可以通过SLAM发挥作用。此外,使用VR/AR设备还可以进行生物识别,比如手势检测或者手势追踪。在这种场景下,设备可以通过用户的一个手势,识别出该行为的目的,比如用户在做一场演讲时,通过一个手势就可以自动翻到下一页或者翻回到shou页,或者通过手势实现鼠标的单击和双击。
    很后一类应用场景是机器人与工业控制,如无人机和扫地机器人等。这些设备在使用过程中要避免相互碰撞,就需要具有物体检测和场景分析能力。而在这些应用场景中,传感器都可以发挥关键作用。
    全局快门与卷帘快门各具优势
    由于计算机视觉的应用场景与一般用途的摄像头不同,并不注重静态图像的捕捉与色彩渲染,因此智能手机与监控摄像头等设备中日常搭配使用的卷帘快门传感器并不适用。林国志介绍,从拍摄角度划分,图像传感器可以分为全局快门与卷帘快门两大类型。
    人们日常接触的多数摄像头,大都采用卷帘快门传感器,比如智能手机的主摄像头和自拍摄像头,楼宇中安装的监控摄像头以及数码相机中大都采用卷帘快门技术。因为这些应用场景都需要捕捉彩色图像,需要相当高的分辨率。卷帘快门的设计目的正是为了捕捉静态图像和视频拍摄,需要非常高的分辨率和颜色处理能力。
    问题在于,计算机视觉当中采用卷帘快门传感器都是逐行拍摄图像的,整个图像只有一帧。如果拍摄对象是车辆这样的快速移动物体,图像就有可能发生扭曲,无法显示拍摄对象原始形态,使得机器无法判断不同图像中的车辆是不是同一辆车,也就无法用于计算机视觉的处理。
    全局快门的原理则不同,其拍摄时间非常短,只要拍摄对象不是快速移动的物体,成像效果就非常准确,因此更加适用于计算机视觉。随着计算机视觉在人工智能领域的应用快速铺开,也将促进全局快门传感器的发展。
    意法半导体亚太区影像事业部技术市场高等经理张程怡表示,目前全局快门传感器在消费性电子和汽车领域的应用势头非常猛。消费性电子上应用很典型的就是人脸识别,无论智能门锁、门禁管制,还是电子支付都已开始采用。汽车领域的主要应用场景是驾驶者的监控和对乘客监控。此外,全局快门传感器在机器人、绘制地图、AR/VR等领域的发展势头也不错。
    在谈到全局快门是不是会全面取代卷帘快门传感器时,张程怡认为,两者各有优势。在拍摄静态照片或视频时卷帘快门的像素更小、解析度更高,在用于手机主摄像头等设备中更具优势,但全局快门在计算机视觉这类识别动态影象方面更有优势。卷帘快门的画点大概在1.1微米以下,而全局快门通常在2.2微米以上,单仅画点尺寸上,两者就代表了不同的应用领域。基于此,也可看出全局快门传感器的技术发展趋势像素尺寸持续缩小,画点持续变多,功耗优化。
    目前,意法半导体消费和工业用全局快门图像传感器已推出VD55G0 40万像素和VD56G3 150万像素两款产品。这些产品在940nm处具有很高的量子效率,拍摄性能稳健;正方形传感器的分辨率与镜头很佳匹配,适合旋转拍摄使用场景;拍摄时间很短,降低系统功耗,能够在确保准确成像的同时降低系统功耗。
参与讨论
后参与讨论

//评论区

推荐阅读

智能网联汽车国际标准法规协调专家组(HEAG)召开工作会议

近年来智能网联汽车快速发展,新技术不断涌现,与相关产业融合度持续提升,正在推动全球汽车产业发生深刻变革。为应对此种形势,欧、美、日等汽车工业发达国家和地区都加大了智能网联汽车的国际标准法规协调的参与力度,在联合国世界车辆法规论坛(UN/WP.29)和国际标准化组织(ISO)层面,智能网联汽车相关国际标准法规协调活动正快速推进。 为更有效地支撑上述组织的国际标准法规协调活动,2017年全国汽车标准

0215jiejie | 发布于:2022-12-01 0评论 0赞

苹果推出搭载M2芯片的新款iPad Pro 799美元起售

据苹果官网,苹果推出搭载M2芯片的新款iPadPro。 11英寸wifi版起售价为799美元,wifi+蜂窝网络版起售价为999美元;12.9英寸wifi版起售价为1099美元,wifi+蜂窝网络版起售价为1299美元。

0215jiejie | 发布于:2022-10-19 0评论 0赞

新能源汽车领衔 “中国智造”加速登陆欧洲市场

全球五大车展之一巴黎车展时隔四年再度启幕。在这场被视为“全球汽车行业风向标”的盛会上,国内外汽车品牌云集,长城汽车、比亚迪等再次领衔中国汽车出海。 长城汽车欧洲区域总裁孟祥军表示:“欧洲是长城汽车最重要的海外市场之一,巴黎车展是长城汽车向欧洲市场展示GWM品牌和产品的最佳机会。长城汽车正在研究汽车行业碳排放的整个生命周期,到2025年,将推出50多款新能源产品,全力支持可再生能源使用,为全球用户

0215jiejie | 发布于:2022-10-19 0评论 0赞

严监管时代来临,电子烟“通配”大战走向何方?

针对通配烟弹厂商的一系列诉讼的结果,将对生产通配烟弹的品牌未来在电子烟行业的发展产生深远影响。 10月1日,《电子烟强制性国家标准》正式实施,中国电子烟监管全面生效。而在电子烟行业进入规范化、法治化阶段前夕,一场围绕着通配烟弹的争论在行业里发酵。 “通配”是电子烟从业者约定俗成的概念。换弹式电子烟由烟杆和烟弹组成,“通配”烟弹指的是非品牌商生产、可与品牌烟杆匹配使用的烟弹。多位业内人士表示,被

0215jiejie | 发布于:2022-10-19 0评论 0赞

Bourns 全新大功率分流电阻器

采用金属感应引脚,专用于大电流应用中进行精确测量 全新分流电阻器专为电池管理系统、大电流工业控制和电动汽车充电站 提供高可靠性、高成本效益的解决方案 美国柏恩Bourns全球知名电子组件领导制造供货商,宣布新增12款CSM2F系列功率分流电阻器,扩展其产品组合。全新系列采用铆接通孔金属传感引脚,可满足大电流应用中对电压测试点精确定位日益增长的需求。最新型Bourns?CSM2F系列分流电阻器

0215jiejie | 发布于:2022-10-18 0评论 0赞

请尊重元宇宙“这个筐”

元宇宙是个筐,啥都往里装,但区别在于有的像聚宝盆,有的像垃圾桶。国庆假期刚结束,中青宝“90后”董事长李逸伦便亲自上阵,玩起了元宇宙婚礼。靠着老板首秀和代言,中青宝顺势推出“MetaLove元囍”App,正式进军元宇宙婚礼赛道。 就产品而言,如同其他元宇宙产品,李逸伦的元宇宙婚礼“新奇与吐槽齐飞”:有人说是有趣的尝试,有人则认为像QQ炫舞结婚系统。要知道,QQ炫舞是一款推出了十余年的老游戏。

0215jiejie | 发布于:2022-10-13 0评论 0赞

边缘计算:突围商业模式痛点

截至8月末,中国5G基站总数达210.2万个,中国5G发展已经进入下半场。随着5G加速融入千行百业,互动直播、vCDN、安防监控等场景率先大规模落地,车联网、云游戏、工业互联网、智慧园区、智慧物流等场景也快速走向成熟,这些更大流量、更低时延、更高性能的场景涌现,对边缘计算的刚性需求势必爆发。 GrandViewResearch预测,即使在新型冠状病毒肺炎疫情肆虐全球的背景下,边缘计算和5G网络市

0215jiejie | 发布于:2022-10-13 0评论 0赞

商务部回应美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”

商务部新闻发言人10日就美商务部升级半导体等领域对华出口管制并调整出口管制“未经验证清单”应询答记者问。 有记者问:近日,美国商务部在半导体制造和先进计算等领域对华升级出口管制措施。同时,在将9家中国实体移出“未经验证清单”过程中,又将31家中国实体列入,请问中方对此有何回应? 对此,商务部新闻发言人回应称,中方注意到相关情况。首先,通过中美双方前一阶段共同努力,9家中国实体zui终

0215jiejie | 发布于:2022-10-13 0评论 0赞

TCL华星官宣与奔驰合作:推出全球首款横贯A柱的车载显示屏

今年1月,奔驰带来了VISIONEQSS概念车,其中控台采用了一块完全无缝的47.5英寸曲面显示屏,横贯整个A柱,令人印象深刻。今天,TCL华星正式官宣与奔驰达成合作,并认领了VISIONEQSS上这块全球首款横贯整个A柱曲面的车载显示屏。 根据TCL介绍,这款显示屏采用了完全无缝的超薄一体化设计,将仪表盘、中控与副驾娱乐显示融为一体,并能够与3D实时导航系统相辅相成。 同时,这块显示屏还采用

0215jiejie | 发布于:2022-10-12 0评论 0赞

半导体板块暴跌 谁最受伤

国庆假期后首日开盘,上证综指时隔5个月再次失守3000点,与此同时,半导体板块也再度走低,其中,北方华创、雅克科技等个股跌停。10月11日早盘期间,半导体板块持续下挫,北方华创、雅克科技再度跌停。截至下午收盘,北方华创、雅克科技维持跌停状态,华海清科、拓荆科技-U、盛美上海、清溢光电、海光信息的跌幅则超10%。同日,半导体板块中的119只个股中超五成呈现下跌趋势。 在半导体板块遭遇下挫的同时,北

0215jiejie | 发布于:2022-10-12 0评论 0赞