“在人工智能(AI)时代,我们做的很多决策、处理,都通过机器来实现。这些CPU、GPU是怎么看待世界的?该如何让它们感觉到关键的信息?实际上,这是图像传感器应该做的事情。”在ASPENCORE 3月18日举办的2021年中国IC领袖峰会上,思特威(上海)电子科技股份有限公司副总经理欧阳坚针对图像传感器在机器视觉领域的应用做了精彩分享。
“2021年中国IC领袖峰会正在直播中,点击以下链接可在线观看!https://www.eet-china.com/ee-live/Aspencore_20210318.html”0pbesmc
在AI+IoT时代中,越来越多的机器视觉应用需要智能终端对信息做出精准且快速的采集与处理。而图像传感器就像是机器的“眼睛”,赋予了机器感知时间的能力。0pbesmc
CPU和GPU的处理能力远超人脑和人眼,现在很多图像的处理通过AI的CPU、GPU来实现,能够精准抓拍到物体在高速运动时不变形的图像非常关键。比如,机器在运转过程中可达到每秒500至1000帧的帧速率,在人眼无法快速辨别每一帧图像时,机器却能迅速识别物体并找到物体,从而进行快速、自动化操作。又如,家用扫地机器人在打扫房间时能智能地避开障碍物,它利用了机器视觉技术,对房间的布局做出精准判断。0pbesmc
0pbesmc
另外,在复杂的环境下,大家可以通过摄像头来实现人脸支付。这个应用要求保持高度的安全,需要图像处理做得非常精细。还有,在智能车载领域,无论是ADAS、巡车记录,还是高速智能交通监管,它们都对车辆的监控和抓拍提出了很大的诉求。0pbesmc
0pbesmc
针对以上多种应用,都对图片处理技术提出了要求。欧阳坚表示,基于这种市场需求,思特威推出了Global shutter传感器以及SmartGS®系列Global shutter图像传感器。0pbesmc
根据欧阳坚的介绍,最初Global shutter传感器的应用场景并不多。“我们有一个简单的逻辑,就是要抓拍高速运动的物体。因此,当时的应用场景主要落在智能避障上。但随着我们的合作伙伴及生态链的应用案例越来越多,Global shutter系列传感器拓展出了更多的新应用,其中包括了智能教育应用,类似于智能翻译笔。”0pbesmc
当然,现在Global shutter系列传感器最大的应用场景无人机。无人机在高速运转过程中,若操作不当可能会撞到障碍物或者“炸机”。从去年开始,一家头部无人机企业的全系列无人机都配备了智能避障功能,其无人机上使用的智能避障传感器,大多数是来自思特威。0pbesmc
除了智能避障应用以外,Global shutter传感器还应用在公共安全领域,比如作为驾驶员的智能管理系统DMS来应用,监测驾驶员是否疲劳驾驶、有无分心。欧阳坚还补充说:“现在常用的无人机一般会用双目解决方案,但是无人机运行时会有前后左右上下八个方向,这八个方向至少需要用到八个传感器。一台高端无人机甚至会标配12个带智能全局曝光传感器,因此该产品的应用领域非常宽泛。”0pbesmc
0pbesmc
Global shutter的全局曝光成像技术具备非常多的优势。欧阳坚称,普通CIS在高速运动场景中,采用Rolling shutter的曝光方式,逐行进行扫描,最后拼接一幅图。在这个过程中存在一个时延,会出现果冻效应,最终出来的成图效果是变形的。机器视觉AI芯片无法正确识别这样的图片,也无法识别图片里面的文字。0pbesmc
Global shutter全局曝光产品最大的特点是——第一,能高速抓拍运动的物体,无形变、无拖尾;第二,Global shutter是基于BSI(背照式)工艺。“感光效果好的智能手机所用的图像传感器一般基于BSI工艺。不过,全局曝光跟BIS工艺的融合有很大的难度。截至目前为止,我们是全球率先实现了基于BSI工艺的全局曝光技术的公司之一,友商主要是基于FSI(前照式)工艺实现的。”欧阳坚自豪地表示。0pbesmc
0pbesmc
欧阳坚还展示了SmartGS®高速摄像头汽车山路场景中的图片。他解释说,在80-90米远就可清楚看到车牌细节,能帮助人脸识别抓取到所有的信息。快度抓拍时如果不采用全局曝光,最终呈现的效果会有打折扣。采用SmartGS®高速摄像头拍出来的视频,在16倍慢放时汽车的车轮都没有形变。视频中任何一张图抓取出来,交给机器视觉和AI识别,都不会造成误判。0pbesmc
值得注意的是,夜间拍照经常会遇到明、暗两种不同的环境,这要求拍照时做到噪声读取控制得足够好且感光度足够高。不需要的噪声全部滤掉,还能感受到足够多的光线,让亮的场景不要过曝,暗的场景保持细节。0pbesmc
在交通领域,红绿灯是高频闪烁的LED灯,如果不对高频闪烁的频率做处理,抓拍到的信息会残缺不全。欧阳坚介绍称,思特威的产品可针对不同区域,做不同程度的曝光和中央处理,从而实现分区处理的效果。0pbesmc
SmartGS®高速摄像头还支持多个车道抓拍,能显著降低系统成本。“友商的同类摄像机可能只支持单车道抓拍,会造成整个系统成本非常高。”欧阳坚还透露,昨天(3月17日)该产品刚正式发布,紧接着马上会进入量产阶段。0pbesmc
0pbesmc
除此之外,思特威还可提供多种HDR解决方案。欧阳坚透露说:“这些方案可避免红绿灯的过曝,能帮助机器快速识别物体。这些产品是我们过去半年推出的一个最新的技术,未来我们还会研发新一代的产品,以提供更高分辨率、更高像素的解决方案。”0pbesmc
“2021年中国IC领袖峰会直播请戳,同期线上展会请戳https://ve.eet-china.com/icsummit2021”0pbesmc
0pbesmc
微信扫一扫,一键转发
关注“国际电子商情” 微信公众号
国际电子商情26日讯 日本电子制造商夏普公司近日宣布,已与软银集团达成协议,同意以1000亿日元(约合46.6亿元人民币)的价格出售其位于大阪府堺市的旧液晶面板工厂部分土地和设施。
为了“集中力量,增强协同效应”。
国际电子商情24日讯 韩国学术界和产业界的专家近日提议,效仿台积电(TSMC)的成功模式,在韩国建立一家“韩积电”(KSMC,韩国积体电路制造公司)。这一构想旨在扶植一个完整的半导体生态系统,以应对韩国半导体行业面临的多重挑战,并在全球半导体市场中占据更有利的竞争位置。
在汽车行业面临电动化和智能化转型的关键时期,日本两大汽车制造商本田汽车和日产汽车宣布了一项重大战略合作。
博通和Intel的市值自2022年底AI火热以来呈现出相反的走势。
国际电子商情24日讯 在美国即将结束拜登政府任期之际,对中国芯片产业发起了新一轮301条款贸易调查,这一行动预示着可能对来自中国的芯片征收额外关税。这些芯片广泛应用于汽车、洗衣机和电信设备等日常用品,对全球供应链具有深远影响……
美国商务部长认为,在半导体竞赛中,阻碍中国的发展是“徒劳的”。美国半导体产业要想保持领先地位,应更多地关注国内创新投资……
本报告选择汽车动力(Powertrain)与底盘(Chassis)系统中的MCU做探讨,一方面是因为,就车规MCU的角度来看,这两个组成部分更为关键、复杂,对安全性要求更高,更具实现难度;另一方面,即便是传统汽车角度,动力与底盘系统的电子控制也更加由来已久和具代表性。
国际电子商情23日讯 美国国际贸易委员会(ITC)近日根据《美国1930年关税法》第337节的规定,启动了一项针对特定无源光网络设备的337调查。涉案的4家中国企业产品被指控侵犯了Optimum Communications Services的专利权……
力争规模超500亿!
美国国防部没有说明移除原因。
中国四家企业涉案。
2024年第三季度,中国大陆云基础设施服务支出达到102亿美元,同比增长11%,重回两位数增长。
2025年半导体制造市场五大展望
12月20日,上海市政府发布公告,华虹集团党委书记、董事长张素心正式离任,由上海联和投资有限公司党委书记、董事
欧盟委员会发布《2024年欧盟工业研发投资记分牌》(The2024EUIndustrialR&DInvestmentScoreboard),谷歌母公司
随着全球半导体产业竞争的加剧,欧洲逐渐意识到自身在芯片制造和封测领域的短板,纷纷出台措施以提升产业链自主
2024年,半导体行业已经出现分化,消费电子、汽车和工业市场表现持续疲软,而人工智能领域的发展继续推动GPU和高
近日,芯片制造领域传来重大消息:Rapidus开始安装ASMLEUV光刻机,成为首家接收EUV光刻设备的日本半导体公司。
品牌战略管理咨询公司英图博略(Interbrand)日前发布《2024中国最佳品牌》榜单。
为抢抓半导体与集成电路产业重大发展机遇,深圳市龙华区政府印发了《关于支持半导体与集成电路产业发展若干措
这标志着非美国公司首次在服务器市场排名中位居榜首。
根据TrendForce集邦咨询最新调查,2024年VR与MR头戴装置出货量约为960万台,年增8.8%。
据TrendForce集邦咨询最新OLED技术及市场发展分析报告,由于陆系笔记型电脑品牌大规模采购,预计2024年OLED笔电
可实现电信、数据中心和专业音频/视频设备市场的无缝集成。
最近,Rambus推出了业界首个HBM4控制器IP,这一里程碑式的产品进一步巩固了公司在内存接口技术的前沿地位。该控
喆塔科技与国家集成电路创新中心共建“高性能集成电路数智化联合工程中心”签约揭牌仪式圆满举行
专为下一代智能可穿戴设备、无线耳机、医疗设备和物联网应用而设计。
我国的高质量发展,源自于国家政策与市场需求的双方面驱动。顺应“新质生产力”建设的巨大需求,集成电路产业正
联想手写笔Pro搭载了汇顶科技新一代的主动笔驱动芯片,为消费者带来更流畅自然的书写体验。
在2024德国慕尼黑国际电子元器件博览会上,创实技术展示了包括用于助听器、电源管理芯片等领域的高性能电子元
泰凌微电子获蓝牙 6.0 认证,助力蓝牙技术拓展与应用升级
泰凌微电子:国内首家获得Zigbee PRO R23 + Zigbee Direct认证的芯片公司
2024年11月20日,由全球高科技产业研究机构TrendForce集邦咨询以及旗下全球半导体观察主办的“MTS2025存储产
此次合作旨在大幅提升成本、能效、驾驶体验和车辆续航里程。
据TrendForce集邦咨询分析,截至2023年,全球传统乘用车中LED头灯的普及率已达72%,而在电动汽车领域,这一比率更是
点击查看更多
北京科能广告有限公司深圳分公司 版权所有
分享到微信
分享到微博
分享到QQ空间
推荐使用浏览器内置分享
分享至朋友圈