滚动新闻 | RSS订阅 | 网站地图 |
你好,游客 登录 注册 搜索

索尼发布全球首款内置AI传感器,1200万像素,660元起售

发布时间:2020-05-15 11:10:11  来源:量子位 企鹅号   采编:郭椿砾  背景:

  十三 发自 凹非寺

  量子位 报道 | 公众号 QbitAI

  全球第一款内置AI的图像传感器问世。

  这就是近日来自索尼的重磅消息:

  宣布即将发布两款智能视觉传感器——IMX500和IMX501。

  它们集成了一个逻辑处理器和存储器,因此每个模组都可以作为一个微型计算机工作。

  目前这款传感器已经能够以 1200 万像素捕捉静态图像,支持 4K@60fps 视频拍摄。

  IMX500 和 IMX501的出货时间分别为今年4月和6月,税后价格分别为10000日元 (约661元人民币)和20000日元 (约1323元人民币)。

  新款传感器具有如下特点:

  像素芯片和逻辑芯片组成的堆叠式结构,在逻辑芯片上配备了AI图像分析和处理功能的图像传感器。

  像素芯片获取的信号通过传感器上的AI进行处理,无需高性能处理器或外部存储,可助力边缘AI系统的开发。传感器输出元数据(属于图像数据的语义信息)而不是图像信息,从而减少了数据量并保证了隐私安全。

  此外,AI能够为广泛应用领域提供多样化的功能,例如高速AI处理下进行实时目标跟踪。也可以根据用户的需求或系统,使用位置重新编写内存,来选择不同的AI模型。

  据索尼介绍,新发布的图像传感器,极大地拓宽了AI摄像头的研发空间,将有望广泛应用于零售和工业设备行业,并有助于构建与云端连接的优化系统。

  首款内置AI图像传感器主要功能

  接下来就是IMX500和IMX501的四大主要功能。

  具备AI处理功能的图像传感器

  像素芯片是背照式进光的,有效像素约为1230万,可以捕捉广阔视角的图像信息。

  除了传统的图像传感器操作电路外,其逻辑芯片还配备了索尼原发的DSP,专门用于AI信号处理,并为AI模型存储。

  这种配置无需高性能处理器或外部存储,使其成为边缘AI系统的理想选择。

  元数据输出

  像素芯片采集的信号通过ISP进行处理,并在逻辑芯片的处理层进行AI运算,将提取的信息作为元数据输出,可以减少需要处理的数据量。

  同时,不输出图像信息有助于降低安全风险和保证隐私安全。

  除了传统图像传感器捕捉的图像外,用户还可以根据自己的需要和用途选择数据输出格式,包括ISP格式输出图像(YUV/RGB)和ROI特定区域提取图像。

  高速AI处理

  当使用传统的图像传感器录制视频时,需要发送每一帧的视频数据进行AI处理,导致数据传输量大,难以实时呈现结果。

  索尼的新款传感器产品在逻辑芯片上进行ISP处理和高速AI运行(处理MobileNet V1只需3.1毫秒),在一个视频帧内完成整个过程。这种设计可以在录制视频的同时保证高精度、实时的目标追踪。

  可自由选择AI模型

  用户可以将自己选择的AI模型写入嵌入式内存中,并根据其需求或系统使用位置,对其进行改写和更新。

  例如,当多个搭载新款传感器的摄像头被安装在零售场所时,某个单一类型的摄像头可以在不同的地点、环境、时间或目的下使用:

  当安装在场所入口时,可用于计算访客人数;

  当安装在商店的货架上时,可以用来检测库存短缺;

  当安装在天花板上时,它可以用来绘制商店客流的热力图。

  此外,指定相机中的AI模型可以被改写,从一个用于检测热力图的模型,变成一个用于识别消费者行为的模型。

  IMX500/IMX501主要参数

  最后,奉上IMX500和IMX501的主要参数。

  那么,这样的传感器,猜猜谁会最先用上呢?


本文来源:量子位 企鹅号

本文评论
索尼发布全球首款内置AI传感器,1200万像素,660元起售
十三 发自 凹非寺
  量子位 报道 | 公众号 QbitAI
  全球第一款内置AI的图像传感器问世。
  这就是近日来自索尼的重磅消息:
...
日期:05-15
加速推进8K电视普及,三星8K AI芯片解锁行业密码
随着屏幕画质的不断进步,传统的高清、超清标准已经无法满足行业以及消费者的需求,8K开始登上历史舞台,并成为近两年彩电行业的最大热点。
日期:05-15
百度移动生态升级一周年,AI深入、加码服务和直播
中新网5月13日电 5月13日,“万象”2020百度移动生态大会(简称“万象大会”)正式召开。作为百度移动生态最重要的年度大会之一,万象...
日期:05-14
安卓AI性能排行:骁龙865拿下第一,华为麒麟990 5G意外垫底
现如今的智能手机型电影已经是最受关注的一个元器件,无论是从一直就被关注的性能,或者是从最近这几年刚刚兴起的AI,各大手机厂商都愿意去通过跑分展示...
日期:05-14
出乎意料,安兔兔处理器AI排名:骁龙865第一,麒麟990排名垫底
华为Mate30系列和华为P40系列搭载麒麟990 5G芯片,安兔兔跑分超过48万,虽然不如骁龙865的60万分,可日常使用不会有任何问题。其实以现在手机的性能,只...
日期:05-14
受猎豹启发,研究人员开发出速度最快的软体机器人
猎豹是陆地上奔跑速度最快的生物,奔跑过程中,它们通过脊柱的弯曲来获得速度和力量。受猎豹这种力量和速度启示,美国北卡罗莱纳州立大学机械与航空工程...
日期:05-13
中国移动AI服务器采购 浪潮大额中标超2亿
近日,中国移动公布2020年至2021年人工智能服务器产品集中采购中标候选人公示。浪潮成功入围,中标600台AI服务器NF5468M5,金额超2亿元,将为中国移动人...
日期:05-13
获商汤科技3000万元A轮融资,轰轰机器人进军AI教育
图源于图虫创意
  芥末堆5月11日讯,近日,智能机器人公司轰轰机器人宣布已完成由商汤科技领投的3000万元A轮融资,融资金额主要应用于产品设计、...
日期:05-13
PS5首发将限量供应,首批仅600万台,或将配备AI语音助手功能
No.1
  首批600万台?PS5首批将限量供应
  2020年目前已经近半,距离PS5发售的日子也是越来越近了。不过最近发现了个不太好的消息,据彭博...
日期:05-13
AI是“能量恶鬼”——最新硬件技术可能遏制其“胃口
人工智能(AI)技术近几年颇受关注,它主要研究使计算机来模拟人的思维过程和智能行为的技术。通常以软件的形式实现,但同时它需要消耗的能量却是巨大的。...
日期:05-11
手机AI助手太鸡肋?这些功能99%的人都不知道
从2011年苹果在iPhone 4S上集成Siri开始算起,语音助手发展至今可以说已经成了手机的必备程序了。随着语音识别、AI技术的日益成熟,手机AI语音助手的功能...
日期:05-09
AI算法效率每16月翻番,超越摩尔定律,OpenAI:长江后浪推前浪
人工智能算法也遵循着自己效率提升的「摩尔定律」。
日期:05-07
IDC最新数据:浪潮AI服务器强势领跑 市场份额再超50%
近日,IDC公布了《2019年中国AI基础架构市场调查报告》。报告显示,2019年中国AI服务器市场规模达23.3亿美元,同比增长57.9%,2倍于全球AI服务器市场增速...
日期:05-07
只要你的AI算法能比小白鼠聪明,DeepMind的这20万奖金请拿走
贾浩楠 发自 凹非寺
  量子位 报道 | 公众号 QbitAI
  用你的AI算法和小白鼠一较高下,还能赢得3万美元(20万元)奖金。
  稳赚?快别...
日期:05-06
论首家“学院派”AI 芯片公司如何倒掉?筹了2亿美元却止步于市场
学院出身,喊话英伟达,技术惊艳,框架开源,融资激进……剧本是否似曾相识,套用在那些响当当的明星 AI 芯片公司身上似乎都能对号入座,但...
日期:04-30
重要通知:动物森友会首届“AI 顶会”ACAI 2020即将召开
机器之心报道
  参与:蛋酱、泽南、杜伟
  为了人工智能学术交流,我也要买一台 Switch 了。
  众所周知,因为疫情的原因,ICML、...
日期:04-29
助力全球科技抗疫 腾讯医疗AI专利已达300余件
搭载“腾讯觅影”AI医学影像和腾讯云技术的人工智能CT设备,只需数秒即可助力医生识别新冠肺炎;和钟南山团队组建联合实验室,攻坚流行病防控AI...
日期:04-26
用人工智能保护环境,英特尔推能监测珊瑚礁健康状况AI项目
对于保护环境,人工智能(AI)能做什么?有人想到了用人工智能来监测和分析珊瑚礁的复原能力。
日期:04-24
创维A20云眼AI摄像头 创造居家生活新玩法
在万物皆可社交的时代,智能电视也逐渐承担起家庭社交的责任。创维A20走在行业发展的前沿,它不仅拥有3+32G大存储和SKY-VISION PRO画质芯片,还特地搭载...
日期:04-24
AI芯片榜骁龙865居首:AI Engine为何如此强劲?
近日,鲁大师公布了2020年第一季度手机AI芯片排行榜,高通骁龙865以112309的高分位居榜首。而且,骁龙865的出彩之处不仅于此,其相比于第二位的苹果A13成...
日期:04-22