滚动新闻 | RSS订阅 | 网站地图 |
你好,游客 登录 注册 搜索

小米官方科普小米新一代AI相机技术

发布时间:2020-02-21 09:16:17  来源:玩懂手机 企鹅号   采编:郭椿砾  背景:

  小米-汪轩然对小米新一代AI相机技术进行了详解和科普,汪轩然表示AI相机作为一个概念并不新鲜,早在小米8的时代我们就推出了第一代小米AI相机。传统的AI相机的做法,通常分成两个部分,一是识别,二是后处理。

  新的AI相机,对于同样的一片草地,在不同的光照,角度,甚至背景下,都会有不一样的优化效果。并且我们的技术把识别+处理合二为一,一站式的实现了AI修图师的效果。

  原图

  处理后

  小米10发布会上,新一代小米AI相机是小米10pro中AI影响的一个重头戏,是小米AI影像能力全面提升的一个代表作。作为这个功能的核心研发工程师,我来给大家介绍一下这个特性背后隐藏的一些技术难点和挑战。

  AI相机作为一个概念并不新鲜,早在小米8的时代我们就推出了第一代小米AI相机。传统的AI相机的做法,通常分成两个部分,一是识别,二是后处理。前者通过神经网络来“认知”当前拍摄的场景,后者根据不同的场景,使用一些传统的方式来针对特定场景做一些优化,比如加一些特殊的滤镜。所谓“AI“,其实只有前面的识别部分跟AI挂钩。这种方式最大的问题是只能针对特定的几个预设好的场景来做优化,并且针对同一个场景,只能采用一样的模板来处理,而没有针对当前的色彩,光影等做一些更有针对性的局部优化,效果会大打折扣。

  为了解决这一问题,我们团队开创性的将传统的场景感知拓展成为全方位的色彩、对比度、光影等内容感知,使用深度神经网络对整个画面进行全局和局部的分析,获取到最优的画面效果,并且实时地对画质进行增强。所以AI大片是覆盖所有场景的优化。可以说,新的AI相机,对于同样的一片草地,在不同的光照,角度,甚至背景下,都会有不一样的优化效果。并且我们的技术把识别+处理合二为一,一站式的实现了AI修图师的效果。

  这个技术最大的挑战在于计算量。众所周知,针对图像像素处理的深度神经网络的计算量极高,对手机的计算能力是一个很大的考验,而我们除了要实现预览实时处理,所见即所得的效果之外,更“变态“的要求能针对一亿像素的原片进行处理。为了实现这两个看似不可能的任务,团队的攻城狮们对于神经网络的优化达到了每个四则运算都去细抠的程度。除了使用常见的网络减枝,网络压缩的技术,我们还创造性地提出了一种新的基于导向图的开关网络结构,这个网络不仅仅可以使得网络参数和计算量大幅下降,也可以满足优化的多样性要求(噪声,亮度,颜色,对比度,高动态等等),最终得以将全新的AI相机展现给用户。

  除了攻城狮哥哥们的辛勤努力,新的AI相机也包含了团队中很多设计师妹子们的心血。为了让深度神经网络能完美的复现出修图师的美化效果,我们给网络“喂“了数十万张训练数据,并同时做了多套效果,最终通过盲评,选择了一个认可度最高的模型效果。

  发布会的几页ppt,背后隐藏的是团队每个成员日日夜夜的辛苦付出。小米影像技术起步的确有点晚,但我们一直都在很努力的往前跑着。在我们的眼中,没有什么友商,没有什么销量,我们只想着怎么用最新的技术来让拍照变得更加有趣,让每个人都能拍出一张好照片,借此让大家的生活能变得美好一点点,仅此而已。我们会继续努力。

  原图

  处理后

  原图

  处理后


本文来源:玩懂手机 企鹅号

本文评论
小米官方科普小米新一代AI相机技术
小米-汪轩然对小米新一代AI相机技术进行了详解和科普,汪轩然表示AI相机作为一个概念并不新鲜,早在小米8的时代我们就推出了第一代小米AI相机。传统的AI...
日期:02-21
全球首款集成AI协处理器的x86处理器 出自威盛
在通用x86处理器市场中,除了大家熟悉的英特尔和AMD,威盛也是很有实力的公司。如今,威盛开发了一款集成AI协处理器的x86处理器。在智能手机Soc中,集成A...
日期:02-20
这家智慧工厂不怕疫情?机器替代人春节没停工
桐昆集团信息管理部经理许燕辉尝到了甜头。春节期间,智能工厂本就没停工,在市场竞争中占得一定先机。
日期:02-19
国外“作业帮”被谷歌收购后迎来AI增强版更新
2月18日消息 据外媒报道,Socratic是一款帮助学生获取作业方面帮助的应用,在2017年首次上架谷歌Play商店,通过分析拍摄的图片提供相关内容,该程序引起...
日期:02-19
无人机小区上空盘一圈测体温,背后技术靠谱吗?
(图源 | 大疆官网)
  整理&责编 | 夕颜
  出品 | CSDN(ID:CSDNnews)
  如今,无人机已经不再是一个玩具,在抗疫中,这些&ldqu...
日期:02-19
阿里达摩院技术,河南小汤山率先应用:20秒读CT影像,准确率96%
又是达摩院。
  阿里方面最新消息,达摩院联合阿里云针对新冠肺炎临床诊断研发了一套全新AI诊断技术:
  AI可以在20秒内准确地对新冠疑似...
日期:02-17
紫外线消杀、扫码代替按键,“防疫电梯”来了解下
现代快报讯(通讯员 沈锋锋 记者 何洁)在新冠肺炎疫情防控工作中,电梯防疫是重点更是难点。由于电梯内空间狭小、通风不畅,再加上按键接触,很容易造成疫...
日期:02-17
边缘AI芯片再添杀器,性能超Arm架构32倍!
芯东西(公众号:aichip001)编 | 云鹏
  芯东西2月17日消息,据外媒报道,XMOS近日推出了专门用于边缘处理的AI芯片xcore.ai,与Arm架构同类型芯...
日期:02-17
特朗普拟削减美国基础科研预算,但加大AI和量子领域投资
新智元报道
  来源:BioWorld
  编辑:元子
  【新智元导读】特朗普押注人工智能和量子技术的回报。但是一些研究人员说,收益与否...
日期:02-14
荷兰举办健康创新大会 充气“大脑”形态逼真
当地时间2020年2月13日,荷兰鹿特丹,当地举办以人类大脑和人工智能为主题的健康创新大会,参观者走过一个充气大脑模型。(图源自视觉中国)
日期:02-14
不想上班排队测体温?人脸识别测温一体机来了
从SARS到新冠肺炎,体温测量和人员追踪是防控疫情的重要手段。随着各地陆续复工,写字楼、园区等上班场所为测体温排起长队的现象多有出现。如何既能完成...
日期:02-14
深圳一工会食堂用机器人送外卖以降低接触风险
深圳不少企业已经复工,南山总工会食堂提供线上外卖服务,提供无接触配送服务,为此,配餐公司首次试点使用送3台送餐机器人派送。
日期:02-13
红外测温仪供不应求,AI技术助力智慧抗疫
伴随复工潮的来临,红外体温检测仪一时间成为紧俏产品。无论是高速ETC通道的自动检测口,还是机场、火车站、地铁、社区等场景,红外体温检测仪使用尤为普...
日期:02-13
只需 1 分钟,这个网站用 AI 分离歌曲的人声、伴奏和乐器声
整理 | Just
  疫情期间,在家待着闲来无事,一些技术人员就喜欢以技术的方式找点乐子,顺带赚钱最好了。
  将歌曲中的人声和乐器声分离是...
日期:02-10
皮查伊很头疼 美国各州启动对谷歌反垄断调查
一个由美国各州总检察长组成的两党联盟正对谷歌除广告以外的其他业务展开反垄断调查,重点是Android和搜索业务。
日期:02-10
疫情下的元宵节怎么过?借助 AI 给家人做顿团圆饭!
作者 | 蒋宝尚
  编辑 | 贾伟
  元宵节,春节后的小团圆,也是一年中第一个月圆之夜,AI科技评论在这儿祝大家贪吃不胖,美梦不空。
...
日期:02-10
应对疫情期间返城人流高峰 AI与红外结合测温系统上线
随着春节假期结束,大批人流返城已是必然趋势。新型冠状病毒仍然肆虐,如何有效地保障人民群众的生命安全,同时在人流中有效地识别到高温体征的个体,成...
日期:02-07
微软宣布投入4000万美元开展人工智能健康计划
随着 AI 技术逐渐走入我们的生活,日前,微软方面宣布为AI for Good计划中新增一个项目——AI for Health,该项目是一个投入4000万美元的人工...
日期:02-07
日本首个机器人酒保正式上岗,售价为人类同行3年工资
据路透社报道,日本首个机器人酒保近日开始在东京一家酒吧内服务,为顾客斟酒。日本面临老龄化社会,餐馆和商店难以招到人手,而机器人酒保的测试使用可...
日期:02-07
一分钟测300人,AI系统北京地铁站口测“高温”
每分钟精准测试300人,高热报警每秒15人;佩戴口罩照样能识别,即走即测不阻碍通行;一套系统可部署16个通道,一个地铁口全管控……
日期:02-07