AI手机摄影暗藏三大流派, 其中一类是假AI

在咱们身边, 有一个铁打的定律, 那就是一个东西或者名称火了, 马上就会群起而模仿之. 久而久之, 这种 '微创新' 甚至 '不用创新' 的方式, 被国人冠名为 '山寨文化' .

互联网领域则更是如此, 团购火了能百团大战, O2O火了能全面 '开O' , 共享经济火了, 愣是连男友女友都能 '共享' .

山寨得多, 就连技术都可以山寨. 比如到了今年, 全面屏等技术普及之后, AI似乎成为了各手机厂商普遍希望蹭到的热点.

那么问题来了, 到底实现AI有哪些方法, 各种方法最终又会得到什么结果呢?让我们先从摄影说起, 聊一聊手机AI摄影的三个流派.

流派一: 用芯片提供AI摄影通用加速

去年, 华为发布了搭载NPU的麒麟970芯片开始, 之后苹果也公开了A11仿生神经芯片. 从后来华为, 荣耀的相关搭载产品, 以及苹果iPhoneX来看, 基于AI专用芯片来实现手机的AI摄影功能, 是这类手机的核心AI能力.

这可以看做是手机AI摄影的第一个流派: 芯片派.

从底层芯片开始做AI处理能力. 有两个层面的目的, 一是在硬件里完成终端AI计算, 可以保证摄像任务的实时性和安全性. 毕竟摄影任务上传到云端计算有卡顿可能, 断网后无法工作, 图片上传服务器面临的数据危险也是显而易见的.

另一方面, 芯片派容易被忽略的目的, 在于对AI摄影任务进行通用加速. 比如有的玩法要人脸识别, 有的直播要读取动作指令, 有的滤镜要搞空间处理, 把这些全挤在CPU, GPU上手机马上会进入龟速状态, 用云处理无法支持不说, 更丧失了实时体验. APP的摄影需求有千千万, 目前来看只有在终端有AI处理单元才能满足这些 '未知需求' .

说到底, 基于芯片的AI摄影到底有哪些体验呢?

华为Mate10, 荣耀V10以及iPhone X的能力数据说明, AI摄影可以体现在识别, 动作捕捉, 光影分析, AR等几个方面.

比如iPhoneX利用A11仿生芯片, 可以与结构光传感器, 深度陀螺仪进行结合, 处理人脸, AR等任务, 并可以快速处理图像识别.

接下来, 荣耀, 华为的新产品, 以及新一代iPhone必然会继续这条路.

这个流派的优点在于, 用户可以体验到AI的多样化和增长性, 手机里不是一成不变的AI体验, 而是可以随着生态和技术的发展不断进化. 但问题是芯片流的门槛很高, 需要研发的巨大投入和长达几年的等待周期.

流派二: 基于摄像头搞AI

第二个AI手机摄影流派, 不能不提到让人爱恨纠葛的谷歌.

众所周知, 谷歌是不大力押注硬件技术的, 而是在战略上选择强打AI算法优势和云计算强项. 这个被谷歌称为AI First的战略, 已经体现在谷歌各种穿戴, 家庭以及移动设备上, 其中pixel系列手机也不例外.

去年推出的谷歌pixel 2, 给出了一个非常特别的AI摄影模式, 它没有专属的AI芯片, 却利用算法和AI图像处理单元完成了动态模糊摄影等摄影能力的补偿. 甚至把摄像头切割成非常复杂的成像单元, 来供给算法端实现对景深, 空间感的AI计算.

这种 '吃力不讨好' 的方式, 大概也只有谷歌会做. 背后的核心原因, 一方面是谷歌希望用户适应所有数据都上传到谷歌云的生活方式, 另一方面也是希望加强AI优势的商业化通道.

AI手机摄影暗藏三大流派, 其中一类是假AI

谷歌手机的AI秘诀, 不在底层芯片里, 而是在摄像头区域里藏了一颗专用图像处理协处理器, 即ImageProcessing Unit (IPU), 专门用来结合云计算与算法集群处理AI拍照与视频任务.

但这样做的问题是图像任务会在专门的部件里处理, 并且极大程度依赖云计算. 但确实一定程度上绕开了开发芯片的难度, 弥补了谷歌硬件上的弱势. 这种剑走偏锋, 让手机各部件自行AI的思路, 有赖于谷歌强绝天下的算法积累, 以及云计算处理能力. 缺点是: 除了谷歌大概没有人可以尝试.

流派三: 搞个带算法的APP算了

在手机AI概念火热起来之后, 国内手机厂商似乎很快就按耐不住了. 雨后春笋版的 'AI摄影' 字样应运而生, 于是也催生了AI摄影的第三个流派: APP派.

所谓APP派很好理解, 想一想我们用的各种美颜拍照相机, 动态美颜录制应用等等, 这些能力, 在今天基本都要用到AI算法来实现更好的效果. 比如美图秀秀旗下的美图相机, 就是在APP里集成了机器学习算法, 用来识别拍摄人像和背景, 光源间的关系, 从而把人像分离出来.

假如把这种基于算法的 'AI应用' 或者 'AI滤镜' , 直接搭载到产品摄像头里, 说这是AI摄影功能, 行不行呢?

好像, 大概, 可能, 也可以吧?

前不久, 红米Note5主打了所谓 '千元AI双摄' 打开了这场关于AI的宣传战序幕. 随后vivo X21也以AI摄影能力作为宣传. 从产品说明中可见, 这两部手机的解决方案基本就是上文所说的 'AI滤镜' 模式: 开发具有一定识别特性的摄影功能, 然后在不卡的前提下部署在手机中就可以了.

刚刚发布的小米Mix2S, 也是走这种解决方案. 即在手机相机中初始化搭载 '美图相机' 之类APP的算法功能. 比如场景识别拍照, 用机器学习进行人脸和人体轮廓识别, 自动进行背景虚化和抠图等等.

这类手机的问题, 在于芯片和摄像头中缺乏专项处理AI任务的单元, 一旦运行高负载的AI任务就需要呼唤云端. 而云端的响应速度不够, 就可能导致AI摄影的识别率和准确率下降.

举个例子, 处理夜拍效果时, 手机需要运用光源捕捉, 空间捕捉等AI算法, 从而实现夜晚中清晰拍照和光源还原.

而这类APP派假如要加载夜拍类的AI应用就有点尴尬了. 因为这类深度学习的负载很大, 用传统移动芯片+云计算来跑这类AI拍摄任务, 会出现黑夜一层层褪去, 半天无法对焦. 拍照之后又要上传到云端进行很长时间 '处理' , 精准度和体验都很差. 而一旦没网就更麻烦了. 所以我们能看到的是, 目前大部分国产手机宣传所谓的AI拍照时, 都绝口不提夜拍, 动作捕捉等复杂任务.

于是, 这个流派中消费者看到的宣传材料里的 'AI拍照' , 也就变成了整个手机的全部AI能力. 其实这些能力弄个不算太差的手机下载个相关APP就可以实现了, 单独作为一款产品的主要宣传材料就有点奇怪.

2016 GoodChinaBrand | ICP: 12011751 | China Exports