小米科技|从自研澎湃P1芯片到重构影像大脑,小米千亿研发瞄准硬核技术( 三 )


二、软件算法与硬件两手抓 , 如何理解小米影像大脑?不可否认 , 如今影像能力已经成为智能手机行业比拼的核心技术高地 , 甚至没有之一 。
一方面 , 手机影像能力目前仍然有较大的提升空间 , 距离我们人眼的实际观看效果仍然有一定差距 。 另一方面 , 手机影像技术的发展 , 牵涉到从前端光学镜头、CMOS图像传感器芯片 , 到核心SoC处理器 , 再到上层软件算法及应用等各个方面 , 涉及到的技术也更加复杂 , 颇具挑战性 。
目前在手机影像技术的发展中 , 软硬件深度结合已经成为主流趋势之一 , 甚至从高通、联发科这样的上游芯片厂商开始 , 就在加强与影像算法厂商的深度合作 。
这次小米百万美金大奖二等奖颁给了两个团队 , 除了小米120W快充 , 还有小米液态镜头团队 。

这背后 , 也是小米对于影像技术的一种执着探索 。 其实在小米12 Pro系列上 , CMOS图像传感器的规格并不是其核心亮点 , 小米影像大脑的发布反而是我更加关注的 。
一直以来 , 追求极致的小米在旗舰手机拍照方面基本上都是“硬件拉满”的操作方式 , 但软件体验还存在一定的提升空间 。
实际上 , 小米影像大脑是对小米底层影像技术架构的一次突破 , 在过去的两年多时间里 , 小米工程师几乎重写了核心的底层代码 , 并且将过去的拍照技术进行梳理 , 最终推出了小米影像大脑 。

具体来看 , 小米影像大脑包含计算单元、加速引擎、意图识别单元、生态引擎等多个部分 , 对于拍照流畅度、成像质量、拍照响应速度、跨应用能力调用等方面的提升是比较明显的 。
这次小米也明确了未来在影像技术方面发力的核心场景 , 包括基础体验、抓拍、人像、夜景、HDR、变焦、视频等 , 未来围绕这些核心场景 , 小米将在软件、硬件、算法方面继续进行技术的探索和创新 。
在算法层面 , 小米相机部门的工程师们针对几类核心场景进行拆分和技术规划 , 确定了基础画质增强、语义感知、人像、视频算法4个主要技术赛道 , 针对每个赛道分别制订了算法创新技术路线图 。
同时 , 小米将算法创新体系化、流程化 , 以异构化算法加速引擎为核心 , 搭建图像信号处理、AI训练框架、多摄框架等多套研发体系 , 形成小米自主产权的算法研发体系——小米算法创新工厂 。
可以看到 , 小米在软件算法层面的技术布局 , 思路是非常清晰的 , 并且已经在落地实践中取得了比较好的正向反馈 。
除了软件算法 , 在影像硬件技术领域小米也有所布局 , 最为大家熟知的是小米澎湃C1芯片 , 这是一颗主要用于图像处理的ISP芯片 。 这种从算法到ISP图像处理芯片的打通 , 也成为小米影像软硬件技术结合的代表性体现 。

面向未来 , 小米相机团队还在多光谱成像、相机模组小型化、新型相机形态 , 3D相机等几个领域进行了前瞻性技术布局 。
在与小米的深入交流中我了解到 , 未来他们将结合这些核心场景以及用户的关键痛点进行发力 , 基础体验和形态相关创新将是两大主要方向 。
三、应届生首获百万美金大奖 , 小米对人才的渴求“不玩虚的”其实不论是单电芯120W快充方案的落地 , 还是小米影像大脑的推出 , 其背后都是小米每一位工程师的默默付出 。
最近两年 , 小米着实立下了不少的“Flag” , 从三年冲击全球第一、全面对标苹果 , 到5年研发投入增加至1000亿人民币 。 每一个目标的实现 , 对于小米来说都充满挑战 。

而面对这些挑战 , 小米选择的应对方式也非常明确 , 就是死磕硬核技术 , 用技术创新推动自身的发展 。 在雷军提出的小米铁律中 , “技术为本”也是第一位的 。