摘要:图像增强 AI 芯片让夜拍照片干净、视频实时降噪,和传统ISP说拜拜。专用芯片能效更高,未来或与传感器堆叠,端侧大模型让拍照更懂你。
昨早拿手机拍路边烧烤摊图像ams.abgame88.net,灯光暗、烟年夜,成片却清洁得像用单反加补光灯拍的。背后捣乱的就是那颗指甲盖巨细的图像加强 AI 芯片。它不像CPU那样天天上头条。可你每次按下快门,它都正在拼命干活。传统加强的图像处理靠ISP。一套固定算法,碰到复纯光线就抓瞎。图像加强 AI 芯片纷歧样,它跑的是神经汇集,能逐帧识别哪儿是噪点、哪儿是细节、哪儿该提亮呢芯片?

好比暗光下人脸不能糊,灯箱字不能过曝,它分区域处理的,像有个小建图师蹲正在传感器旁边。我拆过一台旧手机,那颗独立芯全面积不年夜,功耗却比主控还敏感是发热一上来,算法就得降档。
更狠的是正正拯救速度。以前用建图软件降噪,导出等三秒算快的。如今那颗芯片正在取景器里就及时跑完了。拍视频时,每一帧都过一遍加强,4K 60帧也不掉链子的。我拿举动相机拍滑板,以前每帧都有拖影,如今打开加强,连轮子辐条都数得清悄悄的。安防摄像头用上它,夜间车牌识别率七成提还有九成五。无人机航拍雾天,它能把灰蒙蒙的画面“擦”出条理。
那些场景里,芯片不是副角。是决议能不能用的门槛摄影。固然了,不是所有标着“AI”的芯片都实干活。
有些手机厂拿通用NPU跑图像加强。效果忽好忽坏。公用图像加强 AI 芯片会把算子固化了,能效比逾越跨越一年夜截。我试过两台同传感器手机,一台有独立芯片,一台没有了,夜景曲出差距一眼可见。前者高光压得住,暗部噪点少,后者涂抹感重得像油画。那玩意儿就像给相机配了副夜视仪,还不用你教后期。
往后看,那类芯片会往哪儿走呢?我猜是跟传感器揭得更近。以至堆叠正在一路。
处理提早降到微秒级,拍极速举动也不拖影了。另一个标的目的是端侧年夜模子,芯片理解“我要拍的是猫,不是背景里的电线”。到那时,你按快门之前,芯片曾经帮你念了三步。挺酷的,也有点吓人是究竟了局它比你自己更懂怎样把照片建都俗。本钱仍是拦路虎,一颗公用芯片能买半台千元机。等哪天它酿成标配呢?我们年夜要会记了没有它的日子。



