7月5日,商汤智能家产研究院宣布《AI传感器:智能手机影象新中心》白皮书,提出在智能手机市场迟缓步入瓶颈期的趋向下,影象功效成为家产破局中心,而人工智能软件取CMOS(图象传感器)硬件的融会,更是智能手机影象本领延续提拔的主要支持。

　　作为环球抢先的人工智能软件公司,商汤高新科技前瞻展开了多元化的智能影象规划,经过AI算法SDK、AI传感器、AIISP亲密无间的智能影象解决方案,为智能手机影象技能的成长构建新的突破口和竞逐点。

　　商汤高新科技结合创始人、首席科学家王晓刚默示,“已往几年,AI算法的广泛使用突破了智能手机影象才能的硬件限定,将来,AI传感器将再次界说和引领智能手机影象生长的新趋势。凭仗成熟的AI算法固化技能,商汤正在AI传感器的技能范畴积累了先发上风。我们将延续开拓创新,将AI传感器的使用由智能手机拓展至自动驾驶、元宇宙、伶俐乡村等更多范畴,翻开‘坡长雪厚’的蓝海市场,让AI传感器成为感知物理天下、构建数字天下的中心感官。”

　　智能手机增加趋缓,影象手艺成为下一代手机产物差异化竞争力的新突破口

　　今年以来,受到焦点零部件缺乏和疫情频频的危害,智能手机市场施展阐发相对低迷。据信通院数据显现,2022年4月海内手机市场整体出货量为1808万部,同比大幅淘汰34.2%。对此,诸多手机厂商入手下手挑选正在消耗偏好体验层面“因材施教”,正在手机表面、处理器、屏幕显现、快充手艺、游戏体验、内存存储等才能逐步趋同的后台下,智能手机的影象才能成为了当前竞争的焦点要素,和消耗者购买的主要尺度。智能手机正全面进入“影象为王”的时期。

　　CMOS图象传感器和ISP(图象旌旗灯号处理器)是危害智能手机影象本领的两大关头部件,前者更是塑造手机影象竞争力的中心。跟着智能手机多摄像头设置的遍及,5000万以致1亿像素分辨率的运用,和非Bayer图象传感器需求的茂盛,图象传感器手艺得到了前所未闻的成长。良多手机厂商乃至最先取传感器厂商追求定制化协作,打造差异化的竞争力。

　　图象传感器的尺寸是影象成像质量的关键因素之一,然而智能手机纤薄的外形,使得手机图象传感器的尺寸自然存正在物理上限。白皮书指出,已往几年,正在AI算法驱动的较量争论拍照,和更壮大的处置器、专用图象旌旗灯号和神经处置单位的加持下,智能手机的影象才能仍然得到了连续提拔。

　　然而,正在传统的解决计划中,图象传感和AI算法的运行正在不一样的硬件上完成,图象传感器供应图象旌旗灯号,而处置器或AI加快芯片实行人工智能算法。白皮书指出,这类计划正在夸大低功耗和能效比的挪动设备中,将会形成能耗资源的浪掷,而且难以处置一些需求常开的利用场景。正在此趋向下,人工智能赋能的图象传感器成为破题之道,引领CMOS图象传感器步入AI时期。

　　定格“魔幻时刻”,AI传感器让手机成为“小我智能影象工作室”

　　凭仗抢先的原创AI技能和软硬件整合才能,商汤没有仅在超分辨率、AI超画质、夜景影象、高静态范畴、超清人像、影象虚化、RGBToF3D等环节影象场景积累了大批算法才能,与此同时早在2019年,就已取环球抢先的图象传感器厂商展开慎密协作,将AI算法和传感器硬件直接融会,推进CMOS图象传感器展开进入人工智能软件界说的时期,将成像体系的团体才能推向新的高度。

　　商汤AI传感器能够借助AI技能,最大化地阐扬原始光旌旗灯号的价值。正在终端设备获得视觉旌旗灯号的伊始,AI传感器就能够开展优化和处置惩罚,加强实在天下感知、进步图象和视频的质量、丰厚内容细节,与此同时还最大限度地降低了设备功耗,并加强了数据安全性。正在提拔图象质量的前提下,商汤的AI传感器还撑持固化算法的可控可调,快速适配不一样规格和工艺制成的传感器和ISP芯片平台,实现高效的轻量化摆设。

　　凭仗AI算法、AI传感器和AIISP的亲密无间,商汤实现了AI手艺对全部智能手机智能影象体系的一体化赋能。一方面,经由过程AI手艺充足发掘镜头模组、各类新型传感器等硬件的潜力,最大化应用成像设备的底层特征,实现最优的成像质量;另一方面,应用AI手艺将成像体系中的各个自力部件有机连系在一起,充足联动,使本来自力运作的成像模块成为协同协作的成像平台。

　　得益于AI软件取硬件的严密交融,用户可以获得拍摄质量的全面提拔,拍摄场景的全面拓展。比方,经由过程AI对多种光源的时域、空域、频域差别特征的进修,认识自然光谱特征,进而依据事实利用场景,带来AI降噪、AI超分辨率,提拔成像质量;正在特别拍摄形式下,AI夜景加强、AI人像加强,更加智能手机给予了多样的“魔幻场景”。这一些体验,让搭载了AI传感器的智能手机,成为每小我私家专属的“小我私家智能影象工作室”,消费者平常使用时,即可轻松拍出媲美专业影象器材的高质量作品。

　　(超分辨率结果对照:左图为传统计划拍摄结果,右图为商汤赋能)

　　(AI超画质结果比较:左图为传统计划拍摄结果,右图为商汤赋能拍摄结果)

　　(夜景影象结果比拟:左图为传统计划拍摄结果,右图为商汤赋能拍摄结果)

　　大幅低落天下建模本钱,AI传感器将成“元宇宙”的终南捷径

　　面向未来,AI传感器的价值不但正在于提拔智能手机的影象本领,它更将成为机械“认知”天下的基础设施,为更多物联网终端给予智能感知取内容加强的本领。正在环球40亿手机用户的宏大基数下,AI传感器的广泛运用,将大幅下降天下建模本钱,成为衔接物理天下取假造天下的桥梁,加快“元宇宙”的构建。正在新兴运用场景中,AI传感器还将饰演主要脚色。比方,正在智能汽车行业,AI传感器将成为车辆感知天下的核心部件;正在聪明都会行业,AI传感器更将为发掘视频信息的价值发扬主要作用。

　　Gartner数据表现,2022年CMOS图象传感器的出货量将会超84亿颗,到2026年则会凌驾107亿颗,生长为百亿出货量范围的半导体细分市场。承袭正在AI传感器技术领域的长时间结构,商汤将严密联袂合作伙伴,加快AI传感器的市场渗入渗出,配合以AI软件从新“界说”图象传感器趋向,给予硬件更多立异概率。