45eICE74H8U hope.huanqiu.comarticle以专业影像芯片开启硬件级算法时代————vivo以科技创新构筑影像赛道新壁垒/e3pmh4858/eqngbhuat摘 要:本案例描述了vivo在影像赛道上的长远布局以及持续科技创新背后的故事。目前各大科技厂商均有各自的赛道布局,作为中国科技企业,vivo坚持长期地投入科研人力与资源,完成首款自主研发的专业影像芯片V1,并完成智能终端搭载。vivo长期发力的四条长赛道——设计、影像、系统、性能。其中芯片的主要布局就是服务于长赛道,而影像就是与芯片强相关的其中一条长赛道。一直以来,vivo最大的优势是更贴近消费者,通过洞察消费者在影像上的需求,将以往用户影像需求的研究结果进行梳理,并将之与核心算法相结合,转化成为vivo自己的影像处理系统。关键词:影像长赛道;科研;V1芯片;消费者洞察;科技创新; 案例正文:创新是一家科技公司应具备的基本技能,如果创新只是简单的例行升级,这既违背了企业的初衷也无法同消费者交代。所以vivo坚持长期主义、不断稳步前行的基本方针,在产品、技术、渠道、品牌等多方面不断打牢基础,并坚持在四条长赛道上探索,持续为用户带来更多的创新技术。不忘初心,埋头种因。需求在变,vivo对专业芯片的思考一直未变,随着手机摄影向生产力工具的演变、消费者拍摄需求的增加,手机的计算能力面临运算量大和高能耗的问题。尤其是在复杂光源的夜景以及拍摄视频时,运算量呈指数级增长,对手机的算力提出了更高的要求。vivo一直在强调影像,因为我们的消费者很关注影像体验。如今,在很多场景下,手机的拍照甚至完全取代了相机。然而相对专业的单反相机,手机在拍照和视频录制方面仍与之存在着很大差距,但也意味着对于移动影像,无论是感光单元还是算法部分都有着可提升空间。vivo V1开启硬件级算法时代对于用户来说,手机影像的需求是逐渐向更多元更专业的方向发展的,这对手机的ISP是一场不可避免的遭遇战,同时如果仅仅按照传统的更新节奏来推进的话,显然是无法长期满足用户需求的,在需求和供应之间一定会产生对冲,vivo提前预判到了这个结果,提前着手芯片研发。很多厂商也在ISP方向发力,区别在于大家的选择都不太一样,vivo目前更关注两点,夜景拍照和人像拍照,且均需要有对应的算法支撑。而不同于单反相机,手机最大的限制在于空间,也就是说镜头能给它提供的空间比较少,因此需要用更强大的算法来弥补光学和感光器件物理上的差距,所以芯片的研发势在必行。芯片从定位、IP转化到设计需要很长的时间,因此vivo对每一代芯片都是以两年为周期,V1量产从两年前就开始规划到产量转化,下一代芯片从一年前就开始规划了。2021年9月6日,在vivo“芯之所像”影像技术分享会上,vivo首款自研影像芯片V1发布,历经24个月超过300人团队的投入研发,V1的发布即是vivo开启行业“硬件级算法时代”的标志。开拓赛道:自研专业影像芯片V1据了解,超大广角、潜望变焦的出现,一次次突破人们对于手机摄影光学器件的想象。面对复杂光线、暗光场景、极限夜景以及众多视频拍摄场景时,手机的影像算力、芯片功耗都需要进一步升级进化。最终,vivo与手机SoC厂商深度合作,历时24个月、投入超300人研发,用自研专业影像芯片V1给出了答案。V1是由vivo主导开发的,服务高速计算成像的专业影像芯片,是一颗全定制的特殊规格集成电路芯片。在整体影像系统设计中,V1可搭配不同主芯片和显示屏,起到扩充ISP高速成像算力,释放主芯片ISP负载的作用,同时服务用户拍照和录像的需求,兼容兼得。值得关注的是,V1可以像CPU一样高速处理复杂运算,也可以像GPU和DSP一样,完成数据的并行处理。但不同的是,V1芯片在处理特定任务时具有高性能,低功耗的特点,面对大量的复杂运算,V1在能效比上相比DSP和CPU有指数级提升。为实现其同期处理能力最大化,vivo优化数据在芯片内部的储存架构和高速读写电路,实现等效32MB的超大缓存,全片上储存。超越了目前旗舰级桌面电脑处理器16MB到24MB的数量级,读写速度高达35.84Gbps,做到1080P 60FPS的实时降噪插帧能力。V1高速数据处理的针对性优化设计,让极其复杂的多个计算成像算法,在低功耗下并发实时处理变为可能。在夜景拍摄下,降低噪点,呈现清晰夜景。在V1的协助下,主芯片可以在低光录像时,以低功耗运行4K 30FPS的MEMC去噪和插帧,这极大的辅助并强化了主芯片在夜景下的影像效果,提升用户在夜景下的创作空间,配合主芯片ISP原有的降噪功能,实现二次提亮二次降噪。在主芯片ISP强大成像能力基础上,叠加V1内计算成像算法,得到1+1>2的成像效果。但提升效果并不意味着就要牺牲功耗,通过将软件算法转移至V1的专用硬件电路中,让复杂的计算成像功能不仅存在于成片中,在默认拍照和录像预览下即可开启。在高速处理同等计算成像算法时,相比软件实现的方式,V1的专用算法硬件电路功耗降低了50%,做到能力更强,能耗更低。 联合全球合作伙伴 摄影体验再升级摄影体验升级不仅仅是研发芯片,搭配镜头的好坏更是起到了决定性作用。受制于空间的限制,在手机上做到镜头的升级,难度更大。早在2020年12月17日,vivo就宣布与蔡司成为全球影像战略伙伴,经过双方在影像芯片、光学器件和软件算法的全面协同合作,最终克服了工艺、良品率等技术限制,在手机上实现了高规格玻璃镜片,做到高透光率、超低色散、热稳定强的效果。让vivo在技术层面突破瓶颈,大幅提升用户在使用夜拍、专业人像等影像模式上体验。蔡司大中华区品牌传播负责人徐文就曾表示:“vivo-蔡司全球影像战略合作,进一步拓展专业影像技术的边界,提升手机摄影的光学表现力,共同推动整个产业链的升级和良性发展。”vivo V1芯片+蔡司影像能得到什么?vivo用vivo X70系列的发布给出了答案,vivo X70系列在光学系统上实现全链路升级,突破性超低色散高透玻璃镜片、全系列搭载蔡司光学镜头、微云台融合防抖、定制大底以及行业首发镀膜技术的精密协作,呈现极其卓越的照片与视频拍摄能力。摄影是光的艺术。vivo与蔡司的深度合作,实现光学技术和计算摄影的再一次突破,以X70系列高端旗舰之姿开辟手机摄影新赛道,将移动影像带向前所未有的新高度。1637306492639环球网版权作品,未经书面授权,严禁转载或镜像,违者将被追究法律责任。责编:赵鹏环球网163730649263911[]//img.huanqiucdn.cn/dp/api/files/imageDir/5b11dff66a397c21b84e627051367c6cu1.png{"email":"zhaopeng@huanqiu.com","name":"赵鹏"}
摘 要:本案例描述了vivo在影像赛道上的长远布局以及持续科技创新背后的故事。目前各大科技厂商均有各自的赛道布局,作为中国科技企业,vivo坚持长期地投入科研人力与资源,完成首款自主研发的专业影像芯片V1,并完成智能终端搭载。vivo长期发力的四条长赛道——设计、影像、系统、性能。其中芯片的主要布局就是服务于长赛道,而影像就是与芯片强相关的其中一条长赛道。一直以来,vivo最大的优势是更贴近消费者,通过洞察消费者在影像上的需求,将以往用户影像需求的研究结果进行梳理,并将之与核心算法相结合,转化成为vivo自己的影像处理系统。关键词:影像长赛道;科研;V1芯片;消费者洞察;科技创新; 案例正文:创新是一家科技公司应具备的基本技能,如果创新只是简单的例行升级,这既违背了企业的初衷也无法同消费者交代。所以vivo坚持长期主义、不断稳步前行的基本方针,在产品、技术、渠道、品牌等多方面不断打牢基础,并坚持在四条长赛道上探索,持续为用户带来更多的创新技术。不忘初心,埋头种因。需求在变,vivo对专业芯片的思考一直未变,随着手机摄影向生产力工具的演变、消费者拍摄需求的增加,手机的计算能力面临运算量大和高能耗的问题。尤其是在复杂光源的夜景以及拍摄视频时,运算量呈指数级增长,对手机的算力提出了更高的要求。vivo一直在强调影像,因为我们的消费者很关注影像体验。如今,在很多场景下,手机的拍照甚至完全取代了相机。然而相对专业的单反相机,手机在拍照和视频录制方面仍与之存在着很大差距,但也意味着对于移动影像,无论是感光单元还是算法部分都有着可提升空间。vivo V1开启硬件级算法时代对于用户来说,手机影像的需求是逐渐向更多元更专业的方向发展的,这对手机的ISP是一场不可避免的遭遇战,同时如果仅仅按照传统的更新节奏来推进的话,显然是无法长期满足用户需求的,在需求和供应之间一定会产生对冲,vivo提前预判到了这个结果,提前着手芯片研发。很多厂商也在ISP方向发力,区别在于大家的选择都不太一样,vivo目前更关注两点,夜景拍照和人像拍照,且均需要有对应的算法支撑。而不同于单反相机,手机最大的限制在于空间,也就是说镜头能给它提供的空间比较少,因此需要用更强大的算法来弥补光学和感光器件物理上的差距,所以芯片的研发势在必行。芯片从定位、IP转化到设计需要很长的时间,因此vivo对每一代芯片都是以两年为周期,V1量产从两年前就开始规划到产量转化,下一代芯片从一年前就开始规划了。2021年9月6日,在vivo“芯之所像”影像技术分享会上,vivo首款自研影像芯片V1发布,历经24个月超过300人团队的投入研发,V1的发布即是vivo开启行业“硬件级算法时代”的标志。开拓赛道:自研专业影像芯片V1据了解,超大广角、潜望变焦的出现,一次次突破人们对于手机摄影光学器件的想象。面对复杂光线、暗光场景、极限夜景以及众多视频拍摄场景时,手机的影像算力、芯片功耗都需要进一步升级进化。最终,vivo与手机SoC厂商深度合作,历时24个月、投入超300人研发,用自研专业影像芯片V1给出了答案。V1是由vivo主导开发的,服务高速计算成像的专业影像芯片,是一颗全定制的特殊规格集成电路芯片。在整体影像系统设计中,V1可搭配不同主芯片和显示屏,起到扩充ISP高速成像算力,释放主芯片ISP负载的作用,同时服务用户拍照和录像的需求,兼容兼得。值得关注的是,V1可以像CPU一样高速处理复杂运算,也可以像GPU和DSP一样,完成数据的并行处理。但不同的是,V1芯片在处理特定任务时具有高性能,低功耗的特点,面对大量的复杂运算,V1在能效比上相比DSP和CPU有指数级提升。为实现其同期处理能力最大化,vivo优化数据在芯片内部的储存架构和高速读写电路,实现等效32MB的超大缓存,全片上储存。超越了目前旗舰级桌面电脑处理器16MB到24MB的数量级,读写速度高达35.84Gbps,做到1080P 60FPS的实时降噪插帧能力。V1高速数据处理的针对性优化设计,让极其复杂的多个计算成像算法,在低功耗下并发实时处理变为可能。在夜景拍摄下,降低噪点,呈现清晰夜景。在V1的协助下,主芯片可以在低光录像时,以低功耗运行4K 30FPS的MEMC去噪和插帧,这极大的辅助并强化了主芯片在夜景下的影像效果,提升用户在夜景下的创作空间,配合主芯片ISP原有的降噪功能,实现二次提亮二次降噪。在主芯片ISP强大成像能力基础上,叠加V1内计算成像算法,得到1+1>2的成像效果。但提升效果并不意味着就要牺牲功耗,通过将软件算法转移至V1的专用硬件电路中,让复杂的计算成像功能不仅存在于成片中,在默认拍照和录像预览下即可开启。在高速处理同等计算成像算法时,相比软件实现的方式,V1的专用算法硬件电路功耗降低了50%,做到能力更强,能耗更低。 联合全球合作伙伴 摄影体验再升级摄影体验升级不仅仅是研发芯片,搭配镜头的好坏更是起到了决定性作用。受制于空间的限制,在手机上做到镜头的升级,难度更大。早在2020年12月17日,vivo就宣布与蔡司成为全球影像战略伙伴,经过双方在影像芯片、光学器件和软件算法的全面协同合作,最终克服了工艺、良品率等技术限制,在手机上实现了高规格玻璃镜片,做到高透光率、超低色散、热稳定强的效果。让vivo在技术层面突破瓶颈,大幅提升用户在使用夜拍、专业人像等影像模式上体验。蔡司大中华区品牌传播负责人徐文就曾表示:“vivo-蔡司全球影像战略合作,进一步拓展专业影像技术的边界,提升手机摄影的光学表现力,共同推动整个产业链的升级和良性发展。”vivo V1芯片+蔡司影像能得到什么?vivo用vivo X70系列的发布给出了答案,vivo X70系列在光学系统上实现全链路升级,突破性超低色散高透玻璃镜片、全系列搭载蔡司光学镜头、微云台融合防抖、定制大底以及行业首发镀膜技术的精密协作,呈现极其卓越的照片与视频拍摄能力。摄影是光的艺术。vivo与蔡司的深度合作,实现光学技术和计算摄影的再一次突破,以X70系列高端旗舰之姿开辟手机摄影新赛道,将移动影像带向前所未有的新高度。