CN114630153B - 用于应用处理器的参数传输方法、装置及存储介质 - Google Patents
用于应用处理器的参数传输方法、装置及存储介质 Download PDFInfo
- Publication number
- CN114630153B CN114630153B CN202011472314.3A CN202011472314A CN114630153B CN 114630153 B CN114630153 B CN 114630153B CN 202011472314 A CN202011472314 A CN 202011472314A CN 114630153 B CN114630153 B CN 114630153B
- Authority
- CN
- China
- Prior art keywords
- image
- parameter
- processor
- packet
- parameters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 230000005540 biological transmission Effects 0.000 title claims abstract description 56
- 238000012545 processing Methods 0.000 claims description 48
- 238000004422 calculation algorithm Methods 0.000 claims description 46
- 238000013507 mapping Methods 0.000 claims description 34
- 238000013441 quality evaluation Methods 0.000 description 30
- 230000006870 function Effects 0.000 description 23
- 238000007726 management method Methods 0.000 description 21
- 239000010410 layer Substances 0.000 description 19
- 238000004891 communication Methods 0.000 description 18
- 238000005457 optimization Methods 0.000 description 15
- 230000007613 environmental effect Effects 0.000 description 13
- 230000008569 process Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 238000004590 computer program Methods 0.000 description 11
- 238000010295 mobile communication Methods 0.000 description 8
- 238000004806 packaging method and process Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000003705 background correction Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 101001081533 Homo sapiens Isopentenyl-diphosphate Delta-isomerase 1 Proteins 0.000 description 1
- 101001036194 Homo sapiens Isopentenyl-diphosphate delta-isomerase 2 Proteins 0.000 description 1
- 102100027665 Isopentenyl-diphosphate Delta-isomerase 1 Human genes 0.000 description 1
- 102100039618 Isopentenyl-diphosphate delta-isomerase 2 Human genes 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 238000004659 sterilization and disinfection Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请公开了一种用于应用处理器的参数传输方法、装置及存储介质,该方法包括:接收由图像处理器发送的图像统计参数包,图像统计参数包由图像处理器获取图像中至少一个图像块的图像统计参数,基于至少一个图像块的图像统计参数生成的图像统计参数包;若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由图像处理器发送的指定类型图像统计参数对应的索引信息;基于索引信息和所接收的指定类型图像统计参数的参数包获取图像的显示参数。采用本申请实施例,能够保证图像处理器的参数传输的可靠性,并实现图像统计信息实时传输。
Description
技术领域
本申请涉及电子技术领域,尤其涉及一种用于应用处理器的参数传输方法、装置及存储介质。
背景技术
随着电子设备(如手机、平板电脑、智能手表等等)的大量普及应用,电子设备能够支持的应用越来越多,功能越来越强大,电子设备向着多样化、个性化的方向发展,成为用户生活中不可缺少的电子用品。
现有技术中,需要在当前帧处理完成后3A图像统计参数(自动曝光(autoexposure,AE)图像统计参数、自动聚焦(auto focus,AF)图像统计参数、自动白平衡(autowhite balance,AWB)图像统计参数)传输到应用处理器(application processor,AP),图像统计信息不能实时接收并且及时处理,影响3A收敛性能。
发明内容
本申请实施例提供一种用于应用处理器的参数传输方法、装置及存储介质,能够实时传输图像统计参数。
第一方面,本申请实施例提供一种用于图像处理器的参数传输方法,所述方法包括:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
第二方面,本申请实施例提供一种应用处理器,所述应用处理器用于执行如下操作:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
第三方面,本申请实施例提供一种电子设备,所述电子设备包括应用处理器、图像处理器、存储器,所述存储器用于存储一个或多个程序,并且被配置由所述应用处理器执行,所述程序包括用于执行如第一方所描述的部分或者全部步骤,或者,所述电子设备包括如第二方面所描述的应用处理器。
第四方面,本申请实施例提供另一种电子设备,所述电子设备包括图像处理器和应用处理器,其中,
所述图像处理器,用于获取图像中至少一个图像块的图像统计参数;
所述图像处理器,用于基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包;
所述应用处理器,用于接收由所述应用处理器发送的所述图像统计参数包;
所述图像处理器,用于若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
所述应用处理器,用于基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
第五方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。
第六方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
实施本申请实施例,具备如下有益效果:
可以看出,在本申请实施例中所描述的用于应用处理器的参数传输方法、装置及存储介质,获取图像中至少一个图像块的图像统计参数,基于至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送图像统计参数包,若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向应用处理器发送指定类型图像统计参数对应的索引信息,以使得应用处理器基于索引信息和所接收的指定类型图像统计参数的参数包来获取图像的显示参数,其中,索引信息用于表征指定类型图像统计参数的参数包与图像块之间的对应关系,由于在原始图像数据获取过程中,便开始获取图像统计参数,并将其打包发送给应用处理器,且不用将全部的参数包发送给图像处理器,在指定类型图像统计参数的参数包达到一定数量,便可以对参数包进行解包,以调用与指定类型图像统计参数对应的算法,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输,也能够提升图像处理效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种电子设备的结构示意图;
图2是本申请实施例提供的一种电子设备的软件结构示意图;
图3A是本申请实施例提供的一种用于图像处理器的参数传输方法的流程示意图;
图3B是本申请实施例提供的数据包的结构示意图;
图3C是本申请实施例提供的用于图像处理器的参数传输的演示示意图;
图3D是本申请实施例提供的另一用于图像处理器的参数传输的演示示意图;
图3E是本申请实施例提供的解包操作的演示示意图;
图3F是本申请实施例提供的解包操作的流程示意图;
图4是本申请实施例提供的另一种用于应用处理器的参数传输方法的流程示意图;
图5是本申请实施例提供的另一种参数传输方法的流程示意图;
图6是本申请实施例提供的另一种电子设备的结构示意图;
图7是本申请实施例提供的另一种电子设备的结构示意图;
图8是本申请实施例提供的一种参数传输装置的功能单元组成框图;
图9是本申请实施例提供的另一种参数传输装置的功能单元组成框图。
具体实施方式
下面将结合附图,对本申请实施例中的技术方案进行描述。
为了更好地理解本申请实施例的方案,下面先对本申请实施例可能涉及的相关术语和概念进行介绍。
具体实现中,电子设备可以包括各种具有计算机功能的设备,例如,手持设备(智能手机、平板电脑等)、车载设备(导航仪、辅助倒车系统、行车记录仪、车载冰箱等等)、可穿戴设备(智能手环、无线耳机、智能手表、智能眼镜等等)、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(MobileStation,MS),虚拟现实/增强现实设备,终端设备(terminal device)等等,电子设备还可以为基站或者服务器。
电子设备还可以包括智能家居设备,智能家居设备可以为以下至少一种:智能音箱、智能摄像头、智能电饭煲、智能轮椅、智能按摩椅、智能家具、智能洗碗机、智能电视机、智能冰箱、智能电风扇、智能取暖器、智能晾衣架、智能灯、智能路由器、智能交换机、智能开关面板、智能加湿器、智能空调、智能门、智能窗、智能灶台、智能消毒柜、智能马桶、扫地机器人等等,在此不做限定。
第一部分,本申请所公开的技术方案的软硬件运行环境介绍如下。
如图所示,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110、外部存储器接口120、内部存储器121、通用串行总线(universal serial bus,USB)接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D、传感器模块180、指南针190、马达191、指示器192、摄像头193、显示屏194以及用户标识模块(subscriber identification module,SIM)卡接口195等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器AP,调制解调处理器,图形处理器GPU,图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器NPU等。其中,不同的处理单元可以是独立的部件,也可以集成在一个或多个处理器中。在一些实施例中,电子设备101也可以包括一个或多个处理器110。其中,控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。在其他一些实施例中,处理器110中还可以设置存储器,用于存储指令和数据。示例性地,处理器110中的存储器可以为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从存储器中直接调用。这样就避免了重复存取,减少了处理器110的等待时间,因而提高了电子设备101处理数据或执行指令的效率。处理器还可以包括图像处理器,图像处理器可以为图像预处理器(preprocess image signal processor,Pre-ISP),其可以理解为一个简化的ISP,其也可以进行一些图像处理操作,例如,可以获取图像统计信息。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路间(inter-integrated circuit,I2C)接口、集成电路间音频(inter-integrated circuitsound,I2S)接口、脉冲编码调制(pulse code modulation,PCM)接口、通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口、移动产业处理器接口(mobile industry processor interface,MIPI)、用输入输出(general-purpose input/output,GPIO)接口、SIM卡接口和/或USB接口等。其中,USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口、Micro USB接口、USB Type C接口等。USB接口130可以用于连接充电器为电子设备101充电,也可以用于电子设备101与外围设备之间传输数据。该USB接口130也可以用于连接耳机,通过耳机播放音频。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、外部存储器、显示屏194、摄像头193和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量、电池循环次数、电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G/6G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络)、蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS)、调频(frequency modulation,FM)、近距离无线通信技术(near field communication,NFC)、红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像、视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emittingdiode,OLED)、有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED)、柔性发光二极管(flex light-emittingdiode,FLED)、迷你发光二极管(mini light-emitting diode,miniled)、MicroLed、Micro-oLed、量子点发光二极管(quantum dot light emitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或多个显示屏194。
电子设备100可以通过ISP、摄像头193、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点、亮度、肤色进行算法优化。ISP还可以对拍摄场景的曝光、色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或多个摄像头193。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1、MPEG2、MPEG3、MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别、人脸识别、语音识别、文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储一个或多个计算机程序,该一个或多个计算机程序包括指令。处理器110可以通过运行存储在内部存储器121的上述指令,从而使得电子设备101执行本申请一些实施例中所提供的显示页面元素的方法,以及各种应用以及数据处理等。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统;该存储程序区还可以存储一个或多个应用(比如图库、联系人等)等。存储数据区可存储电子设备101使用过程中所创建的数据(比如照片,联系人等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储部件,闪存部件,通用闪存存储器(universal flash storage,UFS)等。在一些实施例中,处理器110可以通过运行存储在内部存储器121的指令,和/或存储在设置于处理器110中的存储器的指令,来使得电子设备101执行本申请实施例中所提供的显示页面元素的方法,以及其他应用及数据处理。电子设备100可以通过音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D、以及应用处理器等实现音频功能。例如音乐播放、录音等。
传感器模块180可以包括压力传感器180A、陀螺仪传感器180B、气压传感器180C、磁传感器180D、加速度传感器180E、距离传感器180F、接近光传感器180G、指纹传感器180H、温度传感器180J、触摸传感器180K、环境光传感器180L、骨传导传感器180M等。
其中,压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即X、Y和Z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
示例性的,图2示出了电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
如图2所示,应用程序层可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
第二部分,本申请实施例所公开的用于图像处理器的参数传输方法、装置及存储介质介绍如下。
进一步地,基于图1或图2的结构,本申请提供了请参阅图3A,图3A是本申请实施例提供的一种用于图像处理器的参数传输方法的流程示意图,该用于图像处理器的参数传输方法应用于包括如图1所示的电子设备,如图所示,本用于图像处理器的参数传输方法包括:
301、获取图像中至少一个图像块的图像统计参数。
其中,上述图像可以为原始图像数据,对于一帧图像而言,图像处理器可以是一个像素一个像素地获取原始图像数据,即图像处理器是逐行扫描以获取原始图像数据,可以理解为,获取全部原始图像数据则需要扫描完其全部的像素点,本申请实施例中,则可以是按照预设规则划分好图像块的区域,例如,可以将每5行像素点作为一个图像块,又例如,可以预先规划好图像块的区域(位置),当对应图像块的区域内的像素点全部扫描完,则可以得到一个图像块。最终的话,可以将原始图像数据理解为多个图像块,每一图像块均可以包含部分原始图像数据。
当然,在具体实现中,图像处理器可以在图像获取的过程中,获取图像中至少一个图像块的图像统计参数,图像统计参数可以为以下至少一种:自动曝光AE图像统计参数、自动聚焦AF图像统计参数、AWB图像统计参数、自动镜头阴影校正(lens shadingcorrection,LSC)图像统计参数、自动水波纹(flicker,FLK)图像统计参数等等,在此不做限定。故而,图像统计参数的类型可以为以下至少一种:AE、AF、AWB、LSC、FLK等等,在此不做限定。
具体实现中,原始图像数据可以为一帧或者多帧图像的raw数据。上述图像统计参数包可以为原始图像数据的部分或者全部的图像统计参数。图像处理器可以在成功获取到任一图像块之后,就开始获取该任一图像块的目标图像统计参数,例如,当原始图像数据加载到第j行的时候,便认为得到一个图像块,便可以开始获取该任一图像块的图像统计参数,又例如,原始图像数据每加载预设数量像素点,则可以认为得到一个图像块,便可以获取其对应的图像统计信息,预设数量可以由用户自行设置或者系统默认。即本申请实施例,可以在原始图像数据加载过程中,便开始获取图像统计参数,并打包传输该图像统计参数。
其中,每一图像块可以对应至少一个图像统计参数包,或者多个图像块可以对应至少一个图像统计参数包。图像统计参数包也可以包括至少一个数据包,每一数据包中可以包括一种或者多种类型的图像统计参数,例如,一个数据包可以仅包括AE类型的图像统计参数,又例如,一个数据包可以AE类型和AF类型的图像统计参数,又例如,一个数据包可以包括AE类型、AWB类型和AF类型的图像统计参数。
302、基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包。
具体实现中,图像处理器可以基于一个或者多个图像块的图像统计参数,生成相应的图像统计参数包,并向应用处理器发送该图像统计参数包。图像统计参数包可以理解为一个或者多个数据包。
进一步地,图像处理器可以采用至少一个数据传输通道将图像统计参数包发送应用处理器。例如,图像处理器可以采用一个数据传输通道依次将该图像统计参数包发送给应用处理器。又例如,图像处理器可以将图像统计参数包划分为多个数据集,每一数据集对应一个或者部分图像统计参数包,采用至少一个数据传输通道将多个数据集发送给应用处理器,数据传输通道可以与数据集一一对应,每一数据传输通道可以对应一个进程或者线程。
具体实现中,图像处理器不仅可以将图像统计参数包发送给应用处理器,还可以将原始图像数据发送给应用处理器,例如,可以将图像统计参数包实时加载在原始图像数据对应的传输通道,利用MIPI传送给应用处理器。具体实现中,可以将原始图像数据和图像统计参数包分开发送给应用处理器,例如,可以将图像统计参数包先发送给应用处理器,在该图像统计参数包发送完成之后,则可以将原始图像数据发送给应用处理器,如此,在图像统计参数包发送给应用处理器之后,应用处理器可以对该图像统计参数包进行解包操作,并基于解包后得到的图像统计参数调取相应的算法,即可以实现原始图像数据完全发送给应用处理器之前,提前准备好相应的算法,有助于提升图像处理效率。
在一个可能的示例中,所述图像统计参数包中的任一数据包均包括:包头(packetheader,PH)、有效图像统计参数和包尾(packet footer,PF),每一数据包的有效图像统计参数可以对应至少一种类型的图像统计参数。
其中,如图3B所示,图像统计参数包可以包括包头PH、有效图像统计参数以及包尾PF,包头可以用于标记一个数据包的开始位置,有效图像统计参数为一类图像统计参数的部分图像统计参数,该原始图像数据的所有图像块对应的数据包中的所有有效图像统计参数构成原始图像数据的完整的图像统计参数,包尾可以用于表示数据包的结束位置。每一类型的图像统计参数的数据包中的有效图像统计参数的长度可以相同或者不同。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
其中,包头可以包括:包头标记、索引包标记和包数据长度,包头标记用于表示当前数据包(图像统计参数包)的统计类型,索引包标记用于表示当前数据包是统计数据还是独立的索引,包数据长度用于表示当前数据包的数据长度,具体结构如下表所示:
包头结构 | 字节长度 |
包头标记 | Byte3 |
索引包标记 | Byte2 |
包数据长度 | Byte1+Byte0 |
在一个可能的示例中,所述包尾包括:包尾标记、数据包计数和帧计数。
其中,包尾可以包括:包尾标记、参数包计数和帧计数,包尾标记用于表示包尾位置,参数包计数用于表示该参数包为当前统计类型的参数包的计数(第几个),帧计数表示该参数包来自哪一帧图像的原始图像数据,具体如下表所示:
包尾结构 | 字节长度 |
包尾标记 | Byte3 |
数据包计数 | Byte2 |
帧计数 | Byte1+Byte0 |
可选地,上述步骤302,向应用处理器发送所述图像统计参数包,可以按照如下方式实施:
通过预设虚拟通道将所述图像统计参数包发送给所述应用处理器。
其中,预设虚拟通道(virtual channel)可以由用户自行设置或者系统默认,则图像处理器可以通过预设虚拟通道将图像统计参数包发送给应用处理器。具体实现中,可以采用一个或者多个虚拟通道将图像统计参数包发送给应用处理器,每一个虚拟通道可以对应一个线程或者进程。
可选地,上述步骤302,向应用处理器发送所述图像统计参数包,可以包括如下步骤:
21、获取图像统计参数包对应的目标属性信息;
22、按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的目标通道;
23、通过所述目标通道传输所述图像统计参数包。
其中,本申请实施例中,属性信息可以为以下至少一种:参数包中的数据的数据类型、参数包中的数据的数据位数(数据长度)、参数包的类型(图像统计参数类型)等等,在此不做限定,其中,数据类型可以为以下至少一种:浮点型(单精度型、双精度型)、整型等等,在此不做限定,参数包的类型可以为以下至少一种:AE、AF、AWB、LSC、FLK等等,在此不做限定。如图3C所示,不同的图像统计参数包的类型可以对应不同的通道,或者,不同的数据长度可以对应不同的通道,例如,移动产业处理器接口(mobile industry processorinterface,MIPI)通道可以包括3个图像数据接口(image data interface,IDI),其对应的通道可以为:IDI0、IDI1和IDI2,k1类型的图像统计参数可以对应IDI0,k2类型的图像统计参数可以对应DII1。
具体实现中,电子设备的存储器中可以预先存储预设的属性信息与通道之间的映射关系。以参数包i为例,参数包i为图像统计参数包中的任一参数包,图像处理器可以获取参数包i对应的目标属性信息,则可以按照预设的属性信息与通道之间的映射关系,确定目标属性信息对应的目标通道,可以通过目标通道传输参数包i,如此,可以依据参数包的属性分配相应的通道,有助于提升数据传输效率。
进一步地,图像处理器可以将图像统计参数包的部分参数包通过预设虚拟通道发送给应用处理器,以及将图像统计参数包中的剩余部分参数包通过属性信息选择相应的通道的方式发送给应用处理器,该两种不同方式可以同步进行,也可以异步进行,例如,可以采用一个进程或者进程执行将图像统计参数包的部分参数包通过预设虚拟通道发送给应用处理器,而采用另一个线程或者进程执行将图像统计参数包中的剩余部分参数包通过属性信息选择相应的通道的方式发送给应用处理器。
在一个可能的示例中,上述步骤302,基于所述至少一个图像块的图像统计参数,生成图像统计参数包,可以按照如下方式实施:
将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包。
具体实现中,图像处理器将至少一个图像块的每一图像块的图像统计参数进行打包,得到图像统计参数包,即来一个图像块,就可以对其的图像统计参数进行打包,得到图像统计参数包。
进一步地,可选地,所述将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包,包括:
获取到一个图像块的完整的图像统计参数后,基于所述一个图像块的图像统计参数生成所述图像统计参数包。
其中,具体实现中,在获取到任一图像块的完整的图像统计参数后,则可以对该任一图像块的图像统计参数进行打包处理,得到图像统计参数包。上述一个图像块为至少一个图像块中的任一图像块。
303、若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,以使得所述应用处理器基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
其中,预定阈值可以由用户自行设置或者系统默认。指定类型图像统计参数可以由用户自行设置或者系统默认。图像的显示参数可以为以下至少一种:显示亮度、像素值、显示颜色、分辨率、对比度、清晰度等等,在此不作限定。指定类型图像统计参数可以为图像中的至少一种类型图像统计参数。
具体实现中,若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则可以停止向应用处理器传输指定类型图像统计参数对应的剩余的图像统计参数包,在一定程度上,可以降低设备功耗。
另外,在原始图像数据中指定类型图像统计参数对应的数据包发送给应用处理器的参数包数量达到预定阈值时,还可以向应用处理器发送与指定类型图像统计信息对应的索引信息,该索引信息可以放在一个索引数据包里,该索引数据包中可以包含目标索引表,目标索引表中则记录着该指定类型图像统计信息对应的数据包的相关信息,相关信息可以包括以下至少一种:数据包的索引包标记、数据包中的图像统计参数的存储位置等等,在此不做限定。另外,指定类型图像统计参数的目标索引表在总的数据包(原始图像数据的所有数据包)中的偏移量可以预先保存在图像处理器中,在该指定类型图像统计信息发送完成时,便可以将该目标索引表对应的偏移量给应用处理器,应用处理器则可以获取指定类型图像统计信息的目标索引表,进而,可以从应用处理器已经接收到的多个数据包中获取与目标索引表对应的图像统计参数包,依据目标索引表的索引顺序对图像统计参数包进行解包操作,得到指定类型图像统计参数,即可以实现调取该类图像统计信息对应的算法,以实现相应的图像处理操作,如此,可以实现对数据包进行解包操作,并且可以针对任一类型图像统计参数对应的数据包进行解包,不必等所有的数据包均完成传输,有助于提升图像处理效率。
进一步地,在一个可能的示例中,在所述向所述应用处理器发送所述指定类型图像统计参数对应的索引信息之后,还可以包括如下步骤:
以预设中断方式向所述应用处理器发送通知消息,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
其中,预设中断方式可以由用户自行设置或者系统默认。预设中断方式可以为通用输入输出(general purpose input output,GPIO)中断方式或者移动产业处理器接口(mobile industry processor interface,MIPI)通道。例如,通过MIPI通道发送额外数据包给AP,通过该额外数据包以通知AP指定类型图像统计参数已完成传输任务。
具体实现中,在指定类型图像统计参数对应的参数包向应用处理器传输的参数包数量达到预定阈值时时,图像处理器可以通过预设中断方式向应用处理器发送通知消息,该通知消息用于指示指定类型图像统计参数的参数包数量已经达到预定阈值。
举例说明下,如图3C所示,以3A图像统计参数为例,该3A图像统计参数可以包括:AE图像统计参数、AF图像统计参数和AWB图像统计参数,可以将该3类图像统计参数构成3A图像统计参数数据包,即得到至少一个数据包,每一数据包的每一类型的图像统计参数可以对应一个图像统计参数索引表,或者,每一帧图像的每一类型的图像统计参数可以对应一个图像统计参数索引表,图像统计参数索引表可以为AE图像统计参数索引表、AWB图像统计参数索引表或者AF图像统计参数索引表等等,在数据包传输过程中,可以依据图像统计参数索引表的索引顺序发送数据包。在每类图像统计参数发送完成之后,可以将该类图像统计参数对应的图像统计参数索引表发送给应用处理器,应用处理器可以依据该图像统计参数索引表进行解包操作,具体地,可以依据该图像统计参数索引表对应的索引顺序进行解包操作。在至少一个数据包包括多种类型图像统计参数时,可以乱序或者有序发送该至少一个数据包,乱序可以理解为这一刻发送一种类型图像统计参数的一个数据包,下一刻发送另一类型图像统计参数的一个数据包,有序可以理解为一个时间段发送一种类型图像统计参数的数据包,在该类型图像统计参数的数据包发送完成时,则可以发送另一种类型图像统计参数的数据包。
举例说明下,如图3D所示,图像处理器可以将图像统计参数包中一个一个参数包通过MIPI发送给应用处理器,在发送参数包的过程中,记录每一个参数包的索引,当指定类型的图像统计参数对应的达到预定阈值数量的最后一个参数包发送完成时,则可以设置GPIO中断,应用处理器则可以通过索引表,查找该指定类型的图像统计参数对应的索引,通过索引表可以从图像统计参数包中解析出指定类型的图像统计参数对应的图像统计参数,将其按照索引表的索引顺序进行排列,得到该指定类型的图像统计参数,则可以进一步调用该指定类型的图像统计参数相应的算法,即任一类型的图像统计参数提前结束时,应用处理器便可立即启动相应算法,而不必等所有图像统计参数接收完成,提升了图像处理效率。
进一步地,如图3E所示,在每一类型的用于图像处理器的参数传输完成时,则可以将该类型的图像统计参数对应的索引表的偏移量发送给应用处理器,应用处理器则可以依据偏移量定位索引表对相应的参数包进行解包,并将解包后的图像有效图像统计参数依据索引表的顺序进行排列,得到最终的该类型的图像统计参数,例如,AF类型的图像统计参数,其对应索引表包括f、j、n、q、t数据包,则可以依据该索引表解包相应的数据包。具体地,如图3F所示,当应用处理器收到某类型的图像统计参数完成,则可以读取该已经完成统计的参数包对应的索引包,例如,可以以32bits为单位依次读取索引包内容到索引位置index_n,读取打包数据从index_n开始的32bits作为包头标记(PH),解析PH内容,读取该索引对应的数据段的长度,拷贝统计数据片段到目标缓存中,检测索引包遍历是否结束,若是,则当前图像统计参数解包完成,否则,再次执行读取打包数据从index_n开始的32bits作为包头标记(PH)及其后续步骤,直到索引包遍历完成。
进一步地,AP在收到GPIO中断后,通过安全数字输入输出卡(secure digitalinput and output,SDIO)来查询当前是哪个图像统计参数已经完成,同时获取这个图像统计参数的索引包的起始位置,随后AP侧凭借这个索引包可以快速定位每个类型图像统计参数,便于立即启动相应的算法,本申请实施例中,算法可以为以下至少一种:白平衡算法、图像增强算法、去模糊算法、图像分割算法、图像增强算法、插值算法等等,在此不做限定。
在一个可能的示例中,上述步骤301,获取图像中至少一个图像块的图像统计参数,可以包括如下步骤:
A11、获取目标拍摄参数;
A12、按照预设的拍摄参数与图像统计参数类型之间的映射关系,确定所述目标拍摄参数对应的第一目标图像统计参数类型;
A13、从所述图像的至少一个图像块中获取与所述第一目标图像统计参数类型对应的目标图像统计参数。
其中,本申请实施例中,拍摄参数可以为以下至少一种:曝光时长、拍摄模式、感光度ISO、白平衡参数、焦距、焦点、感兴趣区域等等,在此不做限定。
具体实现中,电子设备的存储器中可以预先存储预设的拍摄参数与图像统计参数类型之间的映射关系,该映射关系如下表所示:
拍摄参数 | 图像统计参数类型 |
拍摄参数a1 | 图像统计参数类型A1 |
拍摄参数a2 | 图像统计参数类型A2 |
... | ... |
拍摄参数an | 图像统计参数类型An |
即不同的拍摄参数对应不同的图像统计参数类型。
进而,图像处理器可以获取目标拍摄参数,并且按照预设的拍摄参数与图像统计参数类型之间的映射关系,确定目标拍摄参数对应的第一目标图像统计参数类型,从该图像的至少一个图像块中获取与第一目标图像统计参数类型对应的目标图像统计参数,如此,可以依据拍摄要求选取相应的图像统计参数。
在一个可能的示例中,上述步骤301,获取图像中至少一个图像块的图像统计参数,可以包括如下步骤:
B11、获取目标环境参数;
B12、按照预设的环境参数与图像统计参数类型之间的映射关系,确定所述目标环境参数对应的第二目标图像统计参数类型;
B13、从所述图像的至少一个图像块中获取与所述第二目标图像统计参数类型对应的目标图像统计参数。
其中,本申请实施例中,环境参数可以包括外部环境参数,和/或,内部环境参数,外部环境参数可以理解为客观存在的物理环境,即自然环境,外部环境参数可以为以下至少一种:环境温度、环境湿度、环境光亮度、大气压、地理位置、磁场干扰强度、抖动参数等等,在此不做限定。其中环境参数可以通过环境传感器进行采集,环境传感器可以为以下至少一种:温度传感器、湿度传感器、环境光传感器、气象传感器、定位传感器、磁场检测传感器。内部环境参数可以理解为电子设备的各个模块工作产生的环境参数,内部环境参数可以为以下至少一种:CPU温度、GPU温度、抖动参数、CPU核数等等,在此不做限定。
具体实现中,电子设备中可以包括存储器,该存储器中可以预先存储预设的环境参数与图像统计参数类型之间的映射关系,该映射关系如下表所示:
环境参数 | 图像统计参数类型 |
环境参数b1 | 图像统计参数类型B1 |
拍摄参数b2 | 图像统计参数类型B2 |
... | ... |
拍摄参数bn | 图像统计参数类型Bn |
即不同的环境参数对应不同的图像统计参数类型。
进而,图像处理器可以获取目标环境参数,并且按照该映射关系确定目标环境参数对应的第二目标图像统计参数类型,从该图像的至少一个图像块中获取与第二目标图像统计参数类型对应的目标图像统计参数,如此,可以依据拍摄环境,获取相应的图像统计参数。
在一个可能的示例中,在上述步骤301之前,还可以包括如下步骤:
C1、所述图像处理器获取第一原始图像数据,所述第一原始图像数据为当前处理图像帧的部分原始图像数据;
C2、所述图像处理器确定所述第一原始图像数据的目标图像质量评价值;
C3、所述图像处理器在所述目标图像质量评价值大于预设图像质量评价值时,执行步骤301。
其中,第一原始图像数据可以在原始图像数据未加载完成之前的,当前处理图像帧的部分原始图像数据。预设图像质量评价值可以由用户自行设置或者系统默认。具体实现中,图像处理器可以获取第一原始图像数据,图像处理器可以采用至少一个图像质量评价指标对第一原始图像数据进行图像质量评价,得到目标图像质量评价值,图像质量评价指标可以为以下至少一种:信息熵、平均梯度、平均灰度、对比度等等,在此不做限定。在目标图像质量评价值大于预设图像质量评价值时,可以执行步骤301,否则,则可以调用摄像头重新拍摄。
进一步地,上述步骤C2,所述图像处理器确定所述第一原始图像数据的目标图像质量评价值,可以包括如下步骤:
C21、确定所述第一原始图像数据的目标特征点分布密度和目标信噪比;
C22、按照预设的特征点分布密度与图像质量评价值之间的映射关系,确定所述目标特征点分布密度对应的第一图像质量评价值;
C23、按照预设的信噪比与图像质量偏差值之间的映射关系,确定所述目标信噪比对应的目标图像质量偏差值;
C24、获取所述第一原始图像数据的第一拍摄参数;
C25、按照预设的拍摄参数与优化系数之间的映射关系,确定所述第一拍摄参数对应的目标优化系数;
C26、依据所述目标优化系数、所述目标图像质量偏差值对所述第一图像质量评价值进行调整,得到所述目标图像质量评价值。
具体实现中,电子设备中的存储器可以预先存储预设的特征点分布密度与图像质量评价值之间的映射关系、预设的信噪比与图像质量偏差值之间的映射关系、以及预设的拍摄参数与优化系数之间的映射关系,其中,图像质量评价值的取值范围可以为0~1,或者,也可以为0~100。图像质量偏差值可以为正实数,例如,0~1,或者,也可以大于1。优化系数的取值范围可以为-1~1之间,例如,优化系数可以为-0.1~0.1。本申请实施例中,拍摄参数可以为以下至少一种:曝光时长、拍摄模式、感光度ISO、白平衡参数、焦距、焦点、感兴趣区域等等,在此不做限定。
具体实现中,电子设备可以确定第一原始图像数据的目标特征点分布密度和目标信噪比,且按照预设的特征点分布密度与图像质量评价值之间的映射关系,确定目标特征点分布密度对应的第一图像质量评价值,特征点分布密度在一定程度上反映了图像质量,特征点分布密度可以理解为第一原始图像数据的特征点总数与该第一原始图像数据的图像面积之间的比值。进而,电子设备可以按照预设的信噪比与图像质量偏差值之间的映射关系,确定目标信噪比对应的目标图像质量偏差值,由于在生成图像的时候,由于外部(天气、光线、角度、抖动等)或者内部(系统、GPU)原因,产生一些噪声,这些噪声对图像质量会带来一些影响,因此,可以对图像质量进行一定程度调节,以保证对图像质量进行客观评价。
进一步地,电子设备还可以获取第一原始图像数据的第一拍摄参数,按照预设的拍摄参数与优化系数之间的映射关系,确定第一拍摄参数对应的目标优化系数,拍摄的参数设置也可能对图像质量评价带来一定的影响,因此,需要确定拍摄参数对图像质量的影响成分,最后,依据目标优化系数、目标图像质量偏差值对第一图像质量评价值进行调整,得到目标图像质量评价值,其中,目标图像质量评价值可以按照如下公式得到:
在图像质量评价值为百分制的情况下,具体计算公式如下:
目标图像质量评价值=(第一图像质量评价值+目标图像质量偏差值)*(1+目标优化系数)
在图像质量评价值为百分比的情况下,具体计算公式如下:
目标图像质量评价值=第一图像质量评价值*(1+目标图像质量偏差值)*(1+目标优化系数)
如此,可以结合内部、外部环境因素以及拍摄设置因素等影响,对图像质量进行客观评价,有助于提升图像质量评价精准度。
可以看出,在本申请实施例中所描述的用于图像处理器的参数传输方法,获取图像中至少一个图像块的图像统计参数,基于至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送图像统计参数包,若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向应用处理器发送指定类型图像统计参数对应的索引信息,以使得应用处理器基于索引信息和所接收的指定类型图像统计参数的参数包来获取图像的显示参数,其中,索引信息用于表征指定类型图像统计参数的参数包与图像块之间的对应关系,由于在原始图像数据获取过程中,便开始获取图像统计参数,并将其打包发送给应用处理器,且不用将全部的参数包发送给图像处理器,在指定类型图像统计参数的参数包达到一定数量,便可以对参数包进行解包,以调用与指定类型图像统计参数对应的算法,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输,也能够提升图像处理效率。
本申请提供了请参阅图4,图4是本申请实施例提供的一种用于应用处理器的参数传输方法的流程示意图,应用于电子设备,所述电子设备包括图像处理器和应用处理器,如图所示,本用于图像处理器的参数传输方法包括:
401、接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包。
402、若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
403、基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
在一个可能的示例中,上述步骤403,基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,可以包括如下步骤:
31、基于所述索引信息对所接收的图像统计参数包进行解包操作,得到所述指定类型图像统计参数的目标图像统计参数;
32、调用与所述目标图像统计参数对应的目标图像处理算法;
33、依据所述目标图像处理算法对所述图像进行处理,得到所述图像的显示参数。
其中,不同的图像统计参数,其对应不同的图像处理算法,图像处理算法可以为以下至少一种:图像增强算法、白平衡算法、图像降噪算法、图像去雾算法等等,在此不作限定。具体实现中,可以预先存储图像统计参数类型与图像处理算法之间的映射关系,进而,可以依据该映射关系确定指定类型图像统计参数对应的初始图像处理算法以及其对应的初始算法控制参数,初始算法控制参数用于调节算法的处理程度,不同的算法,其可以对应不同的初始算法控制参数,该初始算法控制参数可以预先设置或者系统默认。进而,还可以对目标图像统计参数进行处理,得到其对应的目标特征参数,目标特征参数可以为以下至少一种:均值、均方差、信息熵等等,在此不作限定。应用处理器还可以获取预先存储的特征参数与优化参数之间的映射关系,进而,依据该映射关系可以确定目标特征参数对应的目标优化参数,依据目标优化参数对初始算法控制参数进行调节,得到相应的参考算法控制参数,将该参考算法控制参数和初始图像处理算法作为目标图像处理算法,并基于该目标图像处理算法对图像进行处理,得到图像的显示参数。
进一步地,在一个可能的示例中,步骤402,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息之前,还可以包括如下步骤:
接收由所述图像处理器发送的通知消息,所述通知消息由所述图像处理器以预设中断方式向所述应用处理器发送,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
在一个可能的示例中,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
在一个可能的示例中,所述包尾包括:包尾标记、参数包计数和帧计数。
在一个可能的示例中,上述步骤401,接收由图像处理器发送的图像统计参数包,可以按照如下方式实施:
通过预设虚拟通道接收由所述图像处理器发送的所述图像统计参数包。
在一个可能的示例中,上述步骤401,接收由图像处理器发送的图像统计参数包,可以按照如下方式实施:
通过目标通道传输接收所述图像统计参数包,所述目标通道由所述图像处理器获取图像统计参数包对应的目标属性信息,按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的所述目标通道。
其中,上述图4对应的实施例中的所有步骤的具体描述可以参见图3A所描述的用于图像处理器的参数传输方法的相关描述,在此不再赘述。
可以看出,在本申请实施例中所描述的用于应用处理器的参数传输方法,由于在原始图像数据获取过程中,便开始获取图像统计参数,并将其打包发送给应用处理器,且不用将全部的参数包发送给图像处理器,在指定类型图像统计参数的参数包达到一定数量,便可以对参数包进行解包,以调用与指定类型图像统计参数对应的算法,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输,也能够提升图像处理效率。
本申请提供了请参阅图5,图5是本申请实施例提供的一种参数传输方法的流程示意图,应用于电子设备,所述电子设备包括图像处理器和应用处理器,如图所示,本用于图像处理器的参数传输方法包括:
501、所述图像处理器获取图像中至少一个图像块的图像统计参数。
502、所述图像处理器基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包。
503、所述应用处理器接收由所述图像处理器发送的图像统计参数包。
504、若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,所述图像处理器接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
505、所述图像处理器基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
其中,上述步骤501-505的具体描述可以参见图3A所描述的用于图像处理器的参数传输方法的相关描述,在此不再赘述。
可以看出,在本申请实施例中所描述的用于参数传输方法,由于在原始图像数据获取过程中,便开始获取图像统计参数,并将其打包发送给应用处理器,且不用将全部的参数包发送给图像处理器,在指定类型图像统计参数的参数包达到一定数量,便可以对参数包进行解包,以调用与指定类型图像统计参数对应的算法,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输,也能够提升图像处理效率。
与上述实施例一致地,请参阅图6,图6是本申请实施例提供的一种电子设备的结构示意图,如图所示,该电子设备包括应用处理器、图像处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述图像处理器执行,本申请实施例中,上述程序包括用于执行以下步骤的指令:
获取图像中至少一个图像块的图像统计参数;
基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包;
若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,以使得所述应用处理器基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
在一个可能的示例中,在所述基于所述至少一个图像块的图像统计参数,生成图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包。
在一个可能的示例中,在所述将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
获取到一个图像块的完整的图像统计参数后,基于所述一个图像块的图像统计参数生成所述图像统计参数包。
在一个可能的示例中,在所述向所述应用处理器发送所述指定类型图像统计参数对应的索引信息之后,上述程序还包括用于执行以下步骤的指令:
以预设中断方式向所述应用处理器发送通知消息,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
在一个可能的示例中,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
在一个可能的示例中,所述包尾包括:包尾标记、参数包计数和帧计数。
在一个可能的示例中,在所述向应用处理器发送所述图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
通过预设虚拟通道将所述图像统计参数包发送给所述应用处理器。
在一个可能的示例中,在所述向应用处理器发送所述图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
获取图像统计参数包对应的目标属性信息;
按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的目标通道;
通过所述目标通道传输所述图像统计参数包。
在一个可能的示例中,在所述获取图像中至少一个图像块的图像统计参数方面,上述程序包括用于执行以下步骤的指令:
获取目标拍摄参数;
按照预设的拍摄参数与图像统计参数类型之间的映射关系,确定所述目标拍摄参数对应的第一目标图像统计参数类型;
从所述图像中的至少一个图像块中获取与所述第一目标图像统计参数类型对应的图像统计参数。
在一个可能的示例中,在所述获取图像中至少一个图像块的图像统计参数方面,上述程序包括用于执行以下步骤的指令:
获取目标环境参数;
按照预设的环境参数与图像统计参数类型之间的映射关系,确定所述目标环境参数对应的第二目标图像统计参数类型;
从所述图像中的至少一个图像块中获取与所述第二目标图像统计参数类型对应的图像统计参数。
进一步地,上述一个或多个程序还可以被配置由上述应用处理器执行,本申请实施例中,上述程序包括用于执行以下步骤的指令:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
在一个可能的示例中,在所述基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数方面,上述程序包括用于执行以下步骤的指令:
基于所述索引信息对所接收的图像统计参数包进行解包操作,得到所述指定类型图像统计参数的目标图像统计参数;
调用与所述目标图像统计参数对应的目标图像处理算法;
依据所述目标图像处理算法对所述图像进行处理,得到所述图像的显示参数。
在一个可能的示例中,在所述接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息之前,所述方法还包括:
接收由所述图像处理器发送的通知消息,所述通知消息由所述图像处理器以预设中断方式向所述应用处理器发送,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
在一个可能的示例中,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
在一个可能的示例中,所述包尾包括:包尾标记、参数包计数和帧计数。
在一个可能的示例中,在所述接收由图像处理器发送的图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
通过预设虚拟通道接收由所述图像处理器发送的所述图像统计参数包。
在一个可能的示例中,在所述接收由图像处理器发送的图像统计参数包方面,上述程序包括用于执行以下步骤的指令:
通过目标通道传输接收所述图像统计参数包,所述目标通道由所述图像处理器获取图像统计参数包对应的目标属性信息,按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的所述目标通道。
在一个可能的示例中,所述图像处理器和所述应用处理器集成于同一芯片,或者,所述图像处理器和所述应用处理器分别为两个独立模块。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
本申请提供了请参阅图7,图7是本申请实施例提供的一种电子设备700的结构示意图,所述电子设备700包括图像处理器701和应用处理器702,如图所示,其中,
所述图像处理器701,用于获取图像中至少一个图像块的图像统计参数;
所述图像处理器701,用于基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包;
所述应用处理器702,用于接收由所述应用处理器发送的所述图像统计参数包;
所述图像处理器701,用于若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
所述应用处理器702,用于基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
可以看出,在本申请实施例中所描述的电子设备,该电子设备包括图像处理器和应用处理器,由于在原始图像数据获取过程中,便开始获取图像统计信息,并将其打包发送给应用处理器,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输。
其中,图像处理器701和应用处理器702能够实现上述任一方法的功能或者步骤。
图8是本申请实施例中所涉及的用于图像处理器的参数传输装置800的功能单元组成框图。该用于图像处理器的参数传输装置800应用于电子设备,所述电子设备包括图像处理器和应用处理器,所述装置800包括:获取单元801、生成单元802和发送单元803,其中,
所述获取单元801,用于获取图像中至少一个图像块的图像统计参数;
所述生成单元802,用于基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包;
所述发送单元803,用于若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,以使得所述应用处理器基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
在一个可能的示例中,在所述基于所述至少一个图像块的图像统计参数,生成图像统计参数包方面,所述生成单元802具体用于包括:
将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包。
在一个可能的示例中,在所述将所述至少一个图像块的每一图像块的图像统计参数进行打包,得到所述图像统计参数包方面,所述生成单元802具体用于包括:
获取到一个图像块的完整的图像统计参数后,基于所述一个图像块的图像统计参数生成所述图像统计参数包。
在一个可能的示例中,在所述向所述应用处理器发送所述指定类型图像统计参数对应的索引信息之后,所述发送单元803还具体用于:
以预设中断方式向所述应用处理器发送通知消息,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
在一个可能的示例中,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
在一个可能的示例中,所述包尾包括:包尾标记、参数包计数和帧计数。
在一个可能的示例中,在所述向应用处理器发送所述图像统计参数包方面,所述发送单元803具体用于:
通过预设虚拟通道将所述图像统计参数包发送给所述应用处理器。
在一个可能的示例中,在所述向应用处理器发送所述图像统计参数包方面,所述发送单元803具体用于:
获取图像统计参数包对应的目标属性信息;
按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的目标通道;
通过所述目标通道传输所述图像统计参数包。
在一个可能的示例中,在所述获取图像中至少一个图像块的图像统计参数方面,所述获取单元801具体用于:
获取目标拍摄参数;
按照预设的拍摄参数与图像统计参数类型之间的映射关系,确定所述目标拍摄参数对应的第一目标图像统计参数类型;
从所述图像中的至少一个图像块中获取与所述第一目标图像统计参数类型对应的图像统计参数。
在一个可能的示例中,在所述获取图像中至少一个图像块的图像统计参数方面,所述获取单元801具体用于:
获取目标环境参数;
按照预设的环境参数与图像统计参数类型之间的映射关系,确定所述目标环境参数对应的第二目标图像统计参数类型;
从所述图像中的至少一个图像块中获取与所述第二目标图像统计参数类型对应的图像统计参数。
需要注意的是,本申请实施例所描述的电子设备是以功能单元的形式呈现。这里所使用的术语“单元”应当理解为尽可能最宽的含义,用于实现各个“单元”所描述功能的对象例如可以是集成电路ASIC,单个电路,用于执行一个或多个软件或固件程序的处理器(共享的、专用的或芯片组)和存储器,组合逻辑电路,和/或提供实现上述功能的其他合适的组件。
其中,获取单元801、生成单元802和发送单元803可以是图像处理器电路或应用处理器,基于上述单元模块能够实现上述任一方法的功能或者步骤。
图9是本申请实施例中所涉及的用于应用处理器的参数传输装置900的功能单元组成框图。该用于应用处理器的参数传输装置900应用于电子设备,所述电子设备包括图像处理器和应用处理器,所述装置900包括:接收单元901和获取单元902,其中,
所述接收单元901,用于接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
所述接收单元901,还用于若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
所述获取单元902,用于基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
在一个可能的示例中,在所述基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数方面,所述获取单元902具体用于:
基于所述索引信息对所接收的图像统计参数包进行解包操作,得到所述指定类型图像统计参数的目标图像统计参数;
调用与所述目标图像统计参数对应的目标图像处理算法;
依据所述目标图像处理算法对所述图像进行处理,得到所述图像的显示参数。
进一步地,在一个可能的示例中,在所述接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息之前,所述接收单元901还具体用于:
接收由所述图像处理器发送的通知消息,所述通知消息由所述图像处理器以预设中断方式向所述应用处理器发送,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
在一个可能的示例中,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
在一个可能的示例中,所述包头包括包头标记、索引包标记和包数据长度。
在一个可能的示例中,所述包尾包括:包尾标记、参数包计数和帧计数。
在一个可能的示例中,在所述接收由图像处理器发送的图像统计参数包方面,所述接收单元901具体用于:
通过预设虚拟通道接收由所述图像处理器发送的所述图像统计参数包。
在一个可能的示例中,在所述接收由图像处理器发送的图像统计参数包方面,所述接收单元901具体用于:
通过目标通道传输接收所述图像统计参数包,所述目标通道由所述图像处理器获取图像统计参数包对应的目标属性信息,按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的所述目标通道。
其中,接收单元901和获取单元902可以是图像处理器电路或应用处理器,基于上述单元模块能够实现上述任一方法的功能或者步骤。
可以看出,在本申请实施例中所描述的用于参数传输装置,或者,电子设备,由于在原始图像数据获取过程中,便开始获取图像统计参数,并将其打包发送给应用处理器,且不用将全部的参数包发送给图像处理器,在指定类型图像统计参数的参数包达到一定数量,便可以对参数包进行解包,以调用与指定类型图像统计参数对应的算法,进而,能够保证用于图像处理器的参数传输的可靠性,并实现图像统计信息实时传输,也能够提升图像处理效率。
另外,本申请实施例还提供了一种图像处理器,所述图像处理器用于执行如下操作:
获取图像中至少一个图像块的图像统计参数;
基于所述至少一个图像块的图像统计参数,生成图像统计参数包,并向应用处理器发送所述图像统计参数包;
若所发送的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,则向所述应用处理器发送所述指定类型图像统计参数对应的索引信息,以使得所述应用处理器基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
以及,本申请实施例还提供了一种应用处理器,所述应用处理器用于:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包由所述图像处理器获取图像中至少一个图像块的图像统计参数,基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系。
本实施例还提供了一种计算机可读存储介质,其中,该计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例,以用于实现上述实施例中的任一方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的任一方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的任一方法。
其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种用于应用处理器的参数传输方法,其特征在于,所述方法包括:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包是由所述图像处理器获取图像中至少一个图像块的图像统计参数,并基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
2.根据权利要求1所述的方法,其特征在于,所述基于所述索引信息和所接收的所述指定类型图像统计参数的参数包来获取所述图像的显示参数,包括:
基于所述索引信息对所接收的图像统计参数包进行解包操作,得到所述指定类型图像统计参数的目标图像统计参数;
调用与所述目标图像统计参数对应的目标图像处理算法;
依据所述目标图像处理算法对所述图像进行处理,得到所述图像的显示参数。
3.根据权利要求2所述的方法,其特征在于,在所述接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息之前,所述方法还包括:
接收由所述图像处理器发送的通知消息,所述通知消息由所述图像处理器以预设中断方式向所述应用处理器发送,所述通知消息用于指示所述指定类型图像统计参数的参数包数量已经达到所述预定阈值。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述图像统计参数包包括:包头、有效图像统计参数和包尾,所述有效图像统计参数对应至少一种类型的图像统计参数。
5.根据权利要求4所述的方法,其特征在于,所述包头包括包头标记、索引包标记和包数据长度。
6.根据权利要求4所述的方法,其特征在于,所述包尾包括:包尾标记、参数包计数和帧计数。
7.根据权利要求1-3任一项所述的方法,其特征在于,所述接收由图像处理器发送的图像统计参数包,包括:
通过预设虚拟通道接收由所述图像处理器发送的所述图像统计参数包。
8.根据权利要求1-3任一项所述的方法,其特征在于,所述接收由图像处理器发送的图像统计参数包之前,所述方法还包括:
通过目标通道传输接收所述图像统计参数包,所述目标通道由所述图像处理器获取图像统计参数包对应的目标属性信息,按照预设的属性信息与通道之间的映射关系,确定所述目标属性信息对应的所述目标通道。
9.一种应用处理器,其特征在于,所述应用处理器用于执行如下操作:
接收由图像处理器发送的图像统计参数包,所述图像统计参数包是由所述图像处理器获取图像中至少一个图像块的图像统计参数,并基于所述至少一个图像块的图像统计参数生成的图像统计参数包;
若所接收的图像统计参数包中的指定类型图像统计参数的参数包数量达到预定阈值,接收由所述图像处理器发送的所述指定类型图像统计参数对应的索引信息,其中,所述索引信息用于表征所述指定类型图像统计参数的参数包与所述图像块之间的对应关系;
基于所述索引信息和所接收的所述指定类型图像统计参数的参数包获取所述图像的显示参数。
10.一种电子设备,其特征在于,所述电子设备包括应用处理器、图像处理器、存储器,所述存储器用于存储一个或多个程序,并且被配置由所述应用处理器执行,所述程序包括用于执行如权利要求1-8任一项所述的方法中的步骤的指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011472314.3A CN114630153B (zh) | 2020-12-11 | 2020-12-11 | 用于应用处理器的参数传输方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011472314.3A CN114630153B (zh) | 2020-12-11 | 2020-12-11 | 用于应用处理器的参数传输方法、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114630153A CN114630153A (zh) | 2022-06-14 |
CN114630153B true CN114630153B (zh) | 2023-12-19 |
Family
ID=81896568
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011472314.3A Active CN114630153B (zh) | 2020-12-11 | 2020-12-11 | 用于应用处理器的参数传输方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114630153B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014125289A1 (en) * | 2013-02-15 | 2014-08-21 | University Of Warwick | Multisensory data compression |
CN107578372A (zh) * | 2017-10-31 | 2018-01-12 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
CN111768352A (zh) * | 2020-06-30 | 2020-10-13 | Oppo广东移动通信有限公司 | 图像处理方法及装置 |
-
2020
- 2020-12-11 CN CN202011472314.3A patent/CN114630153B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014125289A1 (en) * | 2013-02-15 | 2014-08-21 | University Of Warwick | Multisensory data compression |
CN107578372A (zh) * | 2017-10-31 | 2018-01-12 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
CN111768352A (zh) * | 2020-06-30 | 2020-10-13 | Oppo广东移动通信有限公司 | 图像处理方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN114630153A (zh) | 2022-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114816209B (zh) | 一种移动终端的全屏显示方法及设备 | |
CN114650363B (zh) | 一种图像显示的方法及电子设备 | |
CN111553846B (zh) | 超分辨率处理方法及装置 | |
CN111768352B (zh) | 图像处理方法及装置 | |
CN113726950A (zh) | 一种图像处理方法和电子设备 | |
CN111882642B (zh) | 三维模型的纹理填充方法及装置 | |
KR20140112402A (ko) | 이미지를 처리하는 전자장치 및 방법 | |
CN114596819B (zh) | 亮度调节方法及相关装置 | |
US12272335B2 (en) | Display synchronization method, electronic device, and readable storage medium | |
CN114880251B (zh) | 存储单元的访问方法、访问装置和终端设备 | |
CN115550556B (zh) | 一种曝光强度调节方法及相关装置 | |
CN114945019B (zh) | 数据传输方法、装置及存储介质 | |
CN114630153B (zh) | 用于应用处理器的参数传输方法、装置及存储介质 | |
WO2023000745A1 (zh) | 显示控制方法及相关装置 | |
CN114630152A (zh) | 用于图像处理器的参数传输方法、装置及存储介质 | |
CN111836226B (zh) | 数据传输控制方法、装置及存储介质 | |
CN115460343A (zh) | 图像处理方法、设备及存储介质 | |
CN116561085A (zh) | 图片分享方法和电子设备 | |
CN113311380B (zh) | 校准方法、装置以及存储介质 | |
CN114339607B (zh) | 测距方法、装置及存储介质 | |
CN116266159B (zh) | 一种缺页异常处理方法和电子设备 | |
CN117499797B (zh) | 图像处理方法及相关设备 | |
CN116095512B (zh) | 终端设备的拍照方法及相关装置 | |
CN115175164B (zh) | 通信控制方法及相关装置 | |
CN116896748A (zh) | 鉴权路由自适应调节方法及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |