CN111885415B - 一种音频数据快速输出方法及显示设备 - Google Patents

Abstract

本申请公开了一种音频数据快速输出方法及显示设备，用以降低音频数据的链路耗时，提高用户的使用感受。该方法包括：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；发送内存中的所述音频数据到第一低延时播放器，以使第一低延时播放器输送所述音频数据到扬声器。

Description

一种音频数据快速输出方法及显示设备

技术领域

本申请涉及音频数据输出技术领域，尤其涉及一种音频数据快速输出方法及显示设备。

背景技术

播放器播放多媒体资源时，通常由播放器进行音频和视频同步，保证用户看到的显示设备上的图像和听到的声音是同步的。

但是随着云游戏应用的开发，为了提升用户体验，使用户更快的看到图像，如图2所示，播放器将声音和图像单独输出，不进行同步逻辑。在此场景下，经常会发现图像输出提前，而声音输出滞后，图像和声音不同步，导致用户的使用感受不好。因此，本领域亟待一种音频数据快速输出的方法，以提升用户的使用感受。

发明内容

本申请实施例提供一种音频数据快速输出方法及显示设备，用以提高用户使用云游戏应用的使用感受。

第一方面，提供一种显示设备，包括：

显示器；

扬声器，用于播放音频数据；

控制器，用于执行：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；

发送内存中的所述音频数据到第一低延时播放器，以使第一低延时播放器输送所述音频数据到扬声器。

一些实施例中，所述控制器还用于执行：响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第一低延时播放器。

第二方面，提供一种显示设备，包括：

显示器；

扬声器，用于播放音频数据；

控制器，用于执行：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量大于1个，通过所述音轨发送音频数据到内存，并创建第二低延时播放器；

连接所述音轨与第二低延时播放器，以使第二低延时播放器为每一个音轨分配数据池，所述音轨发送内存中的所述音频数据到所述数据池；将所述数据池中的音频数据进行混音，以使所述第二低延时播放器将混音后的音频数据发送至扬声器。

一些实施例中，所述控制器还用于执行：响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第二低延时播放器。

一些实施例中，所述控制器用于按照以下步骤执行所述音轨发送内存中的所述音频数据到所述数据池：

所述音轨通过嵌套字客户端和嵌套字服务端传输所述音频数据到所述数据池。

一些实施例中，在连接所述音轨与第二低延时播放器和所述第二低延时播放器为每一个音轨分配数据池的步骤之间，所述控制器还用于执行：

所述音轨发送认证命令到第二低延时播放器；

如果第二低延时播放器认证通过，则第二低延时播放器为每一个音轨分配数据池。

第三方面，提供一种音频数据快速输出方法，所述方法包括：

响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；

发送内存中的所述音频数据到第一低延时播放器，以使第一低延时播放器输送所述音频数据到扬声器。

第四方面，提供一种音频数据快速输出方法，所述方法包括：

响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量大于1个，通过所述音轨发送音频数据到内存，并创建第二低延时播放器；

连接所述音轨与第二低延时播放器，以使第二低延时播放器为每一个音轨分配数据池，所述音轨发送内存中的所述音频数据到所述数据池；将所述数据池中的音频数据进行混音，以使所述第二低延时播放器将混音后的音频数据发送至扬声器。

在上述实施例中，一种音频数据快速输出方法及显示设备，用以降低音频数据的链路耗时，提高用户的使用感受。该方法包括：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；发送内存中的所述音频数据到第一低延时播放器，以使第一低延时播放器输送所述音频数据到扬声器。

附图说明

图1A中示例性示出了显示设备200与控制100之间操作场景的示意图；

图1B中示例性示出了图1A中控制装置100的配置框图；

图1C中示例性示出了图1A中显示设备200的配置框图；

图1D中示例性示出了显示设备200存储器中操作系统的架构配置框图。

图2中示例性示出了一种音频数据输出方法的流程图；

图3中示例性示出了显示设备200提供的一个GUI的示意图；

图4中示例性示出了又一种音频数据输出方法的流程图。

具体实施方式

为使本申请示例性实施例的目的、技术方案和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施例中的技术方案进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

基于本申请中示出的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。

本申请中使用的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的那些组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

本申请中使用的术语“模块”，是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

本申请中使用的术语“手势”，是指用户通过一种手型的变化或手部运动等动作，用于表达预期想法、动作、目的/或结果的用户行为。

图1A中示例性示出了显示设备200与控制装置100之间操作场景的示意图。如图1A所示，控制装置100和显示设备200之间可以有线或无线方式进行通信。

其中，控制装置100被配置为控制显示设备200，其可接收用户输入的操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起着用户与显示设备200之间交互的中介作用。如：用户通过操作控制装置100上频道加减键，显示设备200响应频道加减的操作。

控制装置100可以是遥控器100A，包括红外协议通信或蓝牙协议通信，及其他短距离通信方式等，通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令，来控制显示设备200。如：用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令，来实现控制显示设备200的功能。

控制装置100也可以是智能设备，如移动终端100B、平板电脑、计算机、笔记本电脑等。例如，使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上，通过直观的用户界面(UI)为用户提供各种控制。

示例性的，移动终端100B可与显示设备200安装软件应用，通过网络通信协议实现连接通信，实现一对一控制操作的和数据通信的目的。如：可以使移动终端100B与显示设备200建立控制指令协议，通过操作移动终端100B上提供的用户界面的各种功能键或虚拟按钮，来实现如遥控器100A布置的实体按键的功能。也可以将移动终端100B上显示的音视频内容传输到显示设备200上，实现同步显示功能。

显示设备200可被实施为电视，可提供广播接收电视功能以及计算机支持功能的智能网络电视功能。显示设备示例的包括，数字电视、网络电视、智能电视、互联网协议电视(IPTV)等。

显示设备200，可以是液晶显示器、有机发光显示器、投影显示设备。具体显示设备类型、尺寸大小和分辨率等不作限定。

显示设备200还与服务器300通过多种通信方式进行数据通信。这里可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器300可以向显示设备200提供各种内容和互动。示例的，显示设备200可以发送和接收信息，例如：接收电子节目指南(EPG)数据、接收软件程序更新、或访问远程储存的数字媒体库。服务器300可以一组，也可以多组，可以一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。

图1B中示例性示出了控制装置100的配置框图。如图1B所示，控制装置100包括控制器110、存储器120、通信器130、用户输入接口140、输出接口150、供电电源160。

控制器110包括随机存取存储器(RAM)111、只读存储器(ROM)112、处理器113、上电接口以及通信总线。控制器110用于控制控制装置100的运行和操作，以及内部各部件之间的通信协作、外部和内部的数据处理功能。

示例性的，当检测到用户按压在遥控器100A上布置的按键的交互或触摸在遥控器100A上布置的触摸面板的交互时，控制器110可控制产生与检测到的交互相应的信号，并将该信号发送到显示设备200。

存储器120，用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器120，可以存储用户输入的各类控制信号指令。

通信器130在控制器110的控制下，实现与显示设备200之间控制信号和数据信号的通信。如：控制装置100经由通信器130将控制信号(例如触摸信号或按钮信号)发送至显示设备200上，控制装置100可经由通信器130接收由显示设备200发送的信号。通信器130可以包括红外信号接口131和射频信号接口132。例如：红外信号接口时，需要将用户输入指令按照红外控制协议转化为红外控制信号，经红外发送模块进行发送至显示设备200。再如：射频信号接口时，需将用户输入指令转化为数字信号，然后按照射频控制信号调制协议进行调制后，由射频发送端子发送至显示设备200。

用户输入接口140，可包括麦克风141、触摸板142、传感器143、按键144等中至少一者，从而用户可以通过语音、触摸、手势、按压等将关于控制显示设备200的用户指令输入到控制装置100。

输出接口150，通过将用户输入接口140接收的用户指令输出至显示设备200，或者，输出由显示设备200接收的图像或语音信号。这里，输出接口150可以包括LED接口151、产生振动的振动接口152、输出声音的声音输出接口153和输出图像的显示器154等。例如，遥控器100A可从输出接口150接收音频、视频或数据等输出信号，并且将输出信号在显示器154上显示为图像形式、在声音输出接口153输出为音频形式或在振动接口152输出为振动形式。

供电电源160，用于在控制器110的控制下为控制装置100各元件提供运行电力支持。形式可以为电池及相关控制电路。

图1C中示例性示出了显示设备200的硬件配置框图。如图1C所示，显示设备200中可以进一步包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、存储器260、用户接口265、视频处理器270、显示器275、音频处理器280、音频输入接口285、供电电源290。

调谐解调器210，通过有线或无线方式接收广播电视信号，可以进行放大、混频和谐振等调制解调处理，用于从多个无线或有线广播电视信号中解调出用户所选择的电视频道的频率中所携带的音视频信号，以及附加信息(例如EPG数据)。

调谐解调器210，可根据用户选择，以及由控制器250控制，响应用户选择的电视频道的频率以及该频率所携带的电视信号。

调谐解调器210，根据电视信号的广播制式不同，可以接收信号的途径有很多种，诸如：地面广播、有线广播、卫星广播或互联网广播等；以及根据调制类型不同，可以数字调制方式或模拟调制方式；以及根据接收电视信号的种类不同，可以解调模拟信号和数字信号。

在其他一些示例性实施例中，调谐解调器210也可在外部设备中，如外部机顶盒等。这样，机顶盒通过调制解调后输出电视信号，经过外部装置接口240输入至显示设备200中。

通信器220，是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如显示设备200可将内容数据发送至经由通信器220连接的外部设备，或者，从经由通信器220连接的外部设备浏览和下载内容数据。通信器220可以包括WIFI模块221、蓝牙模块222、有线以太网模块223等网络通信协议模块或近场通信协议模块，从而通信器220可根据控制器250的控制接收控制装置100的控制信号，并将控制信号实现为WIFI信号、蓝牙信号、射频信号等。

检测器230，是显示设备200用于采集外部环境或与外部交互的信号的组件。检测器230可以包括图像采集器231，如相机、摄像头等，可以用于采集外部环境场景，以自适应变化显示设备200的显示参数；以及用于采集用户的属性或与用户交互手势，以实现显示设备与用户之间互动的功能。还可以包括光接收器232，用于采集环境光线强度，以自适应显示设备200的显示参数变化等。

在其他一些示例性实施例中，检测器230，还可以包括温度传感器，如通过感测环境温度，显示设备200可自适应调整图像的显示色温。示例性的，当温度偏高的环境时，可调整显示设备200显示图像色温偏冷色调；当温度偏低的环境时，可以调整显示设备200显示图像色温偏暖色调。

在其他一些示例性实施例中，检测器230，还可以包括声音采集器，如麦克风，可以用于接收用户的声音，如用户控制显示设备200的控制指令的语音信号；或者，可以采集用于识别环境场景类型的环境声音，实现显示设备200可以自适应环境噪声。

外部装置接口240，是提供控制器210控制显示设备200与外部设备间数据传输的组件。外部装置接口240可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等外部设备连接，可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。

其中，外部装置接口240可以包括：高清多媒体接口(HDMI)端子241、复合视频消隐同步(CVBS)端子242、模拟或数字分量端子243、通用串行总线(USB)端子244、组件(Component)端子(图中未示出)、红绿蓝(RGB)端子(图中未示出)等任一个或多个。

控制器250，通过运行存储在存储器260上的各种软件控制程序(如操作系统和各种应用程序)，来控制显示设备200的工作和响应用户的操作。

如图1C所示，控制器250包括随机存取存储器(RAM)251、只读存储器(ROM)252、图形处理器253、处理器254、上电接口255、以及通信总线256。其中，RAM251、ROM252以及图形处理器253、处理器254上电接口255通过通信总线256相连接。

ROM252，用于存储各种系统启动指令。如在接收到开机信号时，显示设备200电源开始启动，处理器254运行ROM252中的系统启动指令，将存储在存储器260的操作系统拷贝至RAM251中，以开始运行启动操作系统。当操作系统启动完成后，处理器254再将存储器260中各种应用程序拷贝至RAM251中，然后，开始运行启动各种应用程序。

图形处理器253，用于产生各种图形对象的屏幕图像，如图标、图像以及操作菜单等。图形处理器253可以包括运算器，用于通过接收用户输入各种交互指令进行运算，进而根据显示属性显示各种对象；以及包括渲染器，用于产生基于运算器得到的各种对象，将进行渲染的结果显示在显示器275上。

处理器254，用于执行存储在存储器260中的操作系统和应用程序指令。以及根据接收的用户输入指令，来执行各种应用程序、数据和内容的处理，以便最终显示和播放各种音视频内容。

在一些示例性实施例中，处理器254，可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器，用于在显示设备预加载模式中执行显示设备200的一些初始化操作，和/或，在正常模式下显示画面的操作。多个或一个子处理器，用于执行在显示设备待机模式等状态下的一种操作。

上电接口255，可包括第一接口到第n接口。这些接口可以是经由网络被连接到外部设备的网络接口。

控制器250可以控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器275上显示的GUI对象的用户输入命令，控制器250便可以执行与由用户输入命令选择的对象有关的操作。

其中，该对象可以是可选对象中的任何一个，例如超链接或图标。该与所选择的对象有关的操作，例如显示连接到超链接页面、文档、图像等操作，或者执行与图标相对应的程序的操作。该用于选择GUI对象的用户输入命令，可以是通过连接到显示设备200的各种输入装置(例如，鼠标、键盘、触摸板等)输入命令或者是与用户说出语音相对应的语音命令。

存储器260，用于存储驱动和控制显示设备200运行的各种类型的数据、软件程序或应用程序。存储器260可以包括易失性和/或非易失性存储器。而术语“存储器”包括存储器260、控制器250的RAM251和ROM252、或显示设备200中的存储卡。

在一些实施例中，存储器260具体用于存储驱动显示设备200中控制器250的运行程序；存储显示设备200内置的和用户从外部设备下载的各种应用程序；存储用于配置由显示器275提供的各种GUI、与GUI相关的各种对象及用于选择GUI对象的选择器的视觉效果图像等数据。

在一些实施例中，存储器260具体用于存储调谐解调器210、通信器220、检测器230、外部装置接口240、视频处理器270、显示器275、音频处理器280等的驱动程序和相关数据，从外部装置接口接收的外部数据(例如音视频数据)或用户接口接收的用户数据(例如按键信息、语音信息、触摸信息等)。

在一些实施例中，存储器260具体存储用于表示操作系统(OS)的软件和/或程序，这些软件和/或程序可包括，例如：内核、中间件、应用编程接口(API)和/或应用程序。示例性的，内核可控制或管理系统资源，以及其它程序所实施的功能(如所述中间件、API或应用程序)；同时，内核可以提供接口，以允许中间件、API或应用程序访问控制器，以实现控制或管理系统资源。

图1D中示例性示出了显示设备200存储器中操作系统的架构配置框图。该操作系统架构从上到下依次是应用层、中间件层和内核层。

应用层，系统内置的应用程序以及非系统级的应用程序都属于应用层，其负责与用户进行直接交互。应用层可包括多个应用程序，如NETFLIX应用程序、设置应用程序、媒体中心应用程序等。这些应用程序可被实现为Web应用，其基于WebKit引擎来执行，具体可基于HTML、层叠样式表(CSS)和JavaScript来开发并执行。

这里，HTML，全称为超文本标记语言(HyperText Markup Language)，是一种用于创建网页的标准标记语言，通过标记标签来描述网页，HTML标签用以说明文字、图形、动画、声音、表格、链接等，浏览器会读取HTML文档，解释文档内标签的内容，并以网页的形式显示出来。

CSS，全称为层叠样式表(Cascading Style Sheets)，是一种用来表现HTML文件样式的计算机语言，可以用来定义样式结构，如字体、颜色、位置等的语言。CSS样式可以直接存储与HTML网页或者单独的样式文件中，实现对网页中样式的控制。

JavaScript，是一种应用于Web网页编程的语言，可以插入HTML页面并由浏览器解释执行。其中Web应用的交互逻辑都是通过JavaScript实现。JavaScript可以通过浏览器，封装JavaScript扩展接口，实现与内核层的通信，

中间件层，可以提供一些标准化的接口，以支持各种环境和系统的操作。例如，中间件层可以实现为与数据广播相关的中间件的多媒体和超媒体信息编码专家组(MHEG)，还可以实现为与外部设备通信相关的中间件的DLNA中间件，还可以实现为提供显示设备内各应用程序所运行的浏览器环境的中间件等。

内核层，提供核心系统服务，例如：文件管理、内存管理、进程管理、网络管理、系统安全权限管理等服务。内核层可以被实现为基于各种操作系统的内核，例如，基于Linux操作系统的内核。

内核层也同时提供系统软件和硬件之间的通信，为各种硬件提供设备驱动服务，例如：为显示器提供显示驱动程序、为摄像头提供摄像头驱动程序、为遥控器提供按键驱动程序、为WIFI模块提供WiFi驱动程序、为音频输出接口提供音频驱动程序、为电源管理(PM)模块提供电源管理驱动等。

用户接口265，接收各种用户交互。具体的，用于将用户的输入信号发送给控制器250，或者，将从控制器250的输出信号传送给用户。示例性的，遥控器100A可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户接口265，再由用户接口265转送至控制器250；或者，遥控器100A可接收经控制器250处理从用户接口265输出的音频、视频或数据等输出信号，并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。

在一些实施例中，用户可在显示器275上显示的图形用户界面(GUI)输入用户命令，则用户接口265通过GUI接收用户输入命令。确切的说，用户接口265可接收用于控制选择器在GUI中的位置以选择不同的对象或项目的用户输入命令。

或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户接口265通过传感器识别出声音或手势，来接收用户输入命令。

视频处理器270，用于接收外部的视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理，可得到直接在显示器275上显示或播放的视频信号。

示例的，视频处理器270，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。

其中，解复用模块，用于对输入音视频数据流进行解复用处理，如输入MPEG-2流(基于数字存储媒体运动图像和语音的压缩标准),则解复用模块将其进行解复用成视频信号和音频信号等。

视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。

图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。

帧率转换模块，用于对输入视频的帧率进行转换，如将输入的60Hz视频的帧率转换为120Hz或240Hz的帧率，通常的格式采用如插帧方式实现。

显示格式化模块，用于将帧率转换模块输出的信号，改变为符合诸如显示器显示格式的信号，如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。

显示器275，用于接收源自视频处理器270输出的图像信号，进行显示视频、图像以及菜单操控界面。例如，显示器可以显示来自调谐解调器210接收的广播信号中的视频，也可以显示来自通信器220或外部装置接口240输入的视频，还可以显示在存储器260中存储的图像。显示器275，同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。

以及，显示器275可以包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。或者，倘若显示器275为一种投影显示器，还可以包括一种投影装置和投影屏幕。

音频处理器280，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等音频数据处理，得到可以在扬声器286中播放的音频信号。

示例性的，音频处理器280可以支持各种音频格式。例如MPEG-2、MPEG-4、高级音频编码(AAC)、高效AAC(HE-AAC)等格式。

音频输出接口285，用于接收源自音频处理器280输出的音频信号。例如，音频输出接口可以输出经由调谐解调器210接收的广播信号中的音频，也可以输出经由通信器220或外部装置接口240输入的音频，还可以输出在存储器260中存储的音频。音频输出接口285可包括扬声器286，或输出至外接设备的发生装置的外接音响输出端子287，如耳机输出端子。

在其他一些示例性实施例中，视频处理器270可以包括一个或多个芯片组成。音频处理器280，也可以包括一个或多个芯片组成。

以及，在其他一些示例性实施例中，视频处理器270和音频处理器280，可以为单独的芯片，也可以与控制器250一起集成在一个或多个芯片中。

供电电源290，用于在控制器250的控制下，将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以是安装在显示设备200内部的内置电源电路，也可以是安装在显示设备200外部的电源。

播放器播放多媒体资源时，通常由播放器进行音频和视频同步，保证用户看到的显示设备上的图像和听到的声音是同步的。

但是随着云游戏应用的开发，为了提升用户体验，使用户更快的看到图像，播放器将声音和图像单独输出，不进行同步逻辑。在此场景下，经常会发现图像输出提前，而声音输出滞后，图像和声音不同步，导致用户的使用感受不好。因此，本领域亟待一种音频数据快速输出的方法，以提升用户的使用感受。

图3中示例性示出了显示设备200提供的一个GUI的示意图。如图3所示，显示设备可向显示器提供GUI，该GUI包括播放界面41。

一些实施例中，当用户使用应用时，通过音轨(AudioTrack)输出音频数据。该音频数据按照安卓系统音频通路设计，由音频策略的执行者(AudioFlinger)从音轨与音频策略的执行者之间的内存中读取，依次经过音频策略的执行者混音、音频硬件抽象层(AudioHAL)写入内核层(Kernel)、内核层进行音效处理流程，最终送到扬声器输出。示例性的，所述应用可以为云游戏，所述音频数据为pcm数据。所述音效处理是指是人工制造或加强的声音，用来增强对电影、电子游戏、音乐或其他媒体的艺术或其他内容的声音处理。由于音频数据需要经过音频策略的执行者混音、音频硬件抽象层(AudioHAL)写入内核层(Kernel)、内核层进行音效处理流程，最终送到扬声器输出，这样音频数据需要较长的时间才能从扬声器中输出。

本申请实施例提供一种音频数据快速输出方法，在该方法中利用低延时播放器，将音频数据直接送到扬声器，可以降低音频数据的链路耗时，提升用户的使用感受。

参阅图4，所述方法包括：S101、响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态。一些实施例中，当需要播放音频数据时，首先输出音频数据的信号，该输出音频数据的信号表示即将输出音频数据。所述低延时模式状态包括开启或关闭，所述低延时模式状态可以根据应用预置，示例性的，云游戏应用的低延时模式状态可以为开启。另外，一些实施例中，用户也可以根据自身需求对低延时模式状态设定，本申请实施例中对低延时模式状态如何设置并不做限制，只要不违背本申请的技术方案即可。

S102、判断低延时模式状态是否开启。如果低延时模式状态为关闭，则按照安卓系统音频通路设计执行。

S103、如果所述低延时模式状态为开启，判断所述音轨的数量。S104、如果音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器。

为了避免系统逻辑出现混乱，本申请实施例在使用第一延时播放器的同时，还将所述音频数据对应的静音数据按照安卓系统音频通路设计，其中所述静音数据为根据所述音频数据生成的等量静音数据，存储在内存中，由中间层中的音频策略的执行者(AudioFlinger)从音轨与音频策略的执行者之间的内存中读取所述静音数据，依次经过音频策略的执行者混音、AudioHAL(音频硬件抽象层)写入Kernel(内核层)、内核层进行音效处理流程，最终送到扬声器输出。

与此同时，S105、发送内存中的音频数据到第一低延时播放器，通过第一低延时播放器输送所述音频数据到扬声器，由于利用第一低延时播放器，可以降低音频数据的链路耗时。在本申请实施例中步骤S101-S105由应用层执行。

响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第一低延时播放器。

本申请实施例还提供一种音频数据快速输出方法，所述方法包括：

响应于输出音频数据的信号，创建音轨以及确定低延时模式状态。该步骤与上述实施例中的步骤相同，在此不再赘述。

S106、如果所述低延时模式状态为开启，且所述音轨的数量大于1个，通过所述音轨发送音频数据到内存，并创建第二低延时播放器；

S107、将所有音轨与第二低延时播放器连接，连接后所述音轨发送认证命令到第二低延时播放器，如果第二低延时播放器认证通过，则第二低延时播放器为每一个音轨分配数据池。其中，利用第二延时播放器认证的步骤可以保证安全性。

所述音轨发送内存中的音频数据通过嵌套字客户端(Socket Client)和嵌套字服务端(SocketServer)传输到数据池。S108、第二低延时播放器对应的混音器(AudioMixer)从各个音轨对应的数据池中读取音频数据，对所述音频数据进行混音。第二低延时播放器将混音后的音频数据发送到扬声器。

响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第二低延时播放器。

在上述实施例中，一种音频数据快速输出方法及显示设备，用以降低音频数据的链路耗时，提高用户的使用感受。该方法包括：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；发送内存中的所述音频数据到第一低延时播放器，以使第一低延时播放器输送所述音频数据到扬声器。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (6)

1.一种显示设备，其特征在于，包括：

显示器；

扬声器，用于播放音频数据；

控制器，用于执行：响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；

将所述音频数据对应的静音数据存储在内存中；

通过中间层中的音频策略的执行者从音轨与所述音频策略的执行者之间的内存中读取所述静音数据，所述静音数据依次经过所述音频策略的执行者混音、音频硬件抽象层写入内核层、内核层进行音效处理得到处理后的静音数据；

发送内存中的所述音频数据到第一低延时播放器，将所述处理后的静音数据和第一低延时播放器中的所述音频数据输送到扬声器；

如果所述低延时模式状态为开启，且所述音轨的数量大于1个，通过所述音轨发送音频数据到内存，并创建第二低延时播放器；

连接所述音轨与第二低延时播放器，以使第二低延时播放器为每一个音轨分配数据池，所述音轨发送内存中的所述音频数据到所述数据池；将数据池中的音频数据进行混音，以使所述第二低延时播放器将混音后的音频数据发送至扬声器。

2.根据权利要求1所述的显示设备，其特征在于，所述控制器还用于执行：响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第一低延时播放器。

3.根据权利要求1所述的显示设备，其特征在于，所述控制器还用于执行：响应于停止输出音频数据的信号，关闭所述音轨，且关闭所述第二低延时播放器。

4.根据权利要求1所述的显示设备，其特征在于，所述控制器用于按照以下步骤执行所述音轨发送内存中的所述音频数据到所述数据池：

所述音轨通过嵌套字客户端和嵌套字服务端传输所述音频数据到所述数据池。

5.根据权利要求1所述的显示设备，其特征在于，在连接所述音轨与第二低延时播放器和所述第二低延时播放器为每一个音轨分配数据池的步骤之间，所述控制器还用于执行：

所述音轨发送认证命令到第二低延时播放器；

如果第二低延时播放器认证通过，则第二低延时播放器为每一个音轨分配数据池。

6.一种音频数据快速输出方法，其特征在于，所述方法包括：

响应于输出音频数据的信号，创建音轨，以及确定低延时模式状态；

如果所述低延时模式状态为开启，且所述音轨的数量为1个，通过所述音轨发送音频数据到内存，并创建第一低延时播放器；

将所述音频数据对应的静音数据存储在内存中；

通过中间层中的音频策略的执行者从音轨与所述音频策略的执行者之间的内存中读取所述静音数据，所述静音数据依次经过所述音频策略的执行者混音、音频硬件抽象层写入内核层、内核层进行音效处理得到处理后的静音数据；

发送内存中的所述音频数据到第一低延时播放器，将所述处理后的静音数据和第一低延时播放器中的所述音频数据输送到扬声器；

如果所述低延时模式状态为开启，且所述音轨的数量大于1个，通过所述音轨发送音频数据到内存，并创建第二低延时播放器；

连接所述音轨与第二低延时播放器，以使第二低延时播放器为每一个音轨分配数据池，所述音轨发送内存中的所述音频数据到所述数据池；将数据池中的音频数据进行混音，以使所述第二低延时播放器将混音后的音频数据发送至扬声器。

Images