HI,欢迎来到起点商标网!
24小时服务QQ:2880605093

音频效果处理的方法、设备及存储介质与流程

2021-01-28 13:01:10|311|起点商标网
音频效果处理的方法、设备及存储介质与流程

本申请涉及计算机技术领域,特别涉及一种音频效果处理的方法、装置、设备及存储介质。



背景技术:

在日常生活中,用户可以点播一个音频数据,并选中一个效果对音频数据进行效果处理,例如,流行、古典、爵士等曲风效果处理。终端可以在播放音频数据前,将音频数据输入到滤波器中,该滤波器包含有效果参数,进而将音频数据中每一个音频帧与对应的效果参数相乘得到滤波后的音频数据。

在实现本申请的过程中,发明人发现现有技术至少存在以下问题:

用户可以对音频数据的不同音频段设置不同的效果,这样在效果参数切换时间点,会出现前后两个音频帧之间的听觉效果会发生突变,从而使得听觉体验很差。



技术实现要素:

本申请实施例提供了一种音频效果处理的方法、装置、设备及存储介质,能够解决听觉体验差的问题。所述技术方案如下:

一方面,提供了一种音频效果处理的方法,所述方法包括:

确定目标音频中的效果参数切换时间点,并获取所述效果参数切换时间点之前的第一效果参数和所述效果参数切换时间点之后的第二效果参数,基于所述第二效果参数确定过渡效果参数;

基于所述效果参数切换时间点,确定至少一个过渡音频帧;

在时域上将每个过渡音频帧,对所述每个过渡音频帧,获取对应的多个分块,在所述多个分块中选取至少一个目标分块,其中,所述至少一个目标分块为所有过渡音频帧对应的所有分块的一部分;

对于每个目标分块,基于所述目标分块的频段在所述过渡效果参数中对应的参数段,对所述目标分块进行效果处理,对于所述目标分块之外的每个分块,基于所述分块的频段在所述第一效果参数中对应的参数段,对所述分块进行效果处理。

可选的,所述确定目标音频中的效果参数切换时间点,包括:

当接收到效果调节指令时,将接收到所述效果调节指令的时间点确定为目标音频中的效果参数切换时间点;或者,

确定预先存储的目标音频中的效果参数切换时间点。

可选的,所述基于所述效果参数切换时间点,确定至少一个过渡音频帧,包括:

从所述效果参数切换时间点开始向后选取连续的预设数目个过渡音频帧。

可选的,从所述效果参数切换时间点开始向后选取的第n个过渡音频帧中选取的目标分块的数目为n。

可选的,所述过渡音频帧的数目与所述每个过渡音频帧对应的分块的数目相同。

可选的,所述基于所述第二效果参数确定过渡效果参数,包括:

将所述第二效果参数确定为过渡效果参数。

可选的,所述基于所述第二效果参数确定过渡效果参数,包括:

将所述第一效果参数和所述第二效果参数的平均值确定为过渡效果参数。

可选的,所述基于所述目标分块的频段在所述过渡效果参数中对应的参数段,对所述目标分块进行效果处理,包括:

对于所述目标分块的频段中的每个频点,基于所述目标分块中所述频点和所述频点的相邻频点对应的幅度值、所述频点在所述过渡效果参数中对应的参数值、所述相邻频点在第一效果参数中对应的参数值、及所述相邻频点在第二效果参数中对应的参数值,确定所述频点对应的调整后的幅度值。

可选的,所述基于所述目标分块中所述频点和所述频点的相邻频点对应的幅度值、所述频点在所述过渡效果参数中对应的参数值、所述相邻频点在第一效果参数中对应的参数值、及所述相邻频点在第二效果参数中对应的参数值,确定所述频点对应的调整后的幅度值,包括:

若所述频点为音频帧频率范围的最小频点,则基于公式ynk=xk*(a1k+a2k)/2+xk+1*(a1(k+1)-a2(k+1)/4确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值;和/或

若所述频点为音频帧频率范围的最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4,确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk-1为第k个频点的上一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值;和/或

若所述频点不是音频帧频率范围的最小频点或最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4,确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值。

另一方面,提供了一种音频效果处理的装置,所述装置包括:

确定模块,用于确定目标音频中的效果参数切换时间点,并获取所述效果参数切换时间点之前的第一效果参数和所述效果参数切换时间点之后的第二效果参数,基于所述第二效果参数确定过渡效果参数;

确定模块,还用于基于所述效果参数切换时间点,确定至少一个过渡音频帧;

获取模块,用于在时域上将每个过渡音频帧,对所述每个过渡音频帧,获取对应的多个分块,在所述多个分块中选取至少一个目标分块,其中,所述至少一个目标分块为所有过渡音频帧对应的所有分块的一部分;

处理模块,用于对于每个目标分块,基于所述目标分块的频段在所述过渡效果参数中对应的参数段,对所述目标分块进行效果处理,对于所述目标分块之外的每个分块,基于所述分块的频段在所述第一效果参数中对应的参数段,对所述分块进行效果处理。

可选的,所述确定模块,用于:

当接收到效果调节指令时,将接收到所述效果调节指令的时间点确定为目标音频中的效果参数切换时间点;或者,

确定预先存储的目标音频中的效果参数切换时间点。

可选的,所述确定模块,用于:

从所述效果参数切换时间点开始向后选取连续的预设数目个过渡音频帧。

可选的,从所述效果参数切换时间点开始向后选取的第n个过渡音频帧中选取的目标分块的数目为n。

可选的,所述过渡音频帧的数目与所述每个过渡音频帧对应的分块的数目相同。

可选的,所述确定模块,用于:

将所述第二效果参数确定为过渡效果参数。

可选的,所述确定模块,用于:

将所述第一效果参数和所述第二效果参数的平均值确定为过渡效果参数。

可选的,所述处理模块,用于:

对于所述目标分块的频段中的每个频点,基于所述目标分块中所述频点和所述频点的相邻频点对应的幅度值、所述频点在所述过渡效果参数中对应的参数值、所述相邻频点在第一效果参数中对应的参数值、及所述相邻频点在第二效果参数中对应的参数值,确定所述频点对应的调整后的幅度值。

可选的,所述处理模块,用于:

若所述频点为音频帧频率范围的最小频点,则基于公式ynk=xk*(a1k+a2k)/2+xk+1*(a1(k+1)-a2(k+1))/4,确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值;和/或

若所述频点为音频帧频率范围的最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4,确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk-1为第k个频点的上一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值;和/或

若所述频点不是音频帧频率范围的最小频点或最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4,确定所述频点对应的调整后的幅度值,其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值。

再一方面,提供了一种计算机设备,所述计算机设备包含处理器和存储器,所述存储器中存储有指令,所述处理器执行所述指令使得所述计算机设备实现所述音频效果处理的方法。

再一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有指令,计算机设备执行所述指令使得所述计算机设备实现所述音频效果处理的方法。

本申请实施例提供的技术方案带来的有益效果是:

本方案通过基于第二效果参数确定过渡效果参数以及过渡音频帧,再对过渡音频帧进行分块,然后基于过渡效果参数对过渡音频帧的分块进行处理,这样通过过渡音频帧来缓解在效果参数切换时产生的听觉效果突变,从而可以提升了用户的听觉体验。

附图说明

为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的实施环境示意图;

图2是本申请实施例提供的一种音频效果处理的方法流程图;

图3是本申请实施例提供的过渡音频帧的示意图;

图4是本申请实施例提供的一种音频效果处理的装置结构示意图;

图5是本申请实施例提供的终端结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。

本申请提供了一种音频效果处理的方法,该方法可以由终端实现,该终端可以是手机、台式电脑、平板电脑、笔记本电脑、智能穿戴设备等,该终端可以具有收发数据的部件、输出音频的部件、输入音频的部件、滤波器。该终端可以具有播放音频的功能,处理音频的功能,该终端可以安装有音频播放应用程序、音频录制应用程序、音频编辑应用程序。

如图1所示,在终端获取到音频后(该音频可以是一段完整的音频也可以是音频流),终端可以对该音频进行解码,得到解码后的音频。而后,终端可以将解码后的音频输入到滤波器中,进而滤波器可以根据用户的设置对解码后的音频进行效果处理,得到处理后的音频。

图2是本申请实施例提供的一种音频效果处理的的流程图。参见图2,该流程包括:

步骤201、确定目标音频中的效果参数切换时间点,并获取效果参数切换时间点之前的第一效果参数和效果参数切换时间点之后的第二效果参数,基于第二效果参数确定过渡效果参数。

在实施中,首先,本方案在确定目标音频中的效果参数切换时间点时,针对不同场景可以有不同的处理方式:

第一种,当接收到效果调节指令时,将接收到效果调节指令的时间点确定为目标音频中的效果参数切换时间点。

在实施中,当用户使用音频播放应用程序时,用户可以点播一首歌曲,进而服务器可以以音频流的形式向终端发送该歌曲对应的音频(即目标音频),然后,终端对该音频流进行解码并将其输入到滤波器中,进而得到效果处理后的音频流。进行上述处理时,用户可以触发效果调节控件来调节效果,例如,用户触发效果调节控件将播放效果由流行调节至古典,则在用户触发相应控件后,会产生效果调节指令,进而终端可以将终端接收到效果调节指令的时间点确定为目标音频中的效果参数切换时间点。

可选的,当用户使用音频播放应用程序时,用户可以点播一首歌曲,若该歌曲对应的音频存储在终端中,或缓存在终端中,则终端可以直接获取存储或缓存的音频(即目标音频),然后,终端对该音频进行解码并将其输入到滤波器中,进而得到效果处理后的音频。在播放经过效果处理后的音频时,用户可以触发效果调节控件来调节效果,例如,用户触发效果调节控件将播放效果由流行调节至古典,则在用户触发相应控件后,会产生效果调节指令,进而终端可以将终端接收到效果调节指令的时间点确定为目标音频中的效果参数切换时间点。

可选的,当用户使用音频录制应用程序时,用户可以使用音频录制应用程序录制一段音频,在录制过程中用户可以触发效果调节控件来调节效果,例如,用户触发效果调节控件将播放效果由流行调节至古典,则在用户触发相应控件后,会产生效果调节指令,进而终端可以将终端接收到效果调节指令的时间点确定为目标音频中的效果参数切换时间点。

第二种,确定预先存储的目标音频中的效果参数切换时间点。

在实施中,当用户使用音频播放应用程序时,用户可以点播一首歌曲,该歌曲对应的音频可以存储在终端中,或缓存在终端中,相应的终端中可以存储有目标音频中的效果参数切换时间点,进而终端可以直接获取到预先存储的目标音频中的效果参数切换时间点。

可选的,当用户使用音频编辑应用程序时,用户可以通过上述音频编辑应用程序加载目标音频,进而用户可以通过音频编辑应用程序对目标音频的效果进行调节,例如,将音频的前1分钟的效果调节为流行,将音频的后1分钟的效果调节为古典。在对目标音频的编辑完成时,终端可以保存目标音频中的效果参数切换时间点。进而,在播放该目标音频之前,终端可以获取到预先存储的目标音频中的效果参数切换时间点。

其次,在确定目标音频中的效果参数切换时间点之后,终端可以获取效果参数切换时间点之前的第一效果参数和效果参数切换时间点之后的第二效果参数。

例如,在确定目标音频中的效果参数切换时间点之后,终端可以获取效果参数切换时间点之前的“无”效果对应的第一效果参数,以及效果参数切换时间点之后的“流行”效果对应的第二效果参数。

然后,基于第二效果参数确定过渡效果参数,上述过渡效果参数可以有以下几种方式来确定:

第一方式,直接将第二效果参数确定为过渡效果参数。

第二方式,将第一效果参数和第二效果参数的平均值确定为过渡效果参数。

在此需要说明的是,上述过渡效果参数可以是一个向量,其可以对应目标音频中每一个音频帧中的每个频点。

步骤202、基于效果参数切换时间点,确定至少一个过渡音频帧。

在实施中,在经过上述步骤201的处理后,终端可以获取到效果参数切换时间点,然后终端可以从效果参数切换时间点开始向后选取连续的预设数目个音频帧作为过渡音频帧。

步骤203、在时域上将每个过渡音频帧,对每个过渡音频帧,获取对应的多个分块,在多个分块中选取至少一个目标分块。

其中,至少一个目标分块为所有过渡音频帧对应的所有分块的一部分。

在实施中,获取上述过渡音频帧,并将每一个过渡音频帧与前一个过渡音频帧组合在一起,每个过渡音频帧的长度为n,进而生成一个长度为2n的向量,然后,终端可以获取对上述长度为2n的向量的分块。进而得到每个过渡音频帧对应的多个分块。然后将每个过渡音频帧对应的多个分块中的至少一个确定为目标分块。

其中,从效果参数切换时间点开始向后选取的第n个过渡音频帧中选取的目标分块的数目为n。

例如,如图3所示,一个过渡音频帧被划分为3个分块,在第一个过渡音频帧中可以将3个分块中任意一个分块确定为目标分块,在第二个过渡音频帧中可以将3个分块中任意两个分块确定为目标分块,在第三个过渡音频帧中可以将3个分块都确定为目标分块。

在需要说明的是,过渡音频帧的数目与每个过渡音频帧对应的分块的数目相同。

可选的,在进行上述处理之前,终端可以对目标音频中的音频帧以及对应的参数进行分块处理。

在实施中,终端可以获取音频帧的时域数据,然后终端可以根据技术人员的设置将音频帧的时域数据以及对应的参数划分为预设数目个分块,然后通过快速傅里叶逆变换将时域数据的分块转化为频域数据的分块。

然后,终端可以对各个参数的分块进行补零处理,以使参数的长度从n变为2n得到经过补零处理后的参数的分块,并将每一个音频帧的分块与对应的前一个音频帧的分块组合在一起,每个音频帧的长度为n,进而生成一个长度为2n的向量的分块。

其中,上述参数可以是第一效果参数、第二效果参数、以及过渡效果参数。上述参数实际上可以是一个向量。

在此需要说明的是,由于在时域进行处理时,计算量很大,可以采用上述方案在频域对目标音频中的音频帧与参数进行圆周卷积(即对各个频点,逐点与对应的参数相乘)运算处理,即所有音频帧都转化为频域数据来进行计算,可以将算法复杂度由o(n2降至o(n*log(n))。

步骤204、对于每个目标分块,基于目标分块的频段在过渡效果参数中对应的参数段,对目标分块进行效果处理,对于目标分块之外的每个分块,基于分块的频段在第一效果参数中对应的参数段,对分块进行效果处理。

在实施中,在确定了目标分块后,终端可以基于上述步骤201中的两种不同的过渡效果参数确定方式,对目标分块进行以下几种不同的效果处理:

第一种,若上述过渡效果参数是第二效果参数。则对于目标分块的频段中的每个频点,将该频点在第二效果参数中对应的参数值,确定为频点对应的调整后的幅度值。

在实施中,基于公式ynk=xk*a2k,确定频点对应的调整后的幅度值。

其中,公式中的n为音频帧的标识,k为音频帧中每个频点的标识,a2为频点在过渡效果参数中对应的参数值。

例如,对如图3所示的第一个过渡视频帧的目标分块进行处理,该目标分块内包含有32个频点,则基于公式y1k=xk*a2k、每个频点的幅度值、以及该频点在第二效果参数中对应的参数值,计算32个频点的调整后的幅度值。

第二种,若上述过渡效果参数是计算第一效果参数和第二效果参数的平均值而确定的,则对于目标分块的频段中的每个频点,基于目标分块中频点和频点的相邻频点对应的幅度值、频点在过渡效果参数中对应的参数值、相邻频点在第一效果参数中对应的参数值、及相邻频点在第二效果参数中对应的参数值,确定频点对应的调整后的幅度值。

在实施中,终端可以根据频点所在的音频帧频率范围的不同进行不同的处理:

若频点为音频帧频率范围的最小频点,则基于公式ynk=xk*(a1k+a2k)/2+xk+1*(a1(k+1)-a2(k+1))/4,确定频点对应的调整后的幅度值。

其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值。

若频点为音频帧频率范围的最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4,确定频点对应的调整后的幅度值。

其中,xk为第k个频点对应的幅度值,xk-1为第k个频点的上一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值。

若频点不是音频帧频率范围的最小频点或最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4,确定频点对应的调整后的幅度值。

其中,xk为第k个频点对应的幅度值,xk+1为第k个频点的下一个频点对应的幅度值,a1k为第k个频点在第一效果参数中对应的参数值,a2k为第k个频点在第二效果参数中对应的参数值,a1(k+1)为第k个频点的下一个频点在第一效果参数中对应的参数值,a2(k+1)为第k个频点的下一个频点在第二效果参数中对应的参数值,a1(k-1)为第k个频点的上一个频点在第一效果参数中对应的参数值,a2(k-1)为第k个频点的上一个频点在第二效果参数中对应的参数值,ynk为第n个音频帧中第k个频点对应的调整后的幅度值。

在此需要说明的是,为使得各个频点之间相对平滑,本方案增加了调整值(a1(k+1)-a2(k+1))/4、(a1(k-1)-a2(k-1))/4,来考虑到相邻频点之间的影响。

可选的,终端还可以不对过渡音频帧进行分块,直接通过公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4对音频帧进行处理。

例如,在用户使用音频播放应用程序时,用户点播了终端本地存储的音频,终端基于上述步骤201的方法确定过渡效果参数,并基于上述步骤202的方法确定至少一个音频帧。然后终端基于公式,ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4、过渡效果参数、以及至少一个音频帧计算出每个频点对应的调整后的幅度值。

相应的,对目标分块之外的每个分块的处理可以如下:

对于目标分块之外的每个分块,基于分块的频段在第一效果参数中对应的参数段,对分块进行效果处理。

例如,如图3所示,在第一个过渡帧中有两个目标分块之外的分块,第二个过渡帧中有一个目标分块之外的分块,则获取这几个分块中每个分块的频段在第一效果参数中对应的参数段,然后基于公式ynk=xk*a1k对上述每个分块进行处理。

可选的,若为减少计算复杂度对所有音频帧都进行了分块处理,则对目标音频中的效果参数切换时间点之前的每个分块,基于分块的频段在第一效果参数中对应的参数段,对分块进行效果处理。对目标音频中的效果参数切换时间点之前的每个分块,基于分块的频段在第二效果参数中对应的参数段,对分块进行效果处理。

可选的,在每一个过渡音频帧完成上述处理后,终端可以对各个过渡音频帧对应的频域数据进行快速傅里叶逆变换,然后截取并保留向量的后半部分(长度从2n变为n),得到该过渡音频帧经过效果处理后的时域数据。

本方案通过基于第二效果参数确定过渡效果参数以及过渡音频帧,再对过渡音频帧进行分块,然后基于过渡效果参数对过渡音频帧的分块进行处理,这样通过过渡音频帧来缓解在效果参数切换时产生的听觉效果突变,从而可以提升了用户的听觉体验。

上述所有可选技术方案,可以采用任意结合形成本公开的可选实施例,在此不再一一赘述。

本申请实施例提供一种音频效果处理的装置,该装置可以是上述实施例中的第一终端,如图4所示,所述装置包括:

确定模块410,用于确定目标音频中的效果参数切换时间点,并获取所述效果参数切换时间点之前的第一效果参数和所述效果参数切换时间点之后的第二效果参数,基于所述第二效果参数确定过渡效果参数;

确定模块410,还用于基于所述效果参数切换时间点,确定至少一个过渡音频帧;

获取模块420,用于在时域上将每个过渡音频帧,对所述每个过渡音频帧,获取对应的多个分块,在所述多个分块中选取至少一个目标分块,其中,所述至少一个目标分块为所有过渡音频帧对应的所有分块的一部分;

处理模块430,用于对于每个目标分块,基于所述目标分块的频段在所述过渡效果参数中对应的参数段,对所述目标分块进行效果处理,对于所述目标分块之外的每个分块,基于所述分块的频段在所述第一效果参数中对应的参数段,对所述分块进行效果处理。

可选的,所述确定模块410,用于:

当接收到效果调节指令时,将接收到所述效果调节指令的时间点确定为目标音频中的效果参数切换时间点;或者,

确定预先存储的目标音频中的效果参数切换时间点。

可选的,所述确定模块410,用于:

从所述效果参数切换时间点开始向后选取连续的预设数目个过渡音频帧。

可选的,从所述效果参数切换时间点开始向后选取的第n个过渡音频帧中选取的目标分块的数目为n。

可选的,所述过渡音频帧的数目与所述每个过渡音频帧对应的分块的数目相同。

可选的,所述确定模块410,用于:

将所述第二效果参数确定为过渡效果参数。

可选的,所述确定模块410,用于:

将所述第一效果参数和所述第二效果参数的平均值确定为过渡效果参数。

可选的,所述处理模块430,用于:

对于所述目标分块的频段中的每个频点,基于所述目标分块中所述频点和所述频点的相邻频点对应的幅度值、所述频点在所述过渡效果参数中对应的参数值、所述相邻频点在第一效果参数中对应的参数值、及所述相邻频点在第二效果参数中对应的参数值,确定所述频点对应的调整后的幅度值。

可选的,所述处理模块430,用于:

若所述频点为音频帧频率范围的最小频点,则基于公式ynk=xk*(a1k+a2k)/2+xk+1*(a1(k+1)-a2(k+1))/4,确定所述频点对应的调整后的幅度值,其中,所述公式中的n为音频帧的标识,k为音频帧中每个频点的标识,a1为频点在第一效果参数中对应的参数值,a2为频点在过渡效果参数中对应的参数值,x为频点对应的幅度值;

若所述频点为音频帧频率范围的最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4,确定所述频点对应的调整后的幅度值,其中,所述公式中的n为音频帧的标识,k为音频帧中每个频点的标识,a1为频点在第一效果参数中对应的参数值,a2为频点在过渡效果参数中对应的参数值,x为频点对应的幅度值;

若所述频点不是音频帧频率范围的最小频点或最大频点,则基于公式ynk=xk*(a1k+a2k)/2+xk-1*(a1(k-1)-a2(k-1))/4+xk+1*(a1(k+1)-a2(k+1))/4,确定所述频点对应的调整后的幅度值,其中,所述公式中的n为音频帧的标识,k为音频帧中每个频点的标识,a1为频点在第一效果参数中对应的参数值,a2为频点在过渡效果参数中对应的参数值,x为频点对应的幅度值。

本方案通过基于第二效果参数确定过渡效果参数以及过渡音频帧,再对过渡音频帧进行分块,然后基于过渡效果参数对过渡音频帧的分块进行处理,这样通过过渡音频帧来缓解在效果参数切换时产生的听觉效果突变,从而可以提升了用户的听觉体验。

需要说明的是:上述实施例提供的音频效果处理的装置在对音频的效果机型处理时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的音频效果处理的装置与音频效果处理的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。

图5示出了本申请一个示例性实施例提供的终端500的结构框图。该终端可以是上述实施例中的终端,该终端500可以是:智能手机、平板电脑、mp3播放器(movingpictureexpertsgroupaudiolayeriii,动态影像专家压缩标准音频层面3)、mp4(movingpictureexpertsgroupaudiolayeriv,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端500还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。

通常,终端500包括有:处理器501和存储器502。

处理器501可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器501可以采用dsp(digitalsignalprocessing,数字信号处理)、fpga(field-programmablegatearray,现场可编程门阵列)、pla(programmablelogicarray,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器501也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称cpu(centralprocessingunit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器501可以在集成有gpu(graphicsprocessingunit,图像处理器),gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器501还可以包括ai(artificialintelligence,人工智能)处理器,该ai处理器用于处理有关机器学习的计算操作。

存储器502可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器502还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器502中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器501所执行以实现本申请中方法实施例提供的音频效果处理的方法。

在一些实施例中,终端500还可选包括有:外围设备接口503和至少一个外围设备。处理器501、存储器502和外围设备接口503之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口503相连。具体地,外围设备包括:射频电路504、触摸显示屏505、摄像头506、音频电路507、定位组件508和电源509中的至少一种。

外围设备接口503可被用于将i/o(input/output,输入/输出)相关的至少一个外围设备连接到处理器501和存储器502。在一些实施例中,处理器501、存储器502和外围设备接口503被集成在同一芯片或电路板上;在一些其他实施例中,处理器501、存储器502和外围设备接口503中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。

射频电路504用于接收和发射rf(radiofrequency,射频)信号,也称电磁信号。射频电路504通过电磁信号与通信网络以及其他通信设备进行通信。射频电路504将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路504包括:天线系统、rf收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路504可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2g、3g、4g及5g)、无线局域网和/或wifi(wirelessfidelity,无线保真)网络。在一些实施例中,射频电路504还可以包括nfc(nearfieldcommunication,近距离无线通信)有关的电路,本申请对此不加以限定。

显示屏505用于显示ui(userinterface,用户界面)。该ui可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏505是触摸显示屏时,显示屏505还具有采集在显示屏505的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器501进行处理。此时,显示屏505还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏505可以为一个,设置终端500的前面板;在另一些实施例中,显示屏505可以为至少两个,分别设置在终端500的不同表面或呈折叠设计;在再一些实施例中,显示屏505可以是柔性显示屏,设置在终端500的弯曲表面上或折叠面上。甚至,显示屏505还可以设置成非矩形的不规则图形,也即异形屏。显示屏505可以采用lcd(liquidcrystaldisplay,液晶显示屏)、oled(organiclight-emittingdiode,有机发光二极管)等材质制备。

摄像头组件506用于采集图像或视频。可选地,摄像头组件506包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及vr(virtualreality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件506还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。

音频电路507可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器501进行处理,或者输入至射频电路504以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端500的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器501或射频电路504的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路507还可以包括耳机插孔。

定位组件508用于定位终端500的当前地理位置,以实现导航或lbs(locationbasedservice,基于位置的服务)。定位组件508可以是基于美国的gps(globalpositioningsystem,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。

电源509用于为终端500中的各个组件进行供电。电源509可以是交流电、直流电、一次性电池或可充电电池。当电源509包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。

在一些实施例中,终端500还包括有一个或多个传感器510。该一个或多个传感器510包括但不限于:加速度传感器511、陀螺仪传感器512、压力传感器513、指纹传感器514、光学传感器515以及接近传感器516。

加速度传感器511可以检测以终端500建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器511可以用于检测重力加速度在三个坐标轴上的分量。处理器501可以根据加速度传感器511采集的重力加速度信号,控制触摸显示屏505以横向视图或纵向视图进行用户界面的显示。加速度传感器511还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器512可以检测终端500的机体方向及转动角度,陀螺仪传感器512可以与加速度传感器511协同采集用户对终端500的3d动作。处理器501根据陀螺仪传感器512采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变ui)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器513可以设置在终端500的侧边框和/或触摸显示屏505的下层。当压力传感器513设置在终端500的侧边框时,可以检测用户对终端500的握持信号,由处理器501根据压力传感器513采集的握持信号进行左右手识别或快捷操作。当压力传感器513设置在触摸显示屏505的下层时,由处理器501根据用户对触摸显示屏505的压力操作,实现对ui界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器514用于采集用户的指纹,由处理器501根据指纹传感器514采集到的指纹识别用户的身份,或者,由指纹传感器514根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器501授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器514可以被设置终端500的正面、背面或侧面。当终端500上设置有物理按键或厂商logo时,指纹传感器514可以与物理按键或厂商logo集成在一起。

光学传感器515用于采集环境光强度。在一个实施例中,处理器501可以根据光学传感器515采集的环境光强度,控制触摸显示屏505的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏505的显示亮度;当环境光强度较低时,调低触摸显示屏505的显示亮度。在另一个实施例中,处理器501还可以根据光学传感器515采集的环境光强度,动态调整摄像头组件506的拍摄参数。

接近传感器516,也称距离传感器,通常设置在终端500的前面板。接近传感器516用于采集用户与终端500的正面之间的距离。在一个实施例中,当接近传感器516检测到用户与终端500的正面之间的距离逐渐变小时,由处理器501控制触摸显示屏505从亮屏状态切换为息屏状态;当接近传感器516检测到用户与终端500的正面之间的距离逐渐变大时,由处理器501控制触摸显示屏505从息屏状态切换为亮屏状态。

本领域技术人员可以理解,图5中示出的结构并不构成对终端500的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。

在示例性实施例中,还提供了一种计算机可读存储介质,例如包括指令的存储器,上述指令可由终端中的处理器执行以完成上述实施例中音频效果处理的方法。例如,所述计算机可读存储介质可以是只读存储器(read-onlymemory,rom)、随机存取存储器(randomaccessmemory,ram)、cd-rom、磁带、软盘和光数据存储设备等。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。

以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

起点商标作为专业知识产权交易平台,可以帮助大家解决很多问题,如果大家想要了解更多知产交易信息请点击 【在线咨询】或添加微信 【19522093243】与客服一对一沟通,为大家解决相关问题。

此文章来源于网络,如有侵权,请联系删除

tips