分布式语音的响应方法及相关装置[发明专利]

(12)发明专利申请

(10)申请公布号 CN 112735391 A(43)申请公布日 2021.04.30

(21)申请号 2020115980.4(22)申请日 2020.12.29

(71)申请人 科大讯飞股份有限公司

地址 230088 安徽省合肥市高新开发区望

江西路666号(72)发明人 黄真明　陆春亮　王毅　(74)专利代理机构 广州三环专利商标代理有限

公司 44202

代理人 熊永强(51)Int.Cl.

G10L 15/08(2006.01)G10L 15/32(2013.01)G01S 5/20(2006.01)

权利要求书2页 说明书9页 附图5页

()发明名称

分布式语音的响应方法及相关装置(57)摘要

本申请实施例公开了一种分布式语音的响应方法及相关装置，该方法包括：接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词；若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端。本申请提供的技术方案具有用户体验度高的优点。

CN 112735391 ACN 112735391 A

权　利　要　求　书

1/2页

1.一种分布式语音的响应方法，其特征在于，所述方法包括如下步骤：接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词；

若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端。

2.根据权利要求1所述的方法，其特征在于，所述依据该位置信息、响应时间以及能量信息从拾音终端中选择该语音信号的响应终端具体包括：

构建综合评价集合，所述综合评价集合包括多个等级；分别获取位置信息、响应时间以及能量信息在该多个等级的多个评价值，将多个评价值组成评价矩阵；

依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；

响应时间以及能量信息的权重值。所述权重集合为位置信息、

3.根据权利要求2所述的方法，其特征在于，依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端具体包括：

计算该评价矩阵与该权重集合的乘积得到乘积结果，依据该乘积结果的大小选择该语音信号的响应终端。

4.根据权利要求3所述的方法，其特征在于，所述方法在计算该评价矩阵与该权重集合的乘积得到乘积结果之后，还包括：

计算该乘积结果与预设的系数集合相乘得到决策分数，选择决策分数最高的拾音终端为该语音信号的响应终端；

所述系数集合包括：位置信息、响应时间以及能量信息的系数。5.根据权利要求2所述的方法，其特征在于，获取位置信息具体包括：获取接收端麦克风与拾音终端麦克风之间的距离以及时延，依据该距离、时延以及音速估算出该位置信息。

6.根据权利要求2所述的方法，其特征在于，获取响应时间具体包括：接收拾音终端发送的决策请求包，向拾音终端返回会话标识包；接收拾音终端返回的响应时间，该响应时间为会话标识包接收时间与决策请求包发送时间之间的差值。

7.一种分布式语音的响应装置，其特征在于，所述装置包括：通信单元，用于接收至少一个拾音终端的语音信号；处理单元，用于对所述语音信号进行语音识别确定是否具有唤醒关键词；若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从至少一个拾音终端中选择所述语音信号的响应终端。

8.根据权利要求7所述的装置，其特征在于，所述处理单元，具体用于构建综合评价集合，所述综合评价集合包括多个等级；分别获取位置信息、响应时间以及能量信息在该多等级的多个评价值，将多个评价值组成评价矩阵；依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；

所述权重集合为位置信息、响应时间以及能量信息的权重值。

2

CN 112735391 A

权　利　要　求　书

2/2页

9.一种智能终端，其特征在于，所述智能终端包括：包括：相互耦合的处理器和存储器；其中，所述处理器用于调用所述存储器中存储的计算机程序，以执行权利要求1至6任意一项所述的方法。

10.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1‑6任一项所述的方法。

3

CN 112735391 A

说　明　书

分布式语音的响应方法及相关装置

1/9页

技术领域

[0001]本申请涉及音频技术领域，具体涉及一种分布式语音的响应方法及相关装置。背景技术[0002]智能家居在给人们带来便捷生活的同时，人们的控制习惯逐渐发生改变。语音技术的发展也为控制入口做了一个补充，在抛去了传统遥控器和手机APP之后，通过口令发送控制指令让家居环境达到舒适状态，也成为智能家居的发展方向。[0003]为了提升智慧家庭语音控制的交互自然度，需要解决多物理空间、多语音设备的语音交互难题，即克服跨空间场景联动障碍和多语音设备一呼百应问题。现有技术将检测到最大语音信号的语音接收单元作为语音信号的响应单元。但是此种方案对响应设备具有一定的局限性，无法满足用户对语音响应的要求，影响了用户体验度。发明内容

[0004]本申请实施例提供了一种分布式语音的响应方法及相关装置，以期提高用户体验度。

[0005]第一方面，提供一种分布式语音的响应方法，所述方法包括如下步骤：[0006]接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词；

[0007]若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；

[0008]依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端。

[0009]在一种可选的方案中，所述依据该位置信息、响应时间以及能量信息从拾音终端中选择该语音信号的响应终端具体包括：[0010]构建综合评价集合，所述综合评价集合包括多个等级；[0011]分别获取位置信息、响应时间以及能量信息在该多个等级的多个评价值，将多个评价值组成评价矩阵；

[0012]依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；[0013]所述权重集合为位置信息、响应时间以及能量信息的权重值。[0014]在一种可选的方案中，依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端具体包括：

[0015]计算该评价矩阵与该权重集合的乘积得到乘积结果，依据该乘积结果的大小选择该语音信号的响应终端。

[0016]在一种可选的方案中，所述方法在计算该评价矩阵与该权重集合的乘积得到乘积结果之后，还包括：

[0017]计算该乘积结果与预设的系数集合相乘得到决策分数，选择决策分数最高的拾音

4

CN 112735391 A

说　明　书

2/9页

终端为该语音信号的响应终端；[0018]所述系数集合包括：位置信息、响应时间以及能量信息的系数。[0019]在一种可选的方案中，获取位置信息具体包括：

[0020]获取接收端麦克风与拾音终端麦克风之间的距离以及时延，依据该距离、时延以及音速估算出该位置信息。[0021]在一种可选的方案中，获取响应时间具体包括：[0022]接收拾音终端发送的决策请求包，向拾音终端返回会话标识包；[0023]接收拾音终端返回的响应时间，该响应时间为会话标识包接收时间与决策请求包发送时间之间的差值。[0024]第二方面，提供分布式语音的响应装置，所述装置包括：[0025]通信单元，用于接收至少一个拾音终端的语音信号；[0026]处理单元，用于对所述语音信号进行语音识别确定是否具有唤醒关键词；若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从至少一个拾音终端中选择所述语音信号的响应终端。[0027]在一种可选的方案中，所述处理单元，具体用于构建综合评价集合，所述综合评价集合包括多个等级；分别获取位置信息、响应时间以及能量信息在该多等级的多个评价值，将多个评价值组成评价矩阵；依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；

[0028]所述权重集合为位置信息、响应时间以及能量信息的权重值。[0029]在一种可选的方案中，[0030]处理单元，具体用于计算该评价矩阵与该权重集合的乘积得到乘积结果，依据该乘积结果的大小选择该语音信号的响应终端。[0031]在一种可选的方案中，在一种可选的方案中，[0032]处理单元，还用于计算该乘积结果与预设的系数集合相乘得到决策分数，选择决策分数最高的拾音终端为该语音信号的响应终端；[0033]所述系数集合包括：位置信息、响应时间以及能量信息的系数。[0034]在一种可选的方案中，在一种可选的方案中，[0035]处理单元，具体用于获取接收端麦克风与拾音终端麦克风之间的距离以及时延，依据该距离、时延以及音速估算出该位置信息。[0036]在一种可选的方案中，在一种可选的方案中，[0037]处理单元，具体用于接收拾音终端发送的决策请求包，向拾音终端返回会话标识包；接收拾音终端返回的响应时间，该响应时间为会话标识包接收时间与决策请求包发送时间之间的差值。[0038]第三方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读

其中，上述计算机程序使得计算机执行如存储介质存储用于电子数据交换的计算机程序，

本申请实施例第一方面中所描述的部分或全部步骤。[0039]第四方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一

5

CN 112735391 A

说　明　书

3/9页

个软件安装包。

[0040]可以看出，本申请实施例提供的技术方案接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词，若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端，进而通过多个维度，即通过位置信息、响应时间以及能量信息多个方面确定响应终端，满足用户对语音响应的多元化需求，进而提高用户体验度。附图说明

[0041]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

[0042]图1是本申请实施例一提供的分布式语音的响应方法的流程示意图。[0043]图2是本申请实施例二提供分布式语音的响应方法的流程示意图。[0044]图3为本申请实施例提供的一种分布式语音的响应流程示意图.[0045]图4为本申请实施例的决策系统决策出响应终端的流程示意图。[0046]图5本申请实施例提供的一种分布式语音的响应装置的结构示意图。

具体实施方式

[0047]下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

[0048]本申请实现的技术方案例如智能家居等场合，基于上述智能家居的网络构架可以包括：决策系统以及多个拾音终端，该拾音终端具体可以包括：智能音箱、智能电视、智能手机、智能冰箱能够实现音频采集和反馈的终端，上述决策系统可以为云端决策系统，该云端决策系统可以安装在计算机设备、服务器等等设备内。[0049]实施例一[0050]参阅图1，图1提供了一种分布式语音的响应方法，该方法可以由决策系统执行，该决策系统例如智能手机、平板电脑、个人电脑、服务器、云平台等等，本实施例实现的技术场景例如为智能家居等等场景，以智能家居场景为例，该智能家居场景内具有多个拾音终端，多个拾音终端分别与决策系统通信，上述通信方式包括但不限于，wifi、蓝牙等等短距离通信方式，当然在实际应用中，上述通信方式也可以为移动通信网络，例如LTE、5G等等。多个拾音终端是否参与本申请的技术方案可以由使用者自行选择，如图1所示，该方法包括如下步骤：

[0051]步骤S101、接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词；

[0052]上述步骤S101中的唤醒关键词具体可以为一些呼叫的词，例如，蛋蛋、咪咪等等特

6

CN 112735391 A

说　明　书

4/9页

定的词汇，当然也可以为由一个具有唤醒含义的词，例如，请回复，播放等等，具体的唤醒关键词可以由预配置得到。

[0053]上述对语音进行识别的方式可以通过语音识别方式来确定，例如科大讯飞的语音识别算法来实现，当然还可以通过其他方式来确定。[00]步骤S102、若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；

[0055]步骤S103、依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端。

[0056]本申请实施例一提供的技术方案接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词，若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端，进而通过多个维度，即通过位置信息、响应时间以及能量信息多个方面确定响应终端，满足用户对语音响应的多元化需求，进而提高用户体验度。

[0057]在一种可选的方案中，所述依据该位置信息、响应时间以及能量信息从拾音终端中选择该语音信号的响应终端具体可以包括：[0058]构建综合评价集合，所述综合评价集合包括多个等级；[0059]分别获取位置信息、响应时间以及能量信息在该多个等级的多个评价值，将多个评价值组成评价矩阵；

[0060]依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；[0061]所述权重集合为位置信息、响应时间以及能量信息的权重值。[0062]上述多个等级可以为n个等级，n的取值可以依据实际情况进行选择，例如2、3、4、5。例如n＝2，则确定等级可以为优秀等级和普通等级，若n＝3，则确定等级可以为，良好、中等、差。当然在实际应用中，上述n的取值还可以是其他值。[0063]在一种可选的方案中，上述能量信息的获取方式具体可以包括：

[00]

En为n时刻某语音信号的短时平均能量值，x(m)为m时刻的语音采样值，N为矩形窗的窗长，取100～200固定值。[0066]在一种可选的方案中，获取位置信息具体包括：

[0067]获取接收端麦克风与拾音终端麦克风之间的距离以及时延，依据该距离、时延以及音速估算出该位置信息。其计算的方式具体可以包括：

[0065][0068]

[0069]

其中P为位置信息值，d为接收端麦克风与拾音终端麦克风之间的距离，c为声音速

度，

7

CN 112735391 A[0070][0071]

说　明　书

5/9页

为麦克风之间的时延。

在一种可选的方案中，获取响应时间具体包括：

[0072]接收拾音终端发送的决策请求包，向拾音终端返回会话标识包；[0073]接收拾音终端返回的响应时间，该响应时间＝会话标识包接收时间‑决策请求包发送时间。

[0074]其具体的计算公式如下：[0075]D＝T  公式3resp‑Treq[0076]其中，Treq为决策请求包发送时间，Tresp为会话标识包接收时间。[0077]在一种可选的方案中，上述依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端具体包括：

[0078]计算该评价矩阵与该权重集合的乘积得到乘积结果，依据该乘积结果的大小选择该语音信号的响应终端。

[0079]在一种可选的方案中，所述方法在计算该评价矩阵与该权重集合的乘积得到乘积结果之后，还包括：

[0080]计算该乘积结果与预设的系数集合相乘得到决策分数，选择决策分数最高的拾音终端为该语音信号的响应终端；[0081]所述系数集合包括：位置信息、响应时间以及能量信息的系数。[0082]上述可选的方案中，可以通过预设的系数集合来进行调整，该预设的系统集合可以由厂家自行配置，也可以由决策系统通过配置信息下发该预设的系数集合。[0083]实施例二[0084]参阅图2，图2提供了一种分布式语音的响应方法，该方法可以由决策系统执行，该决策系统例如智能手机、平板电脑、个人电脑、服务器、云平台等等，本实施例实现的技术场景例如为智能家居等等场景，以智能家居场景为例，该智能家居场景内具有多个拾音终端，多个拾音终端分别与决策系统通信，上述通信方式包括但不限于，wifi、蓝牙等等短距离通信方式，当然在实际应用中，上述通信方式也可以为移动通信网络，例如LTE、5G等等。多个拾音终端是否参与本申请的技术方案可以由使用者自行选择，如图2所示，该方法包括如下步骤：

[0085]步骤S201、拾音模块接收到语音信号，由拾音模块识别出唤醒关键词。[0086]步骤S202、分析模块对包含唤醒词的语音信号分析后，解析出声源的能量信息E与位置信息P。

[0087]分析模块对声音能量信息的分析具体可以参见上述公式1的描述，这里不再赘述。分析模块对声源位置信息的分析方法基于TDOA方法计算出声源的角度信息P，具体的计算公式可以参见上述公式2的描述。[0088]步骤S203、拾音设备向决策系统发送决策请求包(客户标识C，声音能量E，声源位置P)。

[00]步骤S204、决策系统检查当前是否有正在激活的会话，如果没有则分配新的会话标识S，记录会话分配时间T，并启动会话超时计时。若当前存在激活的会话且会话已超时，则向拾音终端发送休眠指令，流程结束。若当前存在激活的会话且未超时，则继续后续步骤。

8

CN 112735391 A[0090]

说　明　书

6/9页

步骤S205、决策系统将会话标识包(S)返回给拾音终端。

[0091]步骤S206、拾音终端依据决策请求包与会话标识包到达时间差计算出网络延时D，并将延时上报包(C,S,D)发送给决策系统。

[0092]上述延时D的具体计算方式可以参见上述公式3的描述。[0093]步骤S207、决策系统建立综合评价因素集U：将所有拾音终端的(D,E,P)信息记录到数组U中，若拾音终端没有包含延时信息D则忽略此拾音终端。[0094]步骤S208、建立综合评价评价集V：设定拾音终端的综合评价集合为V＝(v1,v2,v3)。其中v1,v2,v3分别标识良好，中等，差等。[0095]步骤S209、建立单因素模糊评价，获得评价矩阵R。其中X()为D对v1的隶属函数，Y()为E对v2的隶属函数，Z()为P对v3的隶属函数。R11则表示D对于v1的隶属度，依次类推。

[0096]

R1(N)＝X(D,N)；[0098]R2(N)＝Y(E,N)；[0099]R3(N)＝Z(P,N)。[0100]步骤S210、确定因素权向量A为各因素的权重集合：A＝[a1,a2,a3]；建立综合评价模型，得到模糊向量B＝A*R。[0101]步骤S211、计算总得分为F＝B*L,其中L＝[l1,l2,l3]为V中相应因素的等级得分，决策系统选择总得分最高的为响应终端，并通知其他得分低的拾音设备进入休眠状态。[0102]在上述方案中，当会话超时计时时间到达，标记所有未上报延时信息D的拾音终端延时为最大值。并再次通过模糊综合评价法选择最优的拾音设备，作为最终结果。[0103]本申请实施例二提供的技术方案接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词，若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端，进而通过多个维度，即通过位置信息、响应时间以及能量信息多个方面确定响应终端，满足用户对语音响应的多元化需求，进而提高用户体验度。[0104]参阅图3，图3为本申请实施例提供的一种分布式语音的响应流程示意图，如图3所示，该响应流程具体可以包括：[0105]S31、用户说出语音唤醒词。[0106]S32、拾音终端1到拾音终端N被唤醒。[0107]S33、拾音终端1到拾音终端N将唤醒的音频提交到分析系统。[0108]S34、分析系统分析音频后将能量信息与声源位置信息返回到拾音终端。[0109]S35、拾音终端将能量信息与声源位置信息通过网络提交到决策系统，并记录决策系统的回复报文到达时间。[0110]S36、拾音终端通过上述回复报文的返回时间计算与云端系统的延时，并将延时数据上报到决策系统。[0111]S37、决策系统通过模糊综合评价法对各终端做综合评分，综合评分最高的终端为

9

[0097]

CN 112735391 A

说　明　书

7/9页

响应终端，如决策系统决策响应终端为拾音终端1。[0112]S38、决策系统发送唤醒命令到拾音终端1，通知其保持唤醒状态，响应用户的后续语音指令。[0113]S39、决策系统发送休眠命令到其他拾音终端N，通知其进入休眠状态，停止响应用户的后续语音指令。

[0114]上述决策系统决策出响应终端的流程可以如图4所示，具体可以包括：[0115]S41、拾音终端向决策系统发送决策请求。[0116]S42、决策系统分配会话标识，将会话标识发送至拾音终端，若超时，将拾音终端休眠。

[0117]S43、拾音终端进行超时统计，向决策系统延时上报(客户标识、会话标识、延时时长)。

[0118]S44、决策系统响应决策，向拾音终端返回决策结果。[0119]参阅图5，图5提供了一种分布式语音的响应装置，所述装置包括：[0120]通信单元501，用于接收至少一个拾音终端的语音信号；[0121]处理单元502，用于对所述语音信号进行语音识别确定是否具有唤醒关键词；若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从至少一个拾音终端中选择所述语音信号的响应终端。[0122]本申请提供的分布式语音的响应装置，接收至少一个拾音终端的语音信号，对所述语音信号进行识别确定是否具有唤醒关键词，若具有唤醒关键词，则获取拾音终端的位置信息、响应时间以及语音信息的能量信息；依据所述位置信息、响应时间以及能量信息从所述至少一个拾音终端中选择所述语音信号的响应终端，进而通过多个维度，即通过位置信息、响应时间以及能量信息多个方面确定响应终端，满足用户对语音响应的多元化需求，进而提高用户体验度。

[0123]在一种可选的方案中，[0124]处理单元502，具体用于构建综合评价集合，所述综合评价集合包括多个等级；分别获取位置信息、响应时间以及能量信息在该多等级的多个评价值，将多个评价值组成评价矩阵；依据该评价矩阵以及预设的权重集合选择该语音信号的响应终端；[0125]所述权重集合为位置信息、响应时间以及能量信息的权重值。[0126]上述位置信息、响应时间以及能量信息的获取方式可以参见如图1所示实施例中的描述，这里不再赘述。

[0127]在一种可选的方案中，[0128]处理单元502，具体用于计算该评价矩阵与该权重集合的乘积得到乘积结果，依据该乘积结果的大小选择该语音信号的响应终端。[0129]在一种可选的方案中，[0130]处理单元502，还用于计算该乘积结果与预设的系数集合相乘得到决策分数，选择决策分数最高的拾音终端为该语音信号的响应终端；[0131]所述系数集合包括：位置信息、响应时间以及能量信息的系数。[0132]在一种可选的方案中，[0133]处理单元502，具体用于获取位置信息具体包括：获取接收端麦克风与拾音终端麦

10

CN 112735391 A

说　明　书

8/9页

克风之间的距离以及时延，依据该距离、时延以及音速估算出该位置信息。[0134]在一种可选的方案中，[0135]处理单元502，具体用于接收拾音终端发送的决策请求包，向拾音终端返回会话标识包；接收拾音终端返回的响应时间，该响应时间＝会话标识包接收时间‑决策请求包发送时间。

[0136]本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

[0137]本申请实施例还提供一种计算机存储介质，其中，该计算机存储介质存储用于电子数据交换的计算机程序，该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤，上述计算机包括电子设备。[0138]本申请实施例还提供一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包，上述计算机包括电子设备。[0139]需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。

[0140]在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

[0141]在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。

[0142]上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。[0143]另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

[0144]上述集成的单元如果以软件功能单元的形式实现并作为的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或

11

CN 112735391 A

说　明　书

9/9页

者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(ROM，Read‑Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。[0145]本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器(英文：Read‑Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。[0146]以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的。

12

CN 112735391 A

说　明　书　附　图

1/5页

图1

13

CN 112735391 A

说　明　书　附　图

2/5页

图2

14

CN 112735391 A

说　明　书　附　图

3/5页

图3

15

CN 112735391 A

说　明　书　附　图

图4

16

4/5页

CN 112735391 A

说　明　书　附　图

5/5页

图5

17