這個(gè)復(fù)合報(bào)文應(yīng)該表述成：recverid，senderid-1，sendertimestamp-1，delay-1；senderid-2，sendertimestamp-2，delay-2…具體操作方法如下：(51)接收端將rtt接收單元的報(bào)文單獨(dú)作為一個(gè)數(shù)據(jù)包周期發(fā)送，rtt接收單元報(bào)文信息里記錄從收到rtt發(fā)送單元報(bào)文到發(fā)送rtt接收單元報(bào)文滯留的時(shí)長(zhǎng)；如果接收端收到的是多個(gè)發(fā)送端的rtt發(fā)送單元報(bào)文信息，一個(gè)senderid對(duì)應(yīng)一個(gè)發(fā)送端，有多個(gè)發(fā)送端，就有多個(gè)滯留時(shí)長(zhǎng)delay，記錄多組rtt接收單元報(bào)文信息并打包發(fā)出；為防止傳輸丟包，每個(gè)周期里rtt接收單元報(bào)文的數(shù)據(jù)包需要連續(xù)多個(gè)重復(fù)發(fā)送。(52)在該數(shù)據(jù)包發(fā)送的路由上，途徑的媒體節(jié)點(diǎn)需要解析rtt接收單元報(bào)文，根據(jù)rtt接收單元報(bào)文里記錄的senderid信息做包拆解，把拆解重組后的包按照senderid的媒體數(shù)據(jù)包來(lái)的路由逆向發(fā)送到上一個(gè)媒體節(jié)點(diǎn)直到發(fā)送端本身；如果該rtt接收單元報(bào)文包含多個(gè)senderid，每經(jīng)過(guò)一個(gè)媒體節(jié)點(diǎn)，該媒體節(jié)點(diǎn)對(duì)應(yīng)的媒體服務(wù)要檢測(cè)和拆解重組這個(gè)數(shù)據(jù)包，拆解重組成包含單個(gè)senderid的rtt接收單元報(bào)文，按照senderid來(lái)選擇路徑發(fā)送回歸屬于它的發(fā)送端，拆解重組是每個(gè)媒體節(jié)點(diǎn)都要做的操作，直到后在senderid對(duì)應(yīng)的發(fā)送端收到rtt接收單元報(bào)文。端到端通信建立在點(diǎn)到點(diǎn)通信的基礎(chǔ)上，是經(jīng)點(diǎn)到點(diǎn)通信更高級(jí)的通信方式，完成應(yīng)用程序（進(jìn)程）之間的通信。保定應(yīng)用層端到端管理
5)中，具體操作方法如下：(51)接收端將rtt接收單元的報(bào)文單獨(dú)作為一個(gè)數(shù)據(jù)包周期發(fā)送，rtt接收單元報(bào)文信息里記錄從收到rtt發(fā)送單元報(bào)文到發(fā)送rtt接收單元報(bào)文滯留的時(shí)長(zhǎng)；(52)在該數(shù)據(jù)包發(fā)送的路由上，途徑的媒體節(jié)點(diǎn)需要解析rtt接收單元報(bào)文，根據(jù)rtt接收單元報(bào)文里記錄的senderid信息做包拆解，把拆解重組后的包按照senderid的媒體數(shù)據(jù)包來(lái)的路由逆向發(fā)送到上一個(gè)媒體節(jié)點(diǎn)直到發(fā)送端本身；(53)rtt發(fā)送單元報(bào)文的發(fā)送端收到rtt接收單元的報(bào)文后，根據(jù)rtt接收單元報(bào)文的senderid和自己匹配的rtt接收單元報(bào)文信息，計(jì)算出端到端的rtt值。作為，在步驟(51)中，如果接收端收到的是多個(gè)發(fā)送端的rtt發(fā)送單元報(bào)文信息，一個(gè)senderid對(duì)應(yīng)一個(gè)發(fā)送端，有多個(gè)發(fā)送端，就有多個(gè)滯留時(shí)長(zhǎng)delay，記錄多組rtt接收單元報(bào)文信息并打包發(fā)出；為防止傳輸丟包，每個(gè)周期里rtt接收單元報(bào)文的數(shù)據(jù)包需要連續(xù)多個(gè)重復(fù)發(fā)送。作為，在步驟(52)中，如果該rtt接收單元報(bào)文包含多個(gè)senderid，每經(jīng)過(guò)一個(gè)媒體節(jié)點(diǎn)，該媒體節(jié)點(diǎn)對(duì)應(yīng)的媒體服務(wù)要檢測(cè)和拆解重組這個(gè)數(shù)據(jù)包，拆解重組成包含單個(gè)senderid的rtt接收單元報(bào)文，按照senderid來(lái)選擇路徑發(fā)送回歸屬于它的發(fā)送端。新疆應(yīng)用層端到端傳輸端到端流程是指以客戶、市場(chǎng)、外部機(jī)構(gòu)及企業(yè)利益相關(guān)者為輸入或輸出點(diǎn)的，一系列連貫、有序的活動(dòng)的組合。
在本申請(qǐng)說(shuō)明書(shū)和所附權(quán)利要求書(shū)中使用的術(shù)語(yǔ)“和/或”是指相關(guān)聯(lián)列出的項(xiàng)中的一個(gè)或多個(gè)的任何組合以及所有可能組合，并且包括這些組合。如在本說(shuō)明書(shū)和所附權(quán)利要求書(shū)中所使用的那樣，術(shù)語(yǔ)“如果”可以依據(jù)上下文被解釋為“當(dāng)...時(shí)”或“一旦”或“響應(yīng)于確定”或“響應(yīng)于檢測(cè)到”。類似地，短語(yǔ)“如果確定”或“如果檢測(cè)到[所描述條件或事件]”可以依據(jù)上下文被解釋為意指“一旦確定”或“響應(yīng)于確定”或“一旦檢測(cè)到[所描述條件或事件]”或“響應(yīng)于檢測(cè)到[所描述條件或事件]”。參見(jiàn)圖1，是本申請(qǐng)實(shí)施例提供的一種識(shí)別方法的示意流程圖，如圖所示該方法可包括：101：采集語(yǔ)音數(shù)據(jù)，將整段語(yǔ)音數(shù)據(jù)進(jìn)行統(tǒng)一歸一化處理后依據(jù)數(shù)據(jù)庫(kù)標(biāo)簽進(jìn)行切分?？梢岳斫獾氖牵握Z(yǔ)音是根據(jù)所收集到的語(yǔ)音數(shù)據(jù)中的語(yǔ)音間隔時(shí)間來(lái)決定的，通過(guò)對(duì)話中的停頓來(lái)實(shí)現(xiàn)語(yǔ)音的斷句，將一段連續(xù)的話作為整段語(yǔ)音，在收集到該語(yǔ)音之后，在整個(gè)語(yǔ)音端上執(zhí)行數(shù)據(jù)的歸一化，歸于的區(qū)間是以0點(diǎn)作為對(duì)稱中心，本實(shí)施例中，歸一化的范圍采用[-1，1]，歸一化前后語(yǔ)音數(shù)值為零處所表達(dá)的物理意義不變，均是無(wú)聲段。切分時(shí)，根據(jù)數(shù)據(jù)庫(kù)標(biāo)簽對(duì)統(tǒng)一歸一化處理的語(yǔ)音進(jìn)行切分。
本申請(qǐng)實(shí)施例第二方面提供了一種基于卷積神經(jīng)網(wǎng)絡(luò)和注意力機(jī)制的端到端語(yǔ)音識(shí)別系統(tǒng)，包括：語(yǔ)音接收單元，用于接收整段語(yǔ)音，并將該段語(yǔ)音歸一化后進(jìn)行切分；頻譜獲取單元，用于將切分的語(yǔ)音數(shù)據(jù)利用傅里葉變換獲取頻譜數(shù)據(jù)；構(gòu)建模型單元，用于將注意力機(jī)制與卷積神經(jīng)網(wǎng)絡(luò)結(jié)合，構(gòu)建完整的語(yǔ)音識(shí)別網(wǎng)絡(luò)模型；訓(xùn)練模型單元，用于利用語(yǔ)音數(shù)據(jù)作為訓(xùn)練內(nèi)容，優(yōu)化模型參數(shù)，將詞錯(cuò)誤率作為優(yōu)化目標(biāo)訓(xùn)練模型。進(jìn)一步地，所述語(yǔ)音接收單元包括：將整段語(yǔ)音的范圍歸一化至以0點(diǎn)為對(duì)稱中心的閾值范圍，其中歸一化前后的整段語(yǔ)音在數(shù)值為零處所表達(dá)的物理意義均是無(wú)聲段。進(jìn)一步地，所述頻譜獲取單元包括：窗函數(shù)處理單元，用于對(duì)所切分得到的語(yǔ)音數(shù)據(jù)利用預(yù)設(shè)的窗函數(shù)進(jìn)行分幀加窗處理；頻譜獲取單元，用于對(duì)窗函數(shù)處理后的數(shù)據(jù)進(jìn)行快速傅里葉變換，且只取一半長(zhǎng)度。進(jìn)一步地，所述構(gòu)建模型單元包括：將注意力機(jī)制引入卷積神經(jīng)網(wǎng)絡(luò)中，注意力機(jī)制通過(guò)兩個(gè)全連接層a和b相乘實(shí)現(xiàn)，其中全連接層b作為注意力權(quán)重，其權(quán)重是a的權(quán)重經(jīng)過(guò)softmax后得到的符合概率分布取值區(qū)間的注意力分配概率分布數(shù)值；語(yǔ)音識(shí)別網(wǎng)絡(luò)模型采用cnn+ctc模型，采用vgg16基本模型架構(gòu)，10層卷積層。端到端原則的基本含義是，網(wǎng)絡(luò)只負(fù)責(zé)為終端提供連接，任何一種智能都應(yīng)該位于終端。
5層池化層，5層全連接層，其中三層全連接層用于實(shí)現(xiàn)注意力機(jī)制，損失函數(shù)采用ctc損失函數(shù)，網(wǎng)絡(luò)優(yōu)化器采用adam優(yōu)化器。第三方面，本申請(qǐng)實(shí)施例提供了一種識(shí)別裝置，包括存儲(chǔ)器和處理器，所述存儲(chǔ)器上存儲(chǔ)有計(jì)算機(jī)可執(zhí)行指令，所述處理器運(yùn)行所述存儲(chǔ)器上的計(jì)算機(jī)可執(zhí)行指令時(shí)實(shí)現(xiàn)方面的方法。第四方面，本申請(qǐng)實(shí)施例提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其上存儲(chǔ)有計(jì)算機(jī)程序，該計(jì)算機(jī)程序被處理器執(zhí)行時(shí)，實(shí)現(xiàn)上述方面的方法。在本申請(qǐng)實(shí)施例中，本發(fā)明的基于卷積神經(jīng)網(wǎng)絡(luò)和注意力機(jī)制的端到端語(yǔ)音識(shí)別系統(tǒng)，通過(guò)將注意力機(jī)制融合卷積神經(jīng)網(wǎng)絡(luò)中，并通過(guò)使用ctc損失函數(shù)構(gòu)建完整的語(yǔ)音識(shí)別網(wǎng)絡(luò)模型，實(shí)現(xiàn)深度學(xué)習(xí)，從原始語(yǔ)音數(shù)據(jù)中提取語(yǔ)音的語(yǔ)譜圖作為cnn的輸入，以提高語(yǔ)音的性能，減少了人工提取特征帶來(lái)的信息損失，具有良好的應(yīng)用前景。附圖說(shuō)明為了更清楚地說(shuō)明本申請(qǐng)實(shí)施例或現(xiàn)有技術(shù)中的技術(shù)方案，下面將對(duì)實(shí)施例或現(xiàn)有技術(shù)描述中所需要使用的附圖作簡(jiǎn)單地介紹，顯而易見(jiàn)地，下面描述中的附圖是本申請(qǐng)的一些實(shí)施例，對(duì)于本領(lǐng)域普通技術(shù)人員來(lái)講，在不付出創(chuàng)造性勞動(dòng)的前提下，還可以根據(jù)這些附圖獲得其他的附圖。當(dāng)“端到端”兩端的端點(diǎn)拉得越長(zhǎng)的時(shí)候，整個(gè)鏈條能夠帶來(lái)的優(yōu)化空間也就越大。張家口應(yīng)用層端到端解決方案
端到端就是上游和下游之間沒(méi)有繁雜的溝通連接過(guò)程，直接實(shí)現(xiàn)信息和物料的交流和傳遞。保定應(yīng)用層端到端管理
除以標(biāo)準(zhǔn)的詞序列中詞的總個(gè)數(shù)的百分比，即為wer。計(jì)算公式如下：其中，s為替換的個(gè)數(shù)，d為刪除的個(gè)數(shù)，i為插入的個(gè)數(shù)，n為漢字總數(shù)。通過(guò)上述測(cè)評(píng)，不斷的修正整個(gè)模型的內(nèi)容，以實(shí)現(xiàn)模型的理想輸出結(jié)果。具體訓(xùn)練過(guò)程中，每訓(xùn)練200次，就在驗(yàn)證集上進(jìn)行一個(gè)驗(yàn)證，并記錄下驗(yàn)證集的wer，終將結(jié)果統(tǒng)計(jì)成如圖3所示的在驗(yàn)證集中，隨著訓(xùn)練次數(shù)steps的疊加，整體wer終收斂至％，終在測(cè)試集中獲得了wer為％，綜上所述本發(fā)明的基于卷積神經(jīng)網(wǎng)絡(luò)和注意力機(jī)制的端到端語(yǔ)音識(shí)別系統(tǒng)，通過(guò)將注意力機(jī)制融合卷積神經(jīng)網(wǎng)絡(luò)中，并通過(guò)使用ctc損失函數(shù)構(gòu)建完整的語(yǔ)音識(shí)別網(wǎng)絡(luò)模型，實(shí)現(xiàn)深度學(xué)習(xí)，從原始語(yǔ)音數(shù)據(jù)中提取語(yǔ)音的語(yǔ)譜圖作為cnn的輸入，以提高語(yǔ)音的性能，減少了人工提取特征帶來(lái)的信息損失，具有良好的應(yīng)用前景。本申請(qǐng)實(shí)施例還提供一種基于卷積神經(jīng)網(wǎng)絡(luò)和注意力機(jī)制的端到端語(yǔ)音識(shí)別系統(tǒng)，該系統(tǒng)用于執(zhí)行前述任一項(xiàng)上述。具體地，參見(jiàn)圖4，圖4是本申請(qǐng)實(shí)施例提供的一種定位裝置的示意框圖。本實(shí)施例的裝置包括：語(yǔ)音接收單元310、頻譜獲取單元320、構(gòu)建模型單元330、訓(xùn)練模型單元340。語(yǔ)音接收單元310，用于接收整段語(yǔ)音，并將該段語(yǔ)音歸一化后進(jìn)行切分。頻譜獲取單元320。保定應(yīng)用層端到端管理
首匯信息技術(shù)河北有限公司主營(yíng)品牌有中臺(tái)系統(tǒng)，發(fā)展規(guī)模團(tuán)隊(duì)不斷壯大，該公司服務(wù)型的公司。公司致力于為客戶提供安全、質(zhì)量有保證的良好產(chǎn)品及服務(wù)，是一家有限責(zé)任公司企業(yè)。公司始終堅(jiān)持客戶需求優(yōu)先的原則，致力于提供高質(zhì)量的信息化中臺(tái)系統(tǒng)規(guī)劃，中臺(tái)ERP服務(wù)平臺(tái)。首匯信息技術(shù)順應(yīng)時(shí)代發(fā)展和市場(chǎng)需求，通過(guò)**技術(shù)，力圖保證高規(guī)格高質(zhì)量的信息化中臺(tái)系統(tǒng)規(guī)劃，中臺(tái)ERP服務(wù)平臺(tái)。