智慧家庭人工智能語音服務(wù)通用技術(shù)規(guī)范目 次前言 II范圍 1規(guī)范性引用文件 1術(shù)語和定義 1縮略語 2語音服務(wù)的組成及能力等級(jí)劃分 3環(huán)境要求 3基本要求 4測(cè)試方法 10附錄A（規(guī)范性）語音測(cè)試集錄音質(zhì)量要求 15附錄B（規(guī)范性）測(cè)試用設(shè)備要求 16I智慧家庭人工智能語音服務(wù)通用技術(shù)規(guī)范范圍本文件適用于智慧家庭人工智能語音服務(wù)的建設(shè)、測(cè)試和評(píng)價(jià)。規(guī)范性引用文件（包括所有的修改單適用于本文件。GB3096—2008聲環(huán)境質(zhì)量標(biāo)準(zhǔn)GB/T21023—2007中文語音識(shí)別系統(tǒng)通用技術(shù)規(guī)范GB/T21024—2007中文語音合成系統(tǒng)通用技術(shù)規(guī)范GB/T22239—2019信息安全技術(shù)網(wǎng)絡(luò)安全等級(jí)保護(hù)基本要求GB/T36464.1—2020信息技術(shù)智能語音交互系統(tǒng)第1部分：通用規(guī)范GB/T36464.2—2018信息技術(shù)智能語音交互系統(tǒng)第2部分：智能家居術(shù)語和定義GB/T21023—2007、GB/T21024—2007、GB/T36464.1—2020、GB/T36464.2—2018界定的以及下列術(shù)語和定義適用于本文件。語音服務(wù)voiceservice人機(jī)之間通過自然語言對(duì)話來獲取信息的服務(wù)。語音采集voiceacquisition通過傳聲器或麥克風(fēng)陣列等拾音設(shè)備對(duì)語音進(jìn)行采集。語音識(shí)別speechrecognition將人類的聲音信號(hào)轉(zhuǎn)化為文字或指令的過程。[來源：GB/T21023—2007，3.1]語義理解semanticunderstanding使功能單元理解人說話的意圖。[來源：GB/T36464.1—2020，3.11]1語音合成speechsynthesis通過機(jī)械的、電子的方法合成人類語言的過程。[來源：GB/T21024—2007，3.1]端點(diǎn)檢測(cè)voiceactivitydetection一種用于分析、判斷連續(xù)音頻流中有效起始點(diǎn)和結(jié)束點(diǎn)的語音處理技術(shù)。[來源：GB/T36464.1—2020，3.22]智能語音終端artificialintelligencevoiceterminal可接收用戶的語音，使得用戶可以獲取在線音視頻等內(nèi)容，或可通過語音進(jìn)行控制的設(shè)備。噪聲noise的聲音信號(hào)。[來源：GB/T36464.1—2020，3.27]等效聲級(jí)equivalentcontinuousA-weightedsoundpressurelevel個(gè)聲級(jí)來表示該段時(shí)間的噪聲大小。平均意見得分meanopinionscore語音質(zhì)量的一種主觀度量。[來源：GB/T36464.2—2018，3.26]語音喚醒speechwakeup；voicetrigger續(xù)語音識(shí)別等其他處理狀態(tài)的過程。[來源：GB/T36464.2—2018，3.13]媒資mediaassets媒體單位生產(chǎn)的文字、圖片、音視頻等數(shù)據(jù)。媒資庫(kù)mediapool存儲(chǔ)媒資的數(shù)據(jù)庫(kù)。縮略語下列縮略語適用于本文件。PCM：脈沖編碼調(diào)制（PulseCodeModulation）MOS：平均意見得分（MeanOpinionScore）2語音服務(wù)的組成及能力等級(jí)劃分語音服務(wù)的組成由語音采集與識(shí)別、語義理解、語音合成與播放、語音技能四個(gè)部分組成。語音服務(wù)能力等級(jí)劃分語音服務(wù)能力根據(jù)成熟度劃分為五個(gè)等級(jí)，見表1。表1語音服務(wù)能力等級(jí)語音服務(wù)能力等級(jí)定義主體語音采集與識(shí)別語義理解語音合成與播放語音技能Level5語義深度理解與智能互動(dòng)端點(diǎn)檢測(cè)上下文及多場(chǎng)景語義理解與智能終端控制智能翻譯多級(jí)互動(dòng)Level4語義理解與語音互動(dòng)語義理解自然合成（多語種、多發(fā)音人）應(yīng)用喚醒、欄目喚起、內(nèi)容搜索Level3語音深度識(shí)別與自然合成——Level2語音識(shí)別與機(jī)器合成語音識(shí)別—機(jī)器合成—Level1語音采集與播放語音采集—語音播放—環(huán)境要求自然環(huán)境智能語音終端主要在家庭環(huán)境下使用，在表2所示自然環(huán)境條件下應(yīng)正常工作。表2自然環(huán)境要求溫度℃相對(duì)濕度大氣壓力KPa0～4010%～90%無凝結(jié)86～106網(wǎng)絡(luò)環(huán)境智能語音終端或與之相連的智能設(shè)備應(yīng)支持無線或有線網(wǎng)絡(luò)接入互聯(lián)網(wǎng)，網(wǎng)絡(luò)接入速度應(yīng)不低于128kbit/s。噪聲環(huán)境智能語音終端主要在家庭環(huán)境下使用，家庭噪聲環(huán)境具體要求按照GB3096—2008第4章中0、1、2類聲環(huán)境功能區(qū)的規(guī)定執(zhí)行。3基本要求語音采集與識(shí)別語音采集能力的拾音設(shè)備對(duì)語音、連續(xù)語音進(jìn)行單聲道或多聲道的采集。語音采集應(yīng)滿足以下要求：8kHz16kHz，16bitPCMOpusSpeex30s60s注：Opus是有損音頻的一種編碼格式；Speex是一套針對(duì)語音音頻的壓縮格式。端點(diǎn)檢測(cè)和主觀停止。語音識(shí)別應(yīng)滿足以下要求：支持家庭場(chǎng)景下關(guān)鍵詞語音識(shí)別能力，如影視、音樂、醫(yī)療、教育等；支持簡(jiǎn)單中英文混合識(shí)別；支持?jǐn)?shù)字、電話號(hào)碼；支持普通話、帶有福建口音的普通話；宜支持福建省內(nèi)主流方言，如閩南語、客家語；3表3語音識(shí)別句識(shí)別率要求聲環(huán)境功能區(qū)類別環(huán)境噪聲等效聲級(jí)dB（A）句識(shí)別率%0類晝間50，夜間40≥901類晝間55，夜間45≥852類晝間60，夜間50≥80句識(shí)別率計(jì)算方法按公式(1)。

N=×100% (1)Nsi式中：Psr （%）；Nsr Nsi 4語義理解應(yīng)滿足以下要求：支持簡(jiǎn)稱、別名、代碼、數(shù)字的理解；具有用戶表達(dá)存在錯(cuò)字、缺字、模糊時(shí)的容錯(cuò)理解能力；支持多輪、全雙工對(duì)話的人機(jī)交互方式；4表4語義理解等級(jí)表語義理解等級(jí)場(chǎng)景語義理解正確率%0類影視，電視直播，節(jié)目回看≥901類音樂，醫(yī)療，購(gòu)物，教育≥85語義理解正確率計(jì)算方法按公式(2)。

NRss=×100% (2)N式中：Rss ——語義理解正確率，單位為百分?jǐn)?shù)（%）；Nss ——操作意圖及語義要素均被正確判斷的次數(shù)N ——用戶輸入被正確識(shí)別出文本信息的總次數(shù)語音播放與合成語音播放60dB。語音合成應(yīng)滿足以下要求：支持在線或離線方式合成近似人類的語音；支持普通話和英語，宜支持福建省內(nèi)主流方言，如閩南語、客家語；支持中英文數(shù)字等各種混合音，宜支持多音色合成和個(gè)性化合成；MOS4，MOS5。表5MOS量化分值分值主觀測(cè)聽效果5非常接近播音員真人發(fā)聲，達(dá)到以假亂真的程度，總體聽感很好，清晰、流暢。4發(fā)音清晰、可懂，總體聽感好、流暢，聽測(cè)人愿意接受（半小時(shí)左右不覺疲勞），沒有明顯韻律錯(cuò)誤。3基本可以聽懂，但在語氣節(jié)奏處理上問題較多，音節(jié)之間拼接不流暢感較重，聽測(cè)人不太愿意接受，有明顯的疲勞感。2語音吐字不清晰，字詞之間有較為嚴(yán)重的頓挫感，體驗(yàn)性不好，但不影響正常理解。5表5MOS量化分值（續(xù)）分值主觀測(cè)聽效果1發(fā)音不清晰，機(jī)器音質(zhì)，聽不懂，只能表達(dá)斷續(xù)、個(gè)別的語音信息，猜測(cè)語意都很困難，不能接受。注：參考GB/T36464.1—2020中A.8.3的表A.1，結(jié)合家庭環(huán)境要求，對(duì)主觀測(cè)聽效果作更詳細(xì)描述。語音喚醒夜間喚醒具備語音喚醒功能的智能語音終端在夜間的喚醒率應(yīng)滿足表6要求。表6夜間不同噪聲環(huán)境下的喚醒率要求聲環(huán)境功能區(qū)類別夜間環(huán)境噪聲等效聲級(jí)dB（A）發(fā)聲大小dB喚醒率要求0類40＜55不作要求≥553m優(yōu)于95%1類45＜60不作要求≥601m優(yōu)于95%3m優(yōu)于90%5m優(yōu)于85%2類50＜65不作要求≥653m優(yōu)于85%夜間喚醒率計(jì)算方法按公式(3)。NRnw=×100% (3)Nw式中：Rnw ——夜間喚醒率，單位為百分?jǐn)?shù)（%）；Nsw ——成功喚醒次數(shù)；Nw ——語音喚醒操作次數(shù)。晝間喚醒具備語音喚醒功能的智能語音終端在晝間的喚醒率應(yīng)滿足表7要求。表7晝間不同噪聲環(huán)境下的喚醒率要求聲環(huán)境功能區(qū)類別晝間環(huán)境噪聲等效聲級(jí)dB（A）發(fā)聲大小dB喚醒率要求0類50＜65不作要求≥653m優(yōu)于90%6表7晝間不同噪聲環(huán)境下的喚醒率要求（續(xù)）聲環(huán)境功能區(qū)類別晝間環(huán)境噪聲等效聲級(jí)dB（A）發(fā)聲大小dB喚醒率要求1類55＜70不作要求≥701m優(yōu)于90%3m優(yōu)于85%5m優(yōu)于80%2類60＜75不作要求≥753m優(yōu)于80%晝間喚醒率計(jì)算方法按公式(4)。NRdw=×100% (4)Nw式中：Rdw Nsw Nw 誤喚醒次數(shù)具備語音喚醒功能的智能語音終端誤喚醒次數(shù)應(yīng)滿足表8要求。表8誤喚醒次數(shù)要求環(huán)境噪音（S）dB（A）12h內(nèi)誤喚醒次數(shù)S≤450次45＜S≤55不作要求55＜S≤65低于2次S＞65不作要求語音技能通用技能響應(yīng)時(shí)間應(yīng)時(shí)間應(yīng)小于或等于2s。響應(yīng)時(shí)間計(jì)算方法按公式(5)。式中：Tack——響應(yīng)時(shí)間，單位為秒（s）；

=tr—te (5)7tr ——給出結(jié)果時(shí)刻；te ——語音輸入結(jié)束的時(shí)刻。注1如語音交互系統(tǒng)支持識(shí)別結(jié)果分多次返回，te注2如智能語音終端具備語音喚醒功能，tr注3如智能語音終端具備顯示屏幕，tr交互反饋應(yīng)滿足以下要求：支持查詢類技能通過語音播報(bào)加信息展示的形式向用戶反饋；支持媒資檢索類技能通過語音播報(bào)加搜索結(jié)果展示的形式向用戶反饋；支持技能處理遇到異常情況時(shí)通過語音或者文本展示的形式向用戶反饋。反饋語設(shè)計(jì)宜滿足以下要求：準(zhǔn)確：實(shí)事求是，清楚明了傳達(dá)信息，避免歧義；簡(jiǎn)潔：用最少的話傳達(dá)最重要的信息；自然：口語化不生硬，容易理解，有停頓，符合正常說話節(jié)奏；明晰：明確、具體完成任務(wù)，并傳達(dá)理解程度；親和：遇到出錯(cuò)情況，主動(dòng)推薦并引導(dǎo)用戶。應(yīng)用喚起單說指令喚起應(yīng)支持按應(yīng)用名稱喚起應(yīng)用。指定句式喚起應(yīng)支持按固定的句式進(jìn)行應(yīng)用的喚起，句式為：前綴詞+應(yīng)用名稱+后綴詞。前綴詞至少包括：打開、啟動(dòng)、開啟、我要玩、我想玩、我要用。后綴詞至少包括：應(yīng)用、軟件。關(guān)聯(lián)語義喚起配的應(yīng)用喚起。涉屏語音服務(wù)技能媒資管理應(yīng)支持媒資的欄目管理、索引建立、審核、發(fā)布功能。媒資信息應(yīng)滿足以下要求：影視媒資信息包括：名稱、主演、上映時(shí)間、類型，宜包括季集、導(dǎo)演、簡(jiǎn)介、評(píng)分、熱度等信息；游戲媒資信息包括：名稱、類型，宜包括簡(jiǎn)介、評(píng)分、上架時(shí)間、熱度等信息；8應(yīng)用媒資信息包括：名稱、類型，宜包括簡(jiǎn)介、評(píng)分、上架時(shí)間、熱度等信息。媒資檢索標(biāo)簽檢索應(yīng)滿足以下要求：122容錯(cuò)處理果。關(guān)聯(lián)推薦宜支持基于內(nèi)容及用戶喜好的關(guān)聯(lián)推薦檢索。息。頁(yè)面操控頁(yè)面基礎(chǔ)操控應(yīng)滿足以下要求：支持通過語音控制，實(shí)現(xiàn)返回上級(jí)頁(yè)面和退出當(dāng)前應(yīng)用等基本操作；支持通過語音喚起當(dāng)前頁(yè)面上所列欄目。搜索頁(yè)操控搜索頁(yè)應(yīng)支持語音的翻頁(yè)及選擇指令，具體指令見表9。表9搜索頁(yè)操控指令指令名稱指令英文標(biāo)識(shí)指令參數(shù)跳到下一頁(yè)NEXT—跳到上一頁(yè)P(yáng)REV—跳到指定頁(yè)INDEXindex頁(yè)號(hào)（整數(shù)值型，負(fù)數(shù)表示倒數(shù)）選擇SELECTrow：第X行（整數(shù)值型，負(fù)數(shù)表示倒數(shù)）index：第X個(gè)（整數(shù)值型，負(fù)數(shù)表示倒數(shù)）播放頁(yè)面操控播放頁(yè)面應(yīng)支持語音的播控操作指令，播控操作相關(guān)指令見表10。9表10播放操控指令指令名稱指令英文標(biāo)識(shí)指令參數(shù)播放PLAY—暫停PAUSE—繼續(xù)播放RESUME—重頭播放RESTART—跳到指定位置SEEKposition位置（整數(shù)值型，單位：秒）快進(jìn)指定時(shí)間FORWARDoffset偏移（整數(shù)值型，單位：秒）后退指定時(shí)間BACKWARDoffset偏移（整數(shù)值型，單位：秒）涉屏終端控制應(yīng)支持對(duì)帶屏類智能語音終端設(shè)備的基礎(chǔ)控制指令，如音量控制、打開設(shè)置頁(yè)面、關(guān)機(jī)。服務(wù)安全基礎(chǔ)服務(wù)安全按照GB/T22239—2019中8.1.2規(guī)定的執(zhí)行。隱私保護(hù)麥克風(fēng)隱私保護(hù)一鍵禁麥。攝像頭隱私保護(hù)擋開關(guān)。測(cè)試方法測(cè)試準(zhǔn)備測(cè)試語料文本測(cè)試集應(yīng)滿足以下要求：覆蓋影視、音樂、醫(yī)療、教育等領(lǐng)域；包含智能語音終端的喚醒詞、操控指令、多音字、頻道別名等常用性語句。語音測(cè)試集應(yīng)滿足以下要求：10501:1，9～1220～5060～751:4:1；8.1.1.1發(fā)音人以普通話或帶有福建口音的普通話錄制；宜包含福建省內(nèi)主流方言，如閩南語、客家語；A測(cè)試用設(shè)備應(yīng)符合附錄B的規(guī)定。測(cè)試環(huán)境被測(cè)語音交互系統(tǒng)部署被測(cè)語音交互系統(tǒng)，測(cè)試用回放設(shè)備通過對(duì)話方式對(duì)其進(jìn)行控制和交互。被測(cè)系統(tǒng)網(wǎng)絡(luò)環(huán)境應(yīng)滿足6.2的要求，保持穩(wěn)定的連通狀態(tài)。遠(yuǎn)近場(chǎng)拾音距離近場(chǎng)拾音距離為1m，遠(yuǎn)場(chǎng)拾音距離為3m。測(cè)試場(chǎng)景求噪音保持穩(wěn)定且不包含命令詞相關(guān)的聲音，具體要求見表11。表11測(cè)試場(chǎng)景要求環(huán)境噪音場(chǎng)景測(cè)試語音聲壓級(jí)（S）dB環(huán)境噪音聲壓級(jí)（V）dB（A）夜間2類S≥65V≤50晝間2類S≥75V≤60誤喚醒測(cè)試場(chǎng)景60＜S≤7560＜V≤75測(cè)試方法語音采集測(cè)試數(shù)據(jù)，查看數(shù)據(jù)的編碼格式和采樣率。通過上述測(cè)試方法驗(yàn)證是否滿足7.1.1的要求。11端點(diǎn)檢測(cè)測(cè)試意圖，進(jìn)行多個(gè)指令操作。通過上述測(cè)試方法驗(yàn)證是否滿足7.1.2的要求。語音識(shí)別測(cè)試預(yù)期結(jié)果進(jìn)行比對(duì)，計(jì)算出句識(shí)別率。通過上述測(cè)試方法驗(yàn)證是否滿足7.1.3的要求。語義理解測(cè)試解正確率。通過上述測(cè)試方法驗(yàn)證是否滿足7.2的要求。語音播放測(cè)試在晝間20.1m貝值，記錄分貝數(shù)據(jù)。通過上述測(cè)試方法驗(yàn)證是否滿足7.3.1的要求。語音合成測(cè)試選取10個(gè)體驗(yàn)人員，男女各5人，年齡在20～505給出MOS均結(jié)果。通過上述測(cè)試方法驗(yàn)證是否滿足7.3.2要求。語音喚醒測(cè)試喚醒率測(cè)試按8.2.4的測(cè)試場(chǎng)景要求，將被測(cè)設(shè)備調(diào)至待命狀態(tài)，使用測(cè)試用回放設(shè)備在遠(yuǎn)場(chǎng)距離播放喚醒語音測(cè)試集不少于50條，統(tǒng)計(jì)岀正確響應(yīng)次數(shù)，計(jì)算出喚醒正確率。15從前后左右四個(gè)方位播放喚醒詞各50次。通過上述測(cè)試方法驗(yàn)證是否滿足7.4.1、7.4.2的要求。誤喚醒測(cè)試按8.2.4誤喚醒測(cè)試場(chǎng)景要求，將測(cè)試用回放設(shè)備連續(xù)播放12h，統(tǒng)計(jì)被測(cè)設(shè)備給出的響應(yīng)次數(shù)。通過上述測(cè)試方法驗(yàn)證是否滿足7.4.3的要求。語音技能測(cè)試響應(yīng)時(shí)間測(cè)試12按8.3.3語音識(shí)別測(cè)試方法，從拾音設(shè)備拾音結(jié)束到語音交互系統(tǒng)顯示正確的反饋，計(jì)為一個(gè)交互響應(yīng)時(shí)間。對(duì)被測(cè)設(shè)備的基本交互時(shí)間進(jìn)行統(tǒng)計(jì)、分析，給出在線響應(yīng)時(shí)間。通過上述測(cè)試方法驗(yàn)證是否滿足7.5.1.1的要求。交互反饋測(cè)試在被測(cè)設(shè)備支持的業(yè)務(wù)場(chǎng)景范圍內(nèi)，選擇不少于5個(gè)業(yè)務(wù)場(chǎng)景，由測(cè)試人員發(fā)出操控指令，記錄被測(cè)設(shè)備交互反饋情況。通過上述測(cè)試方法驗(yàn)證是否滿足7.5.1.2和7.5.1.3的要求。應(yīng)用喚起測(cè)試測(cè)試人員對(duì)被測(cè)設(shè)備說，“我要玩游戲”、“我要聽音樂”。可以啟動(dòng)被測(cè)設(shè)備上已安裝的游戲、音樂應(yīng)用，即為通過。通過上述測(cè)試方法驗(yàn)證是否滿足7.5.2的要求。涉屏語音服務(wù)技能測(cè)試媒資管理和媒資檢索測(cè)試101個(gè)或任意2簽發(fā)出搜索指令，記錄檢索結(jié)果情況。通過上述測(cè)試方法驗(yàn)證是否滿足7.6.1、7.6.2.1和7.6.2.2的要求。關(guān)聯(lián)推薦測(cè)試戶搜索：“熊出沒狂野大陸”，被測(cè)設(shè)備無對(duì)應(yīng)媒資時(shí)，給出“熊出沒”相關(guān)聯(lián)的影片推薦。通過上述測(cè)試方法驗(yàn)證是否滿足7.6.2.3的要求。頁(yè)面操控測(cè)試通過上述測(cè)試方法驗(yàn)證是否滿足7.6.3的要求。涉屏終端控制測(cè)試測(cè)試人員通過語音進(jìn)行被測(cè)設(shè)備的控制，如：增大音量、減小音量、打開設(shè)置頁(yè)面、關(guān)機(jī)。通過上述測(cè)試方法驗(yàn)證是否滿足7.6.4的要求。服務(wù)安全測(cè)試基礎(chǔ)服務(wù)安全要求測(cè)試按照GB/T22239—2019中8.1.2的規(guī)定執(zhí)行。13麥克風(fēng)關(guān)閉測(cè)試測(cè)試人員在離被測(cè)設(shè)備正面1m處用喚醒詞