電話機(jī)器人中，dm控制模塊承擔(dān)對(duì)全部語音通話全過程開展跟蹤。獲得nlu的n-best鑒別結(jié)果后，開展對(duì)話狀態(tài)追蹤（dst），鑒別出客戶表述的user goal及其當(dāng)今所在的狀態(tài)，由此決策（policy）該回到什么回應(yīng)句子。其鍵入為nlu給予的n-best結(jié)果，即特殊do ** in下的好幾個(gè)intent及其各intent下的槽位遍布。intent和slot一同體現(xiàn)了客戶的總體目標(biāo)，dm bot依據(jù)當(dāng)今把握到的信息內(nèi)容決策對(duì)話怎樣開展下來。因而，dm bot事實(shí)上是一個(gè)追蹤與決策的全過程，追蹤指根據(jù)在歷史上的全部信息內(nèi)容動(dòng)態(tài)性調(diào)節(jié)user goal，決策指根據(jù)當(dāng)今追蹤獲得的user goal決策設(shè)備與客戶怎樣互動(dòng)。
對(duì)話狀態(tài)追蹤（DST）DST立即解決nlu鍵入的n-best結(jié)果，導(dǎo)出為當(dāng)今的對(duì)話狀態(tài)（dialog state），可類似了解為user goal。對(duì)話狀態(tài)通常由兩部份構(gòu)成，即communicative function 和 slot-value pairs，在其中 communicative function 表明 query 的種類（如：闡述要求，了解特性，否認(rèn)，挑選疑惑，INFORM這些）而每一個(gè) slot-value pair 則表述一個(gè)限定標(biāo)準(zhǔn)（constraint），也可了解為客戶總體目標(biāo)的一個(gè)構(gòu)成模塊。相匹配到nlu結(jié)果，可類似了解為intent相匹配communicative function，slot對(duì)應(yīng)slot-value pair（嚴(yán)苛而言那么投射不是的）。
電話機(jī)器人的DST是什么模樣的呢？能不能與傳統(tǒng)的的每日任務(wù)機(jī)器人公共呢？下邊根據(jù)上文的事例、以每日任務(wù)機(jī)器人的方法來簡(jiǎn)易表現(xiàn)DST全過程，大家會(huì)見到電話機(jī)器人DST與每日任務(wù)機(jī)器人DST的區(qū)別。
在上面的事例中，nlu給的結(jié)果與DST的相匹配全過程如下所示：
可以看得出以下幾個(gè)方面：
nlu得出的n-best結(jié)果中，DST通常會(huì)挑選一個(gè)實(shí)行（如挑選了ask_telphone，丟掉了praise）同樣的槽位的槽值很有可能會(huì)多次發(fā)生遮蓋（如info槽位）一部分槽位信息內(nèi)容具備高效性（如degree槽位）上邊的事例是運(yùn)用每日任務(wù)機(jī)器人的DST視角剖析電話機(jī)器人的情景，是否覺得略微有些怪怪的呢？如為何一個(gè)槽位的值會(huì)不斷轉(zhuǎn)變，為何槽位的值會(huì)發(fā)生不可以承繼的狀況，為什么有的僅有用意沒有槽位？實(shí)際上，這也恰好是電話機(jī)器人與每日任務(wù)機(jī)器人的區(qū)別。
在前面的內(nèi)容中大家提起過電話機(jī)器人關(guān)鍵可分成要求網(wǎng)絡(luò)嗅探類、數(shù)據(jù)采集類與消息通知類。要求網(wǎng)絡(luò)嗅探類的與每日任務(wù)型機(jī)器人較像，但也只是是類似罷了。實(shí)際上，電話機(jī)器人偏重于數(shù)據(jù)流分析的方式，內(nèi)部的每日任務(wù)具備步驟性、殘片性、高效性的特性，而每日任務(wù)機(jī)器人偏重于總體的方式，內(nèi)部的子每日任務(wù)具備比較大的關(guān)聯(lián)性。假如把電話機(jī)器人的各泛娛樂化步驟拆卸成子每日任務(wù)，則電話機(jī)器人更好像好幾個(gè)獨(dú)輪每日任務(wù)型機(jī)器人的 ** 。因而，DST的關(guān)鍵差別如下所示：
電話機(jī)器人的DST可以重復(fù)使用每日任務(wù)機(jī)器人的DST，但必須留意槽值的高效性（有一些槽位在項(xiàng)目生命周期中合理，有一些槽位僅有獨(dú)輪合理）與槽位界定的非關(guān)聯(lián)性（步驟中間的槽位更好不要界定成同名）電話機(jī)器人更好像好幾個(gè)獨(dú)輪每日任務(wù)機(jī)器人的 ** ，DST全過程相較每日任務(wù)機(jī)器人簡(jiǎn)易一些電話機(jī)器人容許客戶散發(fā)性的提出問題，必須適用特殊的faq種類，因而許多intent是無槽位的，減弱了intent與slot的界限事實(shí)上，當(dāng)今電話機(jī)器人的DST全過程比每日任務(wù)機(jī)器人簡(jiǎn)易一些，關(guān)鍵以模型成馬爾可夫過程為主導(dǎo)，即只保存前一輪的狀態(tài)做為遷移的起止連接點(diǎn)，只關(guān)心前一輪的合理槽位。自然，也存有根據(jù)NBT等實(shí)體模型的DST完成，但實(shí)體模型運(yùn)用遭受了情景與開發(fā)設(shè)計(jì)速率的限定。
2 對(duì)話決策
接到DST的導(dǎo)出后，即覺得早已確立了dialog state，由此做決策（policy），產(chǎn)生最后導(dǎo)出的對(duì)話個(gè)人行為（dialog act），即告知機(jī)器人應(yīng)當(dāng)怎樣做（如反問到客戶問題，回應(yīng)客戶提出問題等）。policy，是依據(jù)上邊講解的相信狀態(tài)來決策的全過程，對(duì)話對(duì)策的導(dǎo)出是一個(gè)系統(tǒng)軟件姿勢(shì)，也是一個(gè)由 communicative function 和 slot-value pairs 構(gòu)成的詞義表明，表明系統(tǒng)軟件要實(shí)行的姿勢(shì)的種類和實(shí)際操作主要參數(shù)?！懊恳淮螞Q策的總體目標(biāo)并不是當(dāng)今姿勢(shì)的對(duì)錯(cuò)，反而是當(dāng)今姿勢(shì)的挑選會(huì)使將來盈利的預(yù)估（expected long-term reward）利潤(rùn)更大化”。
每日任務(wù)型機(jī)器人與閑談型機(jī)器人的policy大多數(shù)運(yùn)用標(biāo)準(zhǔn)或增強(qiáng)學(xué)習(xí)完成。標(biāo)準(zhǔn)即界定了狀態(tài)及其該狀態(tài)下應(yīng)采用的個(gè)人行為，實(shí)質(zhì)上是維護(hù)保養(yǎng)一張狀態(tài)-個(gè)人行為>投射表；增強(qiáng)學(xué)習(xí)即根據(jù)將來盈利利潤(rùn)更大化挑選姿勢(shì)（實(shí)際基本原理請(qǐng)參照技術(shù)專業(yè)的實(shí)例教程），那麼在電話機(jī)器人中呢？
前文提及了電話機(jī)器人的特性與DST通常采用的計(jì)劃方案。在每日任務(wù)偏獨(dú)輪與多樣化的情景下，標(biāo)準(zhǔn)是非常簡(jiǎn)單合理的，關(guān)鍵因素如下所示：
電話機(jī)器人的主動(dòng)權(quán)通常在設(shè)備手上，客戶只必須相互配合回應(yīng)就行，限定了客戶充分發(fā)揮的室內(nèi)空間每日任務(wù)偏泛娛樂化、獨(dú)輪話，每日任務(wù)間聯(lián)系水平算不上高，造成reward無法設(shè)置faq的引進(jìn)在一定水平上填補(bǔ)了客戶隨便充分發(fā)揮的概率自然，并不是說增強(qiáng)學(xué)習(xí)不適宜于電話機(jī)器人。在業(yè)務(wù)流程網(wǎng)絡(luò)嗅探類等各步驟間持續(xù)密切的日常任務(wù)中，增強(qiáng)學(xué)習(xí)或是可以充分發(fā)揮極大的功效的。（如在推銷產(chǎn)品情景下，如何推銷取得成功就是較確立的每日任務(wù)，采用哪種對(duì)策即必須增強(qiáng)學(xué)習(xí)方式科學(xué)研究）
4 總結(jié)
當(dāng)今工業(yè)領(lǐng)域?yàn)榱烁玫刈非笸昝浪俾?，電話機(jī)器人的對(duì)話管理方法與互動(dòng)控制模塊通常設(shè)計(jì)方案的非常簡(jiǎn)單，乃至是一個(gè)全過程的可配備系統(tǒng)軟件，商品只必須依照規(guī)定配備關(guān)鍵節(jié)點(diǎn)就可以構(gòu)建一個(gè)較完善的電話機(jī)器人。因而，DST大多數(shù)選用馬爾可夫過程，policy也通常是明確的狀態(tài)-個(gè)人行為>投射表，擴(kuò)展性是非常好的，可是實(shí)際效果要受到非常大影響。如何把NBT等DST方式和增強(qiáng)學(xué)習(xí)等policy方式更強(qiáng)的加入到電話機(jī)器人這類步驟型體系中，是一個(gè)非常值得科學(xué)研究的問題
