天眼查App顯示，3月24日，阿里巴巴達(dá)摩院（杭州）科技有限公司申請的“多模態(tài)對話方法、裝置、設(shè)備及存儲介質(zhì)”專利公布。

摘要顯示，該公開通過獲取與同一問題關(guān)聯(lián)的多模態(tài)信息，對多模態(tài)信息進(jìn)行意圖識別，得到意圖信息，并對多模態(tài)信息進(jìn)行槽位識別，得到一個(gè)或多個(gè)槽位值。然后，根據(jù)意圖信息和一個(gè)或多個(gè)槽位值，生成該多模態(tài)信息對應(yīng)的一個(gè)或多個(gè)回復(fù)信息。該申請使得用戶可以通過多種模態(tài)信息對同一問題和該問題針對的目標(biāo)對象進(jìn)行描述，使得人機(jī)對話系統(tǒng)可以從多個(gè)模態(tài)理解同一問題，并生成一個(gè)或多個(gè)回復(fù)信息，如果是多個(gè)回復(fù)信息，則多個(gè)回復(fù)信息的模態(tài)不同，從而實(shí)現(xiàn)了多模態(tài)對話，使得用戶和人機(jī)對話系統(tǒng)之間的對話方式靈活多樣，提高了用戶體驗(yàn)。