(相關資料圖)

3月20日消息，天眼查App顯示，近日，騰訊科技（深圳）有限公司申請的“短文本對話方法、裝置、設備及存儲介質”專利獲授權。

摘要顯示，該方法包括：獲取查詢文本；調用基于語言模型的短文本對話模型對查詢文本進行預測，得到回復文本；基于語言模型的短文本對話模型中設置有混合注意力層，混合注意力層同時包括自注意力機制和用于監督查詢文本的注意力機制；輸出回復文本。該申請通過將S2S框架替換為基于語言模型的短文本對話模型，同時利用該模型中的混合注意力層對查詢文本的隱層表示進行監督，使得短文本對話模型既能捕獲長短距離依賴，也可以在預測時著重考慮查詢文本的信息，能夠生成語義上與查詢文本密切相關，同時形式上較為豐富的回復文本。

關鍵詞：

責任編輯：Rex_20