知乎发布最新大模型应用“搜索聚合” 即日开启内测
2023-05-28
3月17日电,天眼查App显示,3月17日,腾讯科技(深圳)有限公司申请的“短文本对话方法、装置、设备及存储介质”专利获授权。
摘要显示,该方法包括:获取查询文本;调用基于语言模型的短文本对话模型对查询文本进行预测,得到回复文本;基于语言模型的短文本对话模型中设置有混合注意力层,混合注意力层同时包括自注意力机制和用于监督查询文本的注意力机制;输出回复文本。
该申请通过将S2S框架替换为基于语言模型的短文本对话模型,同时利用该模型中的混合注意力层对查询文本的隐层表示进行监督,使得短文本对话模型既能捕获长短距离依赖,也可以在预测时着重考虑查询文本的信息,能够生成语义上与查询文本密切相关,同时形式上较为丰富的回复文本。
每日头条、业界资讯、热点资讯、八卦爆料,全天跟踪微博播报。各种爆料、内幕、花边、资讯一网打尽。百万互联网粉丝互动参与,TechWeb官方微博期待您的关注。
想在手机上看科技资讯和科技八卦吗?
想第一时间看独家爆料和深度报道吗?
请关注TechWeb官方微信公众帐号:
1.用手机扫左侧二维码;
2.在添加朋友里,搜索关注TechWeb。