恒生电子股份有限公司一种基于大模型的推理方法、装置及程序产品专利获授权(G06N5/04专利快讯)

天眼查App显示,2025年8月8日,「一种基于大模型的推理方法、装置及程序产品」专利正式进入专利权的授权阶段。申请人为恒生电子股份有限公司,该项计算;推算;计数专利涉及大模型推理技术的应用场景。据专利信息显示,该技术通过一次请求的一个提示词,在不人为构建多个提示词的前提下,利用温度系数的递减策略,伴随候选序列的生成过程,使得每个候选序列中的各个词元,依次从追求多样性逐渐过渡至追求精确度,从而在提高处理效率,减少模型开销的同时,保证了最终输出的答复文本的准确性。发明人为陈奕名、李昀昊、李定邦、林金曙。本申请提出一种基于大模型的推理方法、装置及程序产品,通过一次请求的一个提示词,在不人为构建多个提示词的前提下,利用温度系数的递减策略,伴随候选序列的生成过程,使得每个候选序列中的各个词元,依次从追求多样性逐渐过度至追求精确度。进而在构建答复文本时,将自信度较低的候选序列剔除,保留具有更高自信度的候选序列进行答复文本的生成。从而在提高处理效率,减少模型开销的同时,保证了最终输出的答复文本的准确性。

免责声明:本文内容由开放的智能模型自动生成,仅供参考。

最新文章
Copyright © DoNews 2000-2025 All Rights Reserved
蜀ICP备2024059877号-1