【技術實現步驟摘要】
本申請涉及大模型技術、自然語言處理領域,具體而言,涉及一種文本處理方法、電子設備、存儲介質和程序產品。
技術介紹
1、語境學習是自然語言處理領域中常常受到關注的問題之一,很多基于生成式大模型的方法,比如問答、思維鏈、搜索增強生成等模型的本質都是語境學習的過程,如何高效的使用語境學習中的示例,以提高大型語言模型對待處理文本進行處理時的準確度,是本領域技術人員的重要關注點之一。
技術實現思路
1、本申請實施例提供了一種文本處理方法、電子設備、存儲介質和程序產品,以至少解決相關技術中對待處理文本進行處理的準確度較差的技術問題。
2、根據本申請實施例的一個方面,提供了一種文本處理方法,包括:獲取待處理文本和多個處理示例,其中,多個處理示例中包含至少一個正確示例和至少一個對比示例,至少一個正確示例包含的正確示例文本和正確處理結果之間具有正向關聯關系,至少一個對比示例包含的對比示例文本和對比處理結果之間具有反向關聯關系;利用至少一個正確示例對待處理文本進行處理,得到第一處理結果的概率分布,并利用至少一個對比示例對待處理文本進行處理,得到第二處理結果的概率分布;基于第一處理結果的概率分布和第二處理結果的概率分布,確定待處理文本的目標處理結果。
3、根據本申請實施例的另一方面,還提供了一種文本處理方法,包括:獲取詢問文本和多個處理示例,其中,多個處理示例中包含至少一個正確示例和至少一個對比示例,至少一個正確示例包含的正確詢問文本和正確回復文本之間具有正向關聯關系,至少一個對
4、根據本申請實施例的另一方面,還提供了一種文本處理方法,包括:響應作用于操作界面上的輸入指令,在操作界面上顯示待處理文本和多個處理示例,其中,多個處理示例中包含至少一個正確示例和至少一個對比示例,至少一個正確示例包含的正確示例文本和正確處理結果之間具有正向關聯關系,至少一個對比示例包含的對比示例文本和對比處理結果之間具有反向關聯關系;響應作用于操作界面上的處理指令,在操作界面上顯示待處理文本的目標處理結果,其中,目標處理結果是基于第一處理結果的概率分布和第二處理結果的概率分布確定的,第一處理結果的概率分布是利用至少一個正確示例對待處理文本進行處理得到的,第二處理結果的概率分布是利用至少一個對比示例對待處理文本進行處理得到的。
5、根據本申請實施例的另一方面,還提供了一種文本處理方法,包括:通過調用第一接口獲取待處理文本和多個處理示例,其中,第一接口包括第一參數,第一參數的參數值包括待處理文本和多個處理示例,多個處理示例中包含至少一個正確示例和至少一個對比示例,至少一個正確示例包含的正確示例文本和正確處理結果之間具有正向關聯關系,至少一個對比示例包含的對比示例文本和對比處理結果之間具有反向關聯關系;利用至少一個正確示例對待處理文本進行處理,得到第一處理結果的概率分布,并利用至少一個對比示例對待處理文本進行處理,得到第二處理結果的概率分布;基于第一處理結果的概率分布和第二處理結果的概率分布,確定待處理文本的目標處理結果;通過調用第二接口輸出目標處理結果,其中,第二接口包括第二參數,第二參數的參數值包括目標處理結果。
6、根據本申請實施例的另一方面,還提供了一種文本處理方法,包括:獲取詢問文本和多個處理示例,其中,多個處理示例中包含至少一個正確示例和至少一個對比示例,至少一個正確示例包含的正確詢問文本和正確回復文本之間具有正向關聯關系,至少一個對比示例包含的對比詢問文本和對比回復文本之間具有反向關聯關系;基于詢問文本與多個處理示例包含的詢問文本之間的相似度,確定多個處理示例的貢獻度,其中,貢獻度用于表征多個處理示例與詢問文本的目標回復文本之間的關聯度;利用多個處理示例對詢問文本進行處理,得到多個處理示例的概率分布;基于多個處理示例的概率分布和貢獻度,確定詢問文本的目標回復文本。
7、根據本申請實施例的另一方面,還提供了一種電子設備,包括:存儲器,存儲有可執行程序;處理器,用于運行程序,其中,程序運行時執行上述任意一項的方法。
8、根據本申請實施例的另一方面,還提供了一種計算機可讀存儲介質,計算機可讀存儲介質包括存儲的可執行程序,其中,在可執行程序運行時控制計算機可讀存儲介質所在設備執行上述任意一項的方法。
9、根據本申請實施例的另一方面,還提供了一種計算機程序產品,包括計算機程序,計算機程序在被處理器執行時實現上述任意一項的方法。
10、在本申請實施例中,采用獲取待處理文本和多個處理示例;利用至少一個正確示例對待處理文本進行處理,得到第一處理結果的概率分布,并利用至少一個對比示例對待處理文本進行處理,得到第二處理結果的概率分布;基于第一處理結果的概率分布和第二處理結果的概率分布,確定待處理文本的目標處理結果的方式,通過利用正確示例和對比示例對待處理文本進行處理,得到第一處理結果的概率分布和第二處理結果的概率分布,以規范大型語言模型對待處理文本進行處理時的方向,使得確定出的目標處理結果更偏向于正確示例,從而提高利用大型語言模型對待處理文本的準確度,進而解決了相關技術中對待處理文本進行處理的準確度較差的技術問題。
11、容易注意到的是,上面的通用描述和后面的詳細描述僅僅是為了對本申請進行舉例和解釋,并不構成對本申請的限定。
本文檔來自技高網...【技術保護點】
1.一種文本處理方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,在所述多個處理示例包含多個正確示例和多個對比示例的情況下,利用所述至少一個正確示例對所述待處理文本進行處理,得到第一處理結果的概率分布,并利用所述至少一個對比示例對所述待處理文本進行處理,得到第二處理結果的概率分布,包括:
3.根據權利要求2所述的方法,其特征在于,對所述多個正確示例進行分組,得到多個正確示例批次,并對所述多個對比示例進行分組,得到多個對比示例批次,包括:
4.根據權利要求2所述的方法,其特征在于,基于所述第一處理結果的概率分布和所述第二處理結果的概率分布,確定所述待處理文本的目標處理結果,包括:
5.根據權利要求1所述的方法,其特征在于,利用所述至少一個正確示例對所述待處理文本進行處理,得到第一處理結果的概率分布,并利用所述至少一個對比示例對所述待處理文本進行處理,得到第二處理結果的概率分布,包括:
6.根據權利要求1所述的方法,其特征在于,基于所述第一處理結果的概率分布和所述第二處理結果的概率分布,確定所述待處理文本的
7.一種文本處理方法,其特征在于,包括:
8.一種文本處理方法,其特征在于,包括:
9.一種文本處理方法,其特征在于,包括:
10.一種文本處理方法,其特征在于,包括:
11.一種電子設備,其特征在于,包括:
12.一種計算機可讀存儲介質,其特征在于,所述計算機可讀存儲介質包括存儲的可執行程序,其中,在所述可執行程序運行時控制所述計算機可讀存儲介質所在設備執行權利要求1至10中任意一項所述的方法。
13.一種計算機程序產品,其特征在于,包括計算機程序,所述計算機程序在被處理器執行時實現根據權利要求1至10中任意一項所述的方法。
...【技術特征摘要】
1.一種文本處理方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,在所述多個處理示例包含多個正確示例和多個對比示例的情況下,利用所述至少一個正確示例對所述待處理文本進行處理,得到第一處理結果的概率分布,并利用所述至少一個對比示例對所述待處理文本進行處理,得到第二處理結果的概率分布,包括:
3.根據權利要求2所述的方法,其特征在于,對所述多個正確示例進行分組,得到多個正確示例批次,并對所述多個對比示例進行分組,得到多個對比示例批次,包括:
4.根據權利要求2所述的方法,其特征在于,基于所述第一處理結果的概率分布和所述第二處理結果的概率分布,確定所述待處理文本的目標處理結果,包括:
5.根據權利要求1所述的方法,其特征在于,利用所述至少一個正確示例對所述待處理文本進行處理,得到第一處理結果的概率分布,并利用所述至少一個對比示例對所述待處理文本進...
【專利技術屬性】
技術研發人員:李星漩,阮春飛,邴立東,
申請(專利權)人:阿里巴巴達摩院杭州科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。