本公開涉及人工智能,尤其涉及一種模型血緣關系確定方法、模型血緣關系確定裝置、計算機程序產品與電子設備。
背景技術:
1、隨著人工智能技術的發(fā)展,各類通用大模型、行業(yè)大模型層出不窮。不同的大模型及軟件系統(tǒng)血緣關系沒有明確的標識,難以判斷是否為自研或是基于開源框架二次開發(fā)。從而在進行大模型評測時,難以確定大模型的透明性和可信性。
2、相關技術中,進行模型血緣關系判定時,通過對生成應激數據的觀測比對,工程化、體系化地提取大模型的敏感數據特征,形成測試載荷,并利用測試載荷對大模型展開安全檢測,以便驗證不同大模型之間是否存在血緣關系。這種方式需要對每個大模型進行單獨的特征分析,比較復雜。
3、需要說明的是,在上述背景技術部分公開的信息僅用于加強對本公開的背景的理解,因此可以包括不構成對本領域普通技術人員已知的現有技術的信息。
技術實現思路
1、本公開提供一種模型血緣關系確定方法、模型血緣關系確定裝置、計算機程序產品與電子設備,以至少在一定程度上解決相關技術中模型血緣關系判定較為復雜的問題。
2、根據本公開的第一方面,提供一種模型血緣關系確定方法,所述方法包括:獲取多個評測數據集;將所述多個評測數據集分別輸入多個評測模型,得到各所述評測模型在所述多個評測數據集下的模型評測結果;根據各所述評測模型在所述多個評測數據集下的模型評測結果,確定各所述評測模型在所述多個評測數據集下的評測結果相似度;根據各所述評測模型在所述多個評測數據集下的評測結果相似度,確定各所述評測模型之間的血緣關系。
3、根據本公開的第二方面,提供一種模型血緣關系確定裝置,所述裝置包括:評測結果確定模塊,用于獲取多個評測數據集;將所述多個評測數據集分別輸入多個評測模型,得到各所述評測模型在所述多個評測數據集下的模型評測結果;相似度確定模塊,用于根據各所述評測模型在所述多個評測數據集下的模型評測結果,確定各所述評測模型在所述多個評測數據集下的評測結果相似度;血緣關系確定模塊,用于根據各所述評測模型在所述多個評測數據集下的評測結果相似度,確定各所述評測模型之間的血緣關系。
4、根據本公開的第三方面,提供一種計算機程序產品,包括計算機程序,所述計算機程序被處理器執(zhí)行時實現上述第一方面的模型血緣關系確定方法及其可能的實現方式。
5、根據本公開的第四方面,提供一種電子設備,包括:處理器;以及存儲器,用于存儲所述處理器的可執(zhí)行指令;其中,所述處理器配置為經由執(zhí)行所述可執(zhí)行指令,來執(zhí)行上述第一方面的模型血緣關系確定方法及其可能的實現方式。
6、本公開的技術方案具有以下有益效果:
7、上述模型血緣關系確定過程中,獲取多個評測數據集;將多個評測數據集分別輸入多個評測模型,得到各評測模型在多個評測數據集下的模型評測結果;根據各評測模型在多個評測數據集下的模型評測結果,確定各評測模型在多個評測數據集下的評測結果相似度;根據各評測模型在多個評測數據集下的評測結果相似度,確定各評測模型之間的血緣關系。本公開根據多個評測數據集下不同評測模型的評測結果,對模型的血緣關系進行分析,不僅可以提升模型血緣分析的便捷性和可靠性,還可以助力模型底座選型,確保開發(fā)團隊保護和驗證自身大模型的技術原創(chuàng)性與知識產權合規(guī)性,確保自主掌控力。
1.一種模型血緣關系確定方法,其特征在于,所述方法包括:
2.根據權利要求1所述的方法,其特征在于,所述多個評測數據集包括通用評測數據集以及行業(yè)評測數據集。
3.根據權利要求1所述的方法,其特征在于,所述評測數據集對應的評測項包含多個評測維度,所述將所述多個評測數據集分別輸入多個評測模型,得到各所述評測模型在所述多個評測數據集下的模型評測結果,包括:
4.根據權利要求1所述的方法,其特征在于,所述根據各所述評測模型在所述多個評測數據集下的模型評測結果,確定各所述評測模型在所述多個評測數據集下的評測結果相似度,包括:
5.根據權利要求4所述的方法,其特征在于,所述將各所述評測模型在所述目標評測數據集下的向量組進行相似性判斷,確定各所述評測模型之間在所述目標評測數據集下的向量相似度,包括:
6.根據權利要求1所述的方法,其特征在于,所述根據各所述評測模型在所述多個評測數據集下的評測結果相似度,確定各所述評測模型之間的血緣關系,包括:
7.根據權利要求6所述的方法,其特征在于,所述根據各所述評測模型之間的整體相似度,確定各所述評測模型之間的血緣關系,包括:
8.一種模型血緣關系確定裝置,其特征在于,所述裝置包括:
9.一種計算機程序產品,包括計算機程序,其特征在于,所述計算機程序被處理器執(zhí)行時實現權利要求1至7任一項所述的方法。
10.一種電子設備,其特征在于,包括: