金融界2025年7月19日消息,國家知識產權局信息顯示,阿里巴巴達摩院(杭州)科技有限公司申請一項名爲“模型評估方法、電子設備及計算機可讀存儲介質”的專利,公開號CN120338117A,申請日期爲2025年04月。
專利摘要顯示,本申請公開了一種模型評估方法、電子設備及計算機可讀存儲介質,涉及數據處理、大模型技術領域。該方法包括:獲取推理數據集,其中,所述推理數據集包括:多種不同類型的邏輯推理任務,所述邏輯推理任務的推理過程包括:多個原子步驟,所述多個原子步驟通過對所述邏輯推理任務的中間推理步驟進行分解後得到;基於所述推理數據集對目標語言模型進行推理能力評估,得到評估結果,其中,所述評估結果用於確定所述目標語言模型的深度推理能力。本申請解決了相關技術中通過最終答案的準確性來評估大模型的推理能力,導致對大模型推理能力評估存在侷限,且評估結果的可信度低的技術問題。
天眼查資料顯示,阿里巴巴達摩院(杭州)科技有限公司,成立於2017年,位於杭州市,是一家以從事軟件和信息技術服務業爲主的企業。企業註冊資本30007.409195萬人民幣。通過天眼查大數據分析,阿里巴巴達摩院(杭州)科技有限公司共對外投資了1家企業,參與招投標項目2次,財產線索方面有商標信息62條,專利信息708條,此外企業還擁有行政許可3個。