證券之星訊息,根據企查查資料顯示京東方A(000725)新獲得一項發明專利授權,專利名為“語言模型的訓練方法及應用方法”,專利申請號為CN202110719988.7,授權日為2024年2月2日。
專利摘要:本申請實施例提供一種語言模型的訓練方法及應用方法,訓練方法包括:獲取第一語料庫、第二語料庫和詞塊訓練結果;對第一語料庫和第二語料庫中的詞塊進行詞頻排序匹配;根據匹配結果,將詞塊訓練結果對映至第一語料庫;在預訓練模型中,對第一語料庫中詞塊採用經對映的詞塊訓練結果進行初始化;將第一語料庫輸入預訓練模型後進行具體任務訓練,生成語言模型;其中,預訓練模型為BERT模型,詞塊訓練結果為第二語料庫經BERT模型訓練後的詞塊向量。在該訓練方法中,第一語料庫借用第二預料庫已經訓練好的詞塊訓練結果,對BERT模型進行初始化,使第一語料庫無需依賴大量資料集,即可獲得較好的訓練效果,使其能夠更容易地形成語言模型。
今年以來京東方A新獲得專利授權322個,較去年同期增加了27.78%。結合公司2023年中報財務資料,2023上半年公司在研發方面投入了52.67億元,同比減1.77%。
資料來源:企查查
以上內容由證券之星根據公開資訊整理,由演算法生成,與本站立場無關。證券之星力求但不保證該資訊(包括但不限於文字、影片、音訊、資料及圖表)全部或者部分內容的的準確性、完整性、有效性、及時性等,如存在問題請聯絡我們。本文為資料整理,不對您構成任何投資建議,投資有風險,請謹慎決策。