(資料圖片僅供參考)
編程客棧()4月21日 消息:日前,清華智能產(chǎn)業(yè)研究院(AIR)開源輕量版BioMedGPT1.6B。據(jù)悉,BioMedG編程客棧PT-1.6B是一個(gè)參數(shù)為16億的編程客棧生物醫(yī)藥領(lǐng)域輕量級(jí)科研版基礎(chǔ)模型,具有跨模態(tài)與知識(shí)融合的特點(diǎn),可以處理藥物性質(zhì)預(yù)測(cè)、自然語(yǔ)言類、跨模態(tài)等多種任務(wù)。
BioMedGPT-1.6B是清華智能產(chǎn)業(yè)研究院(AIR)團(tuán)隊(duì)正在js做的BioMedGPT的單機(jī)輕量版,后者是一個(gè)適用于生物醫(yī)藥領(lǐng)域研發(fā)的通用大模型。
BioMedGPT-1.6B的開源是為了小試牛刀,同時(shí)讓行業(yè)相關(guān)科研人員有東西可用。
項(xiàng)目特點(diǎn):
BioMedGPT-1.6B是一個(gè)具備多個(gè)輸入Encoder的模型,可以處理分子、蛋白質(zhì)和文獻(xiàn)等多個(gè)模態(tài)的輸入,是首個(gè)將多模態(tài)知識(shí)引入模型的生物醫(yī)藥領(lǐng)域基礎(chǔ)模型。
它可以將不同模態(tài)的輸入進(jìn)行統(tǒng)一表示處理,學(xué)習(xí)到不同模態(tài)之間的關(guān)聯(lián)知識(shí),具有“融會(huì)貫通”的能力。
BioMedGPT-1.6B的開源標(biāo)志著生物醫(yī)藥領(lǐng)域的基礎(chǔ)大模型正在逐漸成形。這個(gè)模型具有跨模態(tài)與知識(shí)融合的特點(diǎn),可以增強(qiáng)模型的泛化能力和可解釋性。
開源地址:https://github.com/BioFM/OpenBioMed
關(guān)鍵詞: