必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心成立可信大模型研究中心
近日,必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心正式成立“可信大模型研究中心”,致力于研究和開發(fā)安全可信賴的人工智能大模型技術(shù)。研究中心重點(diǎn)圍繞大模型的可信技術(shù)問(wèn)題開展研究,主要覆蓋幻覺(jué)消除、可控生成、模型可解釋性、魯棒性與可靠性、數(shù)據(jù)隱私與安全、自主可控基礎(chǔ)設(shè)施以及模型可信性評(píng)估等方面,以提升大模型的真實(shí)性、安全性、公平性、魯棒性和隱私性等指標(biāo),實(shí)現(xiàn)安全可靠、自主可控的人工智能技術(shù)發(fā)展。
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心近年來(lái)圍繞“可信軟件”進(jìn)行了學(xué)科布局,在區(qū)塊鏈、軟件可靠性等“可信軟件”領(lǐng)域產(chǎn)出了眾多的成果,獲得了國(guó)內(nèi)外學(xué)術(shù)界的高度認(rèn)可。在國(guó)內(nèi)外大模型技術(shù)快速迭代、大模型應(yīng)用暴增的背景下,研究團(tuán)隊(duì)高度關(guān)注大模型的可信問(wèn)題。“可信大模型研究中心”的成立,標(biāo)志著必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心在推動(dòng)可信軟件研究發(fā)展方面邁出了又一重要步伐。
近年來(lái),全球人工智能大模型技術(shù)迅猛發(fā)展,已成為科技和產(chǎn)業(yè)加速發(fā)展的重要驅(qū)動(dòng)力。我國(guó)在《政府工作報(bào)告》及各地方政策中,對(duì)人工智能大模型的發(fā)展給予了高度重視。
人工智能大模型技術(shù)為通用人工智能的實(shí)現(xiàn)提供了新的可能性,顯著提升了人工智能處理復(fù)雜任務(wù)的能力。然而,當(dāng)前技術(shù)在幻覺(jué)、可靠性、安全性、數(shù)據(jù)隱私等方面仍存在局限,這些問(wèn)題將成為制約我國(guó)大模型應(yīng)用快速發(fā)展的瓶頸。
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心可信大模型研究中心的成立,旨在解決這些技術(shù)挑戰(zhàn),為垂直領(lǐng)域大模型提供可信技術(shù)支持,并研發(fā)自主可控的“可信大模型底座”。同時(shí),研究中心將以前沿應(yīng)用推動(dòng)人才培養(yǎng),為社會(huì)培育一批大模型可信技術(shù)人才,以助力我國(guó)大模型領(lǐng)域的發(fā)展。
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心已在大模型研發(fā)領(lǐng)域取得了顯著成果:
(1)金融大模型——智鹿
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心與招聯(lián)數(shù)字金融聯(lián)合研發(fā)的消費(fèi)金融垂直領(lǐng)域首個(gè)130億參數(shù)開源大模型“智鹿”,在C-Eval和CMMLU權(quán)威榜單中名列前茅,分別排名TOP20、排名TOP10。該模型通過(guò)自我進(jìn)化的可信數(shù)據(jù)蒸餾和人類價(jià)值觀對(duì)齊等方法,提升了模型的可控性和內(nèi)容安全性,極大提高了文本標(biāo)注與生成的效能(百倍),節(jié)約了時(shí)間成本(近80%)。
▲C-Eval和CMMLU權(quán)威榜單
(2)中醫(yī)大模型——仲思
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心聯(lián)合招聯(lián)數(shù)字金融、必贏3003no1線路檢測(cè)中心第五附屬醫(yī)院、廣州中醫(yī)藥大學(xué)深圳醫(yī)院(福田)共同研發(fā)的中醫(yī)大模型,擁有340億參數(shù),并在超過(guò)1000萬(wàn)條高質(zhì)量指令數(shù)據(jù)上進(jìn)行了微調(diào)。該模型在中醫(yī)執(zhí)業(yè)資格考試中取得了平均80分的優(yōu)異成績(jī),超過(guò)了多個(gè)主流中醫(yī)大模型。
為了進(jìn)一步提高模型的可靠性和減少幻覺(jué)現(xiàn)象,團(tuán)隊(duì)構(gòu)建了包含18萬(wàn)多個(gè)實(shí)體和160多萬(wàn)個(gè)關(guān)系的中醫(yī)藥知識(shí)圖譜。在此基礎(chǔ)上,團(tuán)隊(duì)開發(fā)了中醫(yī)大模型仲思問(wèn)診小程序,以推動(dòng)中醫(yī)大模型的創(chuàng)新落地應(yīng)用。團(tuán)隊(duì)致力于將先進(jìn)的人工智能技術(shù)與傳統(tǒng)中醫(yī)藥相結(jié)合,打造更加智能、高效的中醫(yī)服務(wù)平臺(tái),助力中醫(yī)藥事業(yè)的創(chuàng)新與進(jìn)步。
▲中醫(yī)大模型仲思問(wèn)診小程序
(3)大模型Infra方向
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心在大模型Infra方向也取得了顯著的研究成果,與華為、百川智能等多家知名企業(yè)建立了緊密的合作關(guān)系。
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心與華為合作研發(fā)了低顯存占用的大模型流水線并行訓(xùn)練系統(tǒng),顯存占用峰值可降低50%,吞吐量提升15%以上;同時(shí)還合作研發(fā)基于統(tǒng)一內(nèi)存的MoE長(zhǎng)序列推理框架,最高可降低超 90% 的顯存需求,推理吞吐量提升20%。與百川智能合作研發(fā)“網(wǎng)-算-存”高效協(xié)同的大模型推理加速技術(shù),可降低大語(yǔ)言模型20%以上的推理成本。
必贏3003no1線路檢測(cè)中心必贏3003no1線路檢測(cè)中心可信大模型研究中心將為各行各業(yè)提供深度的大模型技術(shù)賦能,歡迎社會(huì)各界與研究中心合作,共同推動(dòng)我國(guó)人工智能新質(zhì)生產(chǎn)力的發(fā)展。
對(duì)于有意合作的機(jī)構(gòu)或個(gè)人,研究中心提供開放的交流平臺(tái),期待與您共同探索人工智能的未來(lái)。
研究中心郵箱:trustedgpt@mail.sysu.edu.cn