(資料圖)
近日,北京智源人工智能研究院大模型算法、模型及工具開源項(xiàng)目FlagAI與浪潮AIStation智能業(yè)務(wù)創(chuàng)新生產(chǎn)平臺(tái)完成兼容性互相認(rèn)證,將為各行業(yè)用戶提供本地化的大模型快速訓(xùn)練與微調(diào)能力?;贏IStation平臺(tái)進(jìn)行本地化部署的智源研究院FlagAI一站式大模型工具,能夠幫助用戶更快速靈活地獲取本地AI算力,集群化調(diào)度訓(xùn)練數(shù)據(jù),降低大模型開發(fā)和應(yīng)用門檻,提高大模型開發(fā)效率。
FlagAI是元腦生態(tài)伙伴北京智源人工智能研究院推出的一站式、高質(zhì)量開源項(xiàng)目,集成全球各種主流大模型算法技術(shù),以及多種大模型并行處理和訓(xùn)練加速技術(shù),支持高效訓(xùn)練和微調(diào)。FlagAI涵蓋多個(gè)領(lǐng)域明星模型,如語言大模型OPT、T5,視覺大模型ViT、Swin Transformer,多模態(tài)大模型CLIP等,具備一鍵安裝、多場(chǎng)景應(yīng)用、豐富的實(shí)例與教程、訓(xùn)練環(huán)境切換方便等特點(diǎn)。
本次測(cè)試完成了FlagAI文本分類、圖像分類、圖像文字匹配等訓(xùn)練功能在浪潮AIStation平臺(tái)上的驗(yàn)證。測(cè)試結(jié)果表明,F(xiàn)lagAI在浪潮AIStation上運(yùn)行穩(wěn)定、性能表現(xiàn)優(yōu)異,滿足雙方兼容性認(rèn)證的各項(xiàng)標(biāo)準(zhǔn)。該方案可以幫助用戶在大規(guī)模計(jì)算集群內(nèi)高效調(diào)度計(jì)算資源,并通過數(shù)據(jù)緩存加速機(jī)制保障本地模型與訓(xùn)練數(shù)據(jù)的高效調(diào)度,同時(shí)快速配置FlagAI開發(fā)與訓(xùn)練環(huán)境,分配分布式計(jì)算資源,管理訓(xùn)練數(shù)據(jù),進(jìn)一步提升FlagAI在多用戶大規(guī)模使用場(chǎng)景下的使用效率和訓(xùn)練性能,從而低門檻、高效率地構(gòu)建和訓(xùn)練大模型,加速在大模型技術(shù)方面的創(chuàng)新生產(chǎn)。
目前,該聯(lián)合方案已在醫(yī)療行業(yè)場(chǎng)景落地,通過本地化部署、聯(lián)合技術(shù)驗(yàn)證,幫助用戶解決醫(yī)療影像分割建模、小數(shù)據(jù)場(chǎng)景模型微調(diào)建模等問題,支持疑難雜癥對(duì)應(yīng)模型開發(fā),助力醫(yī)生提升讀片速度。(馬嘉悅)