【新智元導(dǎo)讀】這次，昇思大模型平臺(tái)迎來(lái)了全新升級(jí)，不僅推出了大模型產(chǎn)業(yè)專區(qū)，而且還開(kāi)放了AI畫(huà)廊社交平臺(tái)，讓開(kāi)發(fā)者找到創(chuàng)作樂(lè)趣。
自2019年開(kāi)始，超大規(guī)模預(yù)訓(xùn)練模型逐漸涌出，到2020年發(fā)展到白熾化階段。
1750億參數(shù)的GPT-3大模型的發(fā)布，大模型參數(shù)規(guī)模實(shí)現(xiàn)了從億級(jí)到千億級(jí)的突破。
2022年ChatGPT的橫空出世再次點(diǎn)燃了人工智能火炬，國(guó)內(nèi)外大廠開(kāi)始紛紛發(fā)布自家大模型。
可以說(shuō)，大模型邁出了通用人工智能的第一步，作為未來(lái)社會(huì)技術(shù)突破與變革的關(guān)鍵力量，將深刻影響未來(lái)產(chǎn)業(yè)格局 。
然而，模型復(fù)雜度高，參數(shù)量大，對(duì)算力提出了極大的需求，基于目前業(yè)界已有主流框架進(jìn)行大模型的開(kāi)發(fā)，并不能很好地適應(yīng)產(chǎn)業(yè)需求。
為此，昇思MindSpore作為新時(shí)代的AI框架，在設(shè)計(jì)之初就充分考慮大模型開(kāi)發(fā)時(shí)可能會(huì)遇到的問(wèn)題，為大模型創(chuàng)新開(kāi)發(fā)提供了完備的硬核技術(shù)。
通過(guò)軟硬件協(xié)同優(yōu)化，實(shí)現(xiàn)一行代碼即可完成模型自動(dòng)切分、分布式并行計(jì)算，將大模型開(kāi)發(fā)并行代碼量降低 80%、系統(tǒng)調(diào)優(yōu)時(shí)間下降 60%。
此外，它還有極致的全局內(nèi)存復(fù)用能力，512卡就可以訓(xùn)練10 萬(wàn)億參數(shù)大模型，極大降低大模型訓(xùn)練成本;極簡(jiǎn)的斷點(diǎn)續(xù)訓(xùn)能力，開(kāi)發(fā)者無(wú)需從頭開(kāi)始，千億參數(shù)模型在分鐘級(jí)就可無(wú)損恢復(fù)。
昇思MindSpore充分發(fā)揮原生支持大模型訓(xùn)練的能力，降低大模型創(chuàng)新開(kāi)發(fā)門檻。
基于昇思MindSpore AI框架，中科院自動(dòng)化所、武漢大學(xué)等科研單位先后發(fā)布業(yè)界首個(gè)圖文音三模態(tài)大模型「紫東.太初」，全球首個(gè)智能遙感框架「武漢.LuoJia」、業(yè)界首個(gè)基于擴(kuò)散模型和最大開(kāi)源中文數(shù)據(jù)集生成的中文生圖大模型「悟空.畫(huà)畫(huà)」等多個(gè)大模型。
為了讓AI大模型更好地普惠大眾，昇思社區(qū)打造了首個(gè)基于國(guó)產(chǎn)AI算力和框架、服務(wù)全球開(kāi)發(fā)者的一站式大模型平臺(tái)，將大模型的能力開(kāi)放給開(kāi)發(fā)者。
昇思大模型平臺(tái)：https://xihe.mindspore.cn/
平臺(tái)是集模型選型、創(chuàng)意分享、在線體驗(yàn)為一體的一站式AI學(xué)習(xí)與實(shí)踐平臺(tái)，具備AI實(shí)驗(yàn)室，模型庫(kù)，大模型在線體驗(yàn)與微調(diào)，數(shù)據(jù)集等多個(gè)模塊，提供超強(qiáng)免費(fèi)算力，經(jīng)典易用的樣例，優(yōu)質(zhì)精美的在線學(xué)習(xí)課程資源，類型多樣的AI大賽和內(nèi)容有趣的社區(qū)活動(dòng)等。
近期，社區(qū)為了給企業(yè)開(kāi)發(fā)者更好的體驗(yàn)，平臺(tái)在各個(gè)模塊也進(jìn)行了升級(jí)：
在產(chǎn)業(yè)布局上，打造大模型行業(yè)專區(qū)，包括電力專區(qū)、工業(yè)專區(qū)等，面向企業(yè)開(kāi)發(fā)者提供從模型訓(xùn)練、推理到部署的AI應(yīng)用開(kāi)發(fā)專區(qū)。
在全球化布局上，聯(lián)手Hugging Face推出基于昇騰AI的首個(gè)基于國(guó)產(chǎn)AI算力的Space體驗(yàn)專區(qū)，開(kāi)發(fā)者可以在Hugging Face上體驗(yàn)所有昇思大模型推理服務(wù)。
在新一代AIGC社交上，開(kāi)放了業(yè)界首個(gè)基于AI畫(huà)廊的技術(shù)內(nèi)容社交能力。
在平臺(tái)易用性方面，支持Jupyter Notebook在線編程，新增MindSpore Transformers模塊。另外，平臺(tái)還推出了課程模塊，覆蓋了CV、NLP以及大模型開(kāi)發(fā)多個(gè)領(lǐng)域，讓開(kāi)發(fā)者可以在平臺(tái)從0到1的學(xué)習(xí)與實(shí)踐AI項(xiàng)目。
開(kāi)放基于AI畫(huà)廊技術(shù)社交平臺(tái)，讓AI「大眾化」
昇思大模型平臺(tái)對(duì)悟空.畫(huà)畫(huà)大模型體驗(yàn)功能進(jìn)行全新升級(jí)!開(kāi)放了業(yè)界首個(gè)基于AI畫(huà)廊的技術(shù)內(nèi)容社交能力，讓AI技術(shù)從「專業(yè)化」走向「大眾化」。悟空.畫(huà)畫(huà)是基于Diffusion結(jié)構(gòu)開(kāi)發(fā)的中文文生圖大模型，訓(xùn)練時(shí)使用了中文億級(jí)文圖數(shù)據(jù)，借助悟空中文視覺(jué)-語(yǔ)言預(yù)訓(xùn)練模型的判別能力實(shí)現(xiàn)更好的中文圖文匹配。悟空.畫(huà)畫(huà)有著強(qiáng)大的文生圖能力，能夠識(shí)別各類場(chǎng)景描述與繪畫(huà)風(fēng)格。開(kāi)發(fā)者們?cè)谶M(jìn)行文生圖的過(guò)程中，可以通過(guò)簡(jiǎn)單的提示，選擇自己喜歡的風(fēng)格，就能夠創(chuàng)作出優(yōu)秀、精美的畫(huà)作，讓每個(gè)開(kāi)發(fā)者使用便捷，并且容易上手。與此同時(shí)，對(duì)于生成的精美畫(huà)作，開(kāi)發(fā)者還可以通過(guò)全新的「AI畫(huà)廊」，發(fā)布自己的創(chuàng)意作品。最重要的是，當(dāng)你看到了他人驚艷的作品，還能點(diǎn)贊、分享和收藏。不僅增加了你與其他開(kāi)發(fā)者的互動(dòng)，而且還豐富了AI社交娛樂(lè)性，從中找到了AI帶來(lái)的樂(lè)趣。
在線體驗(yàn)入口：https://xihe.mindspore.cn/modelzoo/wukong/album平臺(tái)使用AIGC內(nèi)容創(chuàng)作生成技術(shù)連接人與人之間的關(guān)系，讓AI生成圖片走入了人們的日常。根據(jù)用戶的喜好，為用戶插上想象力的翅膀，通過(guò)算法快速實(shí)現(xiàn)用戶的想法，結(jié)合收藏，分享等行為，進(jìn)一步豐富用戶在內(nèi)容方向的互動(dòng)體驗(yàn)。平臺(tái)利用生成式AI為用戶構(gòu)建了一個(gè)創(chuàng)造性的新世界，在這里，我們幫助用戶實(shí)現(xiàn)他們天馬行空的想法，收獲擁有同樣想法的朋友的認(rèn)可。當(dāng)然，除了豐富用戶的社交，生成式AI的作用遠(yuǎn)不止于此，在某些情況下它可以解鎖更好、更快、更便宜的創(chuàng)作，產(chǎn)生巨大的勞動(dòng)生產(chǎn)率和經(jīng)濟(jì)價(jià)值。對(duì)于企業(yè)用戶而言，除了可以隨時(shí)發(fā)現(xiàn)平臺(tái)上富有創(chuàng)意的作品，也可以根據(jù)企業(yè)自身的需求和輸入，自動(dòng)生成風(fēng)格多樣的內(nèi)容，幫助企業(yè)高效優(yōu)化設(shè)計(jì)方案。
金融 數(shù)字 科技感 #風(fēng)格：高清
基于悟空.畫(huà)畫(huà)生成圖片制作的金融畫(huà)報(bào)
在線體驗(yàn)悟空.畫(huà)畫(huà)：https://xihe.mindspore.cn/modelzoo/wukong構(gòu)建大模型產(chǎn)業(yè)專區(qū)，助力企業(yè)數(shù)智化轉(zhuǎn)型
平臺(tái)規(guī)劃建設(shè)業(yè)界首個(gè)大模型產(chǎn)業(yè)專區(qū)，旨在面向企業(yè)開(kāi)發(fā)者提供從模型訓(xùn)練、推理到部署的AI應(yīng)用開(kāi)發(fā)專區(qū)。目前，已上線人文、電力、醫(yī)療、工業(yè)四個(gè)場(chǎng)景企業(yè)案例。后續(xù)平臺(tái)將上線相關(guān)案例精選模型，如國(guó)潮AIGC模型、電力領(lǐng)域大模型等，幫助企業(yè)在平臺(tái)上部署大模型，建立行業(yè)樣例標(biāo)桿。
結(jié)合已有模塊和能力，平臺(tái)將為企業(yè)打造一套完整的平臺(tái)解決方案：- 在開(kāi)發(fā)方面：聯(lián)合行業(yè)客戶開(kāi)放企業(yè)模型相關(guān)項(xiàng)目代碼到AI實(shí)驗(yàn)室，開(kāi)放相關(guān)業(yè)務(wù)模型到模型庫(kù)，供開(kāi)發(fā)者查詢/下載/本地使用，開(kāi)發(fā)者可基于該代碼在線體驗(yàn)?zāi)Ｐ陀?xùn)練，評(píng)估和推理，并進(jìn)行二次優(yōu)化，將優(yōu)化后的結(jié)果貢獻(xiàn)平臺(tái)與企業(yè)。
在賦能方面：平臺(tái)課程模塊將持續(xù)上線高價(jià)值的企業(yè)AI課程，幫助開(kāi)發(fā)者更好認(rèn)識(shí)企業(yè)的業(yè)務(wù);當(dāng)前面臨的現(xiàn)狀、痛點(diǎn);為企業(yè)開(kāi)發(fā)者賦能，能夠快速理解業(yè)務(wù)分析符合企業(yè)需求的模型。同時(shí)，平臺(tái)可聯(lián)合企業(yè)策劃并開(kāi)展比賽，在比賽模塊上線企業(yè)專題比賽。
在伙伴共建方面：昇思社區(qū)將聯(lián)合企業(yè)，共同開(kāi)展企業(yè)專場(chǎng)活動(dòng);在平臺(tái)展示企業(yè)精選模型，幫助企業(yè)快速部署大模型，樹(shù)立行業(yè)標(biāo)桿。- 在易用性方面：平臺(tái)后臺(tái)可提供數(shù)據(jù)統(tǒng)計(jì)模塊，統(tǒng)計(jì)企業(yè)各個(gè)模塊的訪問(wèn)量，調(diào)用次數(shù)，模型下載量等指標(biāo)。平臺(tái)還將在未來(lái)建設(shè)更多企業(yè)專區(qū)，歡迎企業(yè)加入昇思社區(qū)，與昇思一同推動(dòng)企業(yè)數(shù)智化轉(zhuǎn)型，讓大模型賦能千百行業(yè)。聯(lián)合各地人工智能計(jì)算中心與Hugging Face社區(qū)，讓大模型服務(wù)全球開(kāi)發(fā)者
平臺(tái)是首個(gè)基于國(guó)產(chǎn)AI算力和框架、服務(wù)全球開(kāi)發(fā)者的一站式大模型平臺(tái)，可實(shí)現(xiàn)跨人工智能計(jì)算中心彈性調(diào)度各地昇騰AI算力，支撐開(kāi)發(fā)者高效開(kāi)發(fā)。目前，全國(guó)已有20多座城市啟動(dòng)建設(shè)人工智能計(jì)算中心， 10多個(gè)城已正式上線，為區(qū)域發(fā)展提供普惠AI算力。
為了讓算力被最大化的使用，昇思大模型平臺(tái)將優(yōu)化現(xiàn)有算力管理結(jié)構(gòu)，讓各計(jì)算中心能夠無(wú)縫接入，演進(jìn)算力調(diào)度策略和機(jī)制，根據(jù)策略自動(dòng)實(shí)現(xiàn)訓(xùn)練任務(wù)多算力中心資源的最佳分配。通過(guò)聯(lián)結(jié)多計(jì)算中心算力，使得大模型的開(kāi)發(fā)不再需要考慮算力資源問(wèn)題，平臺(tái)根據(jù)用戶的需求，所屬的地域和算力情況等因素進(jìn)行綜合考量，自動(dòng)為用戶分配可用的算力節(jié)點(diǎn)，讓大模型開(kāi)發(fā)和使用變得更加簡(jiǎn)單。截至目前，平臺(tái)已接入首個(gè)基于昇騰AI的人工智能計(jì)算中心部署了包括悟空.畫(huà)畫(huà)，紫東.太初等多個(gè)AI大模型，對(duì)開(kāi)發(fā)者開(kāi)放大模型的在線體驗(yàn)服務(wù)。同時(shí)平臺(tái)聯(lián)手Hugging Face社區(qū)推出基于昇騰AI的的首個(gè)Space體驗(yàn)專區(qū)，搭載平臺(tái)后臺(tái)的大模型推理能力，讓全球開(kāi)發(fā)者可以在Hugging Face上體驗(yàn)所有昇思大模型推理服務(wù)。
未來(lái)，昇思大模型平臺(tái)將接入更多的人工智能計(jì)算中心，提供更多基于國(guó)產(chǎn)算力的大模型開(kāi)發(fā)服務(wù)，同時(shí)聯(lián)合更多外部開(kāi)源社區(qū)，包括但不限于Hugging Face社區(qū)，使得更多的國(guó)內(nèi)外開(kāi)發(fā)者能夠零距離地感受到基于國(guó)產(chǎn)算力開(kāi)發(fā)的昇思大模型帶來(lái)的極致體驗(yàn)。手把手教學(xué)，平臺(tái)即開(kāi)即用
除了上述提到的大模型和算力外，昇思大模型平臺(tái)還為企業(yè)提供了開(kāi)發(fā)和內(nèi)容上的賦能。- 昇思大模型平臺(tái)新增支持Jupyter Notebook在線編程，預(yù)裝豐富依賴，無(wú)需環(huán)境搭建，即開(kāi)即用;- 同時(shí)，此次升級(jí)還新增了MindSpore Transformers模塊，并提供pipeline高階易用接口簡(jiǎn)化代碼，支持開(kāi)發(fā)者一鍵下載、加載、推理和部署模型，幫助企業(yè)開(kāi)發(fā)者快速實(shí)現(xiàn)創(chuàng)意。
不僅如此，開(kāi)發(fā)者也可以在Jupyter中編寫Gradio應(yīng)用代碼，實(shí)現(xiàn)推理可視化。
除了模型的開(kāi)發(fā)和維護(hù)外，開(kāi)發(fā)者還可以通過(guò)昇思大模型平臺(tái)一鍵在線學(xué)習(xí)，參加比賽。- 面向企業(yè)開(kāi)發(fā)者提供了優(yōu)質(zhì)精美的在線課程資源，如AI大模型、計(jì)算機(jī)視覺(jué)等多領(lǐng)域系列，平臺(tái)支持作業(yè)布置與提交等能力。通過(guò)課程賦能學(xué)習(xí)的開(kāi)發(fā)者，社區(qū)可頒發(fā)認(rèn)證證書(shū)，助力企業(yè)人才培養(yǎng)。
平臺(tái)提供了類型多樣的AI大賽，比如面向新手的昇思學(xué)習(xí)賽，AI挑戰(zhàn)賽等等。平臺(tái)支持自動(dòng)打分、實(shí)時(shí)排名，輔助比賽高效進(jìn)行。比賽模塊支持企業(yè)、高?；跁N思MindSpore開(kāi)展賽事，幫助企業(yè)打通開(kāi)發(fā)者渠道路線。
賦能千行百業(yè)，昇思大模型平臺(tái)將持續(xù)發(fā)力
昇思MindSpore開(kāi)源社區(qū)一直秉承「開(kāi)發(fā)者第一、技術(shù)優(yōu)先」的理念，持續(xù)使能科研創(chuàng)新與產(chǎn)業(yè)應(yīng)用，通過(guò)原生的技術(shù)體系，不斷加速中國(guó)AI應(yīng)用生態(tài)。截止目前昇思MindSpore 社區(qū)已擁有核心貢獻(xiàn)者11000+，下載量超過(guò)435萬(wàn)，服務(wù)企業(yè)5500+，MSG足跡遍布國(guó)內(nèi)外30個(gè)城市。其中MSG暴走校園走進(jìn)國(guó)內(nèi)外近百所高校，為萬(wàn)名高校開(kāi)發(fā)者賦能;MSG企業(yè)行走過(guò)8大城市，并開(kāi)展7大領(lǐng)域互動(dòng)，大幅覆蓋AI企業(yè)用戶。昇思MindSpore在碼云(Gitee)千萬(wàn)開(kāi)源項(xiàng)目中活躍度排名第一。昇思MindSpore AI框架已經(jīng)成為了大模型開(kāi)發(fā)的技術(shù)支撐，開(kāi)源開(kāi)放更使得產(chǎn)學(xué)界可以基于它研發(fā)自己的大模型。未來(lái)昇思大模型平臺(tái)將持續(xù)發(fā)力，讓更多基于昇思 MindSpore AI 框架與各地人工智能計(jì)算中心的昇騰 AI 強(qiáng)大算力不斷發(fā)展基礎(chǔ)大模型和行業(yè)大模型的產(chǎn)業(yè)生態(tài)，賦能千行百業(yè)數(shù)字化、智能化。
