人工智能的發(fā)展已進(jìn)入一個(gè)全新階段，開源開放已成為推動(dòng)技術(shù)持續(xù)進(jìn)步的行業(yè)共識(shí)和重要驅(qū)動(dòng)力量。

在9月1日舉行的2022世界人工智能大會(huì)（WAIC）科學(xué)前沿全體會(huì)議上，上海人工智能實(shí)驗(yàn)室（下稱“實(shí)驗(yàn)室”）發(fā)布了“OpenXLab浦源”人工智能開源開放體系，該體系九大開源項(xiàng)目，覆蓋從感知到?jīng)Q策，從平面到立體，從數(shù)據(jù)到計(jì)算，從技術(shù)到人文教育的各個(gè)方面。

“‘OpenXLab浦源’代表著上海人工智能實(shí)驗(yàn)室在人工智能探索道路上到達(dá)了新的里程碑?！鄙虾Ｈ斯ぶ悄軐?shí)驗(yàn)室教授林達(dá)華表示，“X代表著未知、開放與成長(zhǎng)，而’浦源’意味著上海人工智能實(shí)驗(yàn)室立足黃浦江畔，以上海為策源地，面向全球，面向未來(lái)，以原創(chuàng)的人工智能開源技術(shù)，攜手合作伙伴共同打造人工智能開源開放生態(tài)?！?/p>

OpenMMLab百萬(wàn)開發(fā)者使用

據(jù)介紹，“OpenXLab浦源”人工智能開源開放體系包含OpenMMLab 2.0浦視視覺(jué)算法開源體系，OpenGVLab書生通用視覺(jué)開放體系，OpenDILab 1.0浦策決策智能開源平臺(tái)，以及首次亮相的OpenXDLab浦畫高質(zhì)量數(shù)字內(nèi)容平臺(tái)、OpenDataLab浦?jǐn)?shù)人工智能開放數(shù)據(jù)平臺(tái)、 OpenComputeLab浦算人工智能開放計(jì)算體系等6個(gè)平臺(tái)。

作為深度學(xué)習(xí)時(shí)代最具影響力的視覺(jué)算法開源體系，OpenMMLab 1.0自2021年7月發(fā)布至今，已被全球100多個(gè)國(guó)家和地區(qū)的百萬(wàn)開發(fā)者使用。

此次全新升級(jí)的OpenMMLab浦視2.0視覺(jué)算法開源體系引入全新訓(xùn)練架構(gòu)MMEngine，實(shí)現(xiàn)了不同代碼庫(kù)的接口統(tǒng)一，使新算法的拓展更加靈活和高效。同時(shí)圍繞自監(jiān)督學(xué)習(xí)等前沿方向新建6個(gè)算法庫(kù)，實(shí)現(xiàn)從模型訓(xùn)練、部署到推理無(wú)縫銜接，打通了AI落地的最后一公里，并對(duì)訓(xùn)練和推理芯片進(jìn)行廣泛適配，促進(jìn)了軟硬件生態(tài)共同發(fā)展。

舉一反三的“書生”模型

發(fā)展更為通用的AI技術(shù)是人工智能的科技前沿和核心焦點(diǎn)問(wèn)題。

在OpenXLab浦源中，OpenGVLab書生通用視覺(jué)開源開放平臺(tái)面向?qū)W術(shù)界和產(chǎn)業(yè)界發(fā)布了高效預(yù)訓(xùn)練模型，實(shí)現(xiàn)分類、目標(biāo)檢測(cè)、語(yǔ)義分割及深度估計(jì)四大任務(wù)26個(gè)場(chǎng)景性能顯著提升，僅用10%的數(shù)據(jù)便可超越OpenAI的CLIP模型。目前，OpenGVLab書生 2.0正在打造涵蓋數(shù)據(jù)、模型、評(píng)測(cè)、標(biāo)準(zhǔn)和應(yīng)用等的通用視覺(jué)技術(shù)體系，幫助開發(fā)者快速降低通用視覺(jué)模型開發(fā)門檻。

去年11月，上海人工智能實(shí)驗(yàn)室發(fā)布“書生”，一個(gè)模型即可全面覆蓋分類、目標(biāo)檢測(cè)、語(yǔ)義分割、深度估計(jì)四大視覺(jué)核心任務(wù)。將通用視覺(jué)技術(shù)體系命名為“書生”，意在體現(xiàn)其如同書生一般的特質(zhì)，可通過(guò)持續(xù)學(xué)習(xí)，舉一反三，逐步實(shí)現(xiàn)通用視覺(jué)領(lǐng)域的融會(huì)貫通，最終實(shí)現(xiàn)靈活高效的模型部署。

2022WAIC首日發(fā)布的人工智能模型“書生2.0”，則可以更加精準(zhǔn)地識(shí)別圖像，在圖像標(biāo)桿任務(wù)上性能取得顯著提升，并在三十多種視頻任務(wù)上取得了領(lǐng)先的性能，還可實(shí)現(xiàn)以中文為核心的百種語(yǔ)音翻譯。

“實(shí)驗(yàn)室正在打造以視覺(jué)和自然語(yǔ)言為核心的通用模型技術(shù)體系，包括基礎(chǔ)理論方法、數(shù)據(jù)集、模型集、下游任務(wù)和應(yīng)用生態(tài)等。”上海人工智能實(shí)驗(yàn)室領(lǐng)軍科學(xué)家喬宇表示，“面向未來(lái)，‘書生’期望實(shí)現(xiàn)以一個(gè)模型譜系完成上千種任務(wù)，體系化解決人工智能發(fā)展中的諸多瓶頸問(wèn)題。推動(dòng)人工智能從單任務(wù)單模態(tài)可用到多任務(wù)多模態(tài)安全易用，從感知智能到認(rèn)知智能的躍遷。”

此外，“書生2.0”通用視頻模型探索掩碼學(xué)習(xí)和對(duì)比學(xué)習(xí)相結(jié)合的訓(xùn)練范式，突破視頻自監(jiān)督學(xué)習(xí)的性能瓶頸，構(gòu)建了首個(gè)具有體系化動(dòng)態(tài)感知能力的視頻大模型，全面覆蓋基礎(chǔ)視頻識(shí)別、開放視頻感知、時(shí)空語(yǔ)義解析三大核心領(lǐng)域。在視頻識(shí)別、視頻時(shí)空檢測(cè)、視頻時(shí)序定位、視頻檢索等三十多種視頻任務(wù)上精度世界領(lǐng)先，在視頻識(shí)別標(biāo)桿基準(zhǔn)庫(kù)Kinetics 400上首次取得超越90%的Top1準(zhǔn)確率，達(dá)到91%。同時(shí)實(shí)現(xiàn)了使用成本更低、更低碳、更環(huán)保的目標(biāo)。相比達(dá)到谷歌的CoCa和微軟的SwinV2-G的相似效果，“書生”使用的計(jì)算量遠(yuǎn)遠(yuǎn)小于前兩者，據(jù)測(cè)算可累計(jì)減少碳排放量31余噸。

從科學(xué)技術(shù)到人文教育

人工智能技術(shù)的突飛猛進(jìn)，離不開數(shù)據(jù)和算力兩個(gè)重要的基石。

全新的OpenDataLab浦?jǐn)?shù)人工智能開放數(shù)據(jù)平臺(tái)匯聚了海量的數(shù)據(jù)資源，包括覆蓋800多種任務(wù)類型的3000多個(gè)數(shù)據(jù)集，并提供便捷檢索和快速下載服務(wù)。OpenDataLab還和OpenXLab的各個(gè)開源算法體系緊密銜接，通過(guò)一個(gè)簡(jiǎn)單的命令行工具，即可實(shí)現(xiàn)一鍵部署、開箱即用。

隨著算法的快速演進(jìn)，各種架構(gòu)芯片層出不窮，算法與芯片的適配成為了當(dāng)今人工智能計(jì)算領(lǐng)域最重要的挑戰(zhàn)之一。OpenComputeLab浦算人工智能開放計(jì)算體系旨在讓AI計(jì)算更開放、更高效、更簡(jiǎn)單。其率先推出了“算子圖譜”，從算法應(yīng)用的視角出發(fā)，體系化梳理深度學(xué)習(xí)相關(guān)的數(shù)以百計(jì)的算子，形成分類分級(jí)體系，并構(gòu)建了一個(gè)開放式評(píng)測(cè)框架，可對(duì)計(jì)算性能進(jìn)行全面深入的分析，為上下游的協(xié)同演進(jìn)提供有價(jià)值的參考指引。

不只是技術(shù)領(lǐng)域，本次發(fā)布的開源開放體系涵蓋了人文教育領(lǐng)域。實(shí)驗(yàn)室協(xié)同清華大學(xué)和復(fù)旦大學(xué)共同打造了OpenEGLab蒲公英人工智能治理開放創(chuàng)新平臺(tái)。以“蒲公英”寓意希望、溫暖和友誼，該平臺(tái)旨在構(gòu)建系統(tǒng)、實(shí)用的人工智能治理基礎(chǔ)設(shè)施，探索“規(guī)則-技術(shù)-場(chǎng)景-評(píng)測(cè)”一體協(xié)同的治理創(chuàng)新體系，推動(dòng)多學(xué)科交叉、多元主體共享共建，促進(jìn)人工智能可信、可持續(xù)發(fā)展。而OpenInnoLab浦育青少年人工智能開放創(chuàng)新平臺(tái)，則可為從事AI教育的教師以及對(duì)AI科創(chuàng)感興趣的學(xué)生提供前沿、多元、易用、連通的學(xué)習(xí)創(chuàng)作工具，并配以豐富的課程與實(shí)踐案例，在普及推廣人工智能科學(xué)技術(shù)的同時(shí)，鼓勵(lì)青少年應(yīng)用AI工具進(jìn)行科學(xué)探究與創(chuàng)新。