中國10億參數規模以上大模型已發布79個,集中在北京和廣東
                發布時間:2023-05-28 18:41:56 文章來源:澎湃新聞
                ·據不完全統計,目前中國10億參數規模以上的大模型已發布79個,14個省市/地區都在開展大模型研發,主要集

                ·據不完全統計,目前中國10億參數規模以上的大模型已發布79個,14個省市/地區都在開展大模型研發,主要集中在北京和廣東,其中北京38個大模型,廣東20個大模型。中國大模型中,已有半數以上大模型開源,高校/科研機構是開源主力。

                ·北京、江蘇、廣東、上海等是大模型人才相對較多的地區,為大模型研發提供關鍵智力要素支撐。但人才總量仍然稀缺,大模型具有較高門檻,需要高素質AI人才,目前各地大模型人才數量均不充足。

                中國10億參數規模以上的大模型已發布79個,主要集中在北京和廣東。


                (資料圖片僅供參考)

                5月28日,在2023中關村論壇平行論壇之一的人工智能大模型發展論壇上,中國科學技術信息研究所所長趙志耘發布《中國人工智能大模型地圖研究報告》,目前中國10億參數規模以上的大模型已發布79個,主要集中在北京和廣東,其中北京38個大模型,廣東20個大模型。中國大模型中,已有半數以上大模型開源,高校/科研機構是開源主力。

                2017年谷歌發布的Transformer網絡結構是大模型發展的源頭技術,自此以后大模型技術在自然語言理解、計算機視覺、智能語音等方面都取得了標志性的技術突破,在模型精度、通用性和泛化能力等方面都實現了跨越式發展。ChatGPT又進一步激發了語言大模型爆發式涌現,也吸引了大量研發團隊投入到通用視覺、多模態等更多大模型研發方向。趙志耘表示,僅用5年多時間,大模型技術已形成龐大技術群,衍生出涵蓋各種參數規模、各種技術架構、各種模態、各種場景的大模型家族。

                從全球大模型發展態勢來看,美國谷歌、OpenAI等機構不斷引領大模型技術前沿,歐洲、俄羅斯、以色列等越來越多的研發團隊也在投入到大模型的研發中。從全球已發布的大模型分布來看,中國和美國大幅領先,超過全球總數的80%,美國在大模型數量方面始終居全球最高,中國從2020年進入大模型快速發展期,目前與美國保持同步增長態勢。

                在中國大模型的發展態勢中,趙志耘表示,據不完全統計,到目前為止中國10億參數規模以上的大模型已發布79個,14個省市/地區都在開展大模型研發,主要集中在北京和廣東,其中北京38個大模型,廣東20個大模型。在模型領域分布上,自然語言處理仍是目前大模型研發最活躍的重點領域,其次是多模態領域,在計算機視覺和智能語音等領域的大模型還較少。在研發主體分布上,大學、科研機構、企業等不同創新主體都在參與大模型研發,學術界和產業界之間的聯合研發仍不足?!敖衲暌詠泶竽P陀兄焖侔l展的態勢,但我們同時也觀察到了合作收縮的趨勢,接下來需要注意?!?/p>

                與此同時,算力-模型匹配度高,公共算力發展迅速。北京、廣東、浙江、上海等地的大模型數量最多,這四個地方也是近三年人工智能服務器采購數量最高的地區。各地也在通過提供公共算力方式補充快速增長的人工智能算力需求,為大模型研發提供更多算力支持。

                人才也是人工智能的重要支柱。北京、江蘇、廣東、上海等是大模型人才相對較多的地區,為大模型研發提供關鍵智力要素支撐。但人才總量仍然稀缺,大模型具有較高門檻,需要高素質AI人才,目前各地大模型人才數量均不充足。

                “通過大模型的論文發布,我們可以看到中國大模型的學術影響力正在逐步形成。從區域影響力來看,北京、廣東、上海三地無論是論文數量還是論文引用量都在國內最高。”趙志耘表示,清華大學與阿里和百度聯合開發的CogView模型論文引用數最高。但與國外領先大模型的學術影響力相比差距仍然較大。

                從開源創新生態上看,中國大模型中,已有半數以上大模型開源,北京、廣東、上海三地開源數量和開源影響力均居國內前三。高校/科研機構是開源主力,“清華大學的ChatGLM-6B、復旦大學的MOSS以及百度的文心系列大模型開源影響力最高?!壁w志耘表示。

                中國大模型的產業化應用沿著兩條路徑發展,第一種是通用類大模型持續拓展應用領域,文心一言、通義千問、紫東太初、星火認知等中國一批通用化大模型正在快速發展,打造跨行業通用化人工智能能力平臺,其應用行業正在從辦公、生活、娛樂向醫療、工業、教育等加速滲透。第二種是垂直領域專業類大模型不斷深化落地,一批針對生物醫藥、遙感氣象等垂直領域的專業大模型發揮其領域縱深優勢,提供針對特定業務場景的高質量專業化解決方案。

                倡導加強資源和研發力量的統籌,促進大模型有序發展。

                針對大模型發展的不足,趙志耘提出4點建議與展望:

                一是加強資源和研發力量的統籌,促進大模型有序發展。通過加強智算中心、超算中心、云計算中心等計算資源的統籌,制定公共數據共享目錄和共享規則,推動數據分級分類有序開放。

                二是加快基礎研究和技術創新,提升學術和開源影響力。大模型技術仍處于發展初期,潛在的基礎理論和技術創新空間巨大。通過蒸餾、量化等小型化技術實現模型“瘦身”,為大模型小型化、綠色化發展提供技術支撐。進一步加強產學研合作,鼓勵大模型開源開放,也將加速大模型技術進步。

                三是強化大模型發展中的場景牽引作用,打造大模型標桿項目。以行業專有訓練數據集為基礎,打造金融、醫療、電力等領域的專業大模型,在特定業務場景實現高質量應用突破,也希望通過應用場景和應用數據反向促進大模型技術迭代升級。

                四是強化國際合作,積極參與全球人工智能治理。以負責任的態度共同推動大模型的治理,希望人工智能的治理原則和倫理規范能夠進一步在大模型的全鏈條中落地生根。同時在增進共識的基礎上加強人工智能治理的全球合作。

                標簽:

                資訊播報

                樂活HOT

                • 《熊出沒·伴我“熊芯”》票房破10億 打破內地影史春節檔動畫片紀錄
                  《熊出沒·伴我“熊芯”》票房破

                  據各方數據,1月31日上午10時許,深圳出品的動畫電影《熊出沒·伴我熊芯》票房突破10億元,在首日票房、檔期票房、連續破億天數等多方面打

                • 今年春節深圳游客出境游訂單量大幅增加 曼谷等地成為最受歡迎目的地
                  今年春節深圳游客出境游訂單量大

                  1月27日,攜程發布的《2023年春節旅游總結報告》顯示,今年春節,深圳游客的出境游訂單量同比去年增長近5倍。相較國內熱門景點的人山人海,

                • 2023年春節黃金周深圳共接待游客469.25萬人次 旅游收入31.58億元
                  2023年春節黃金周深圳共接待游客

                  1月27日,記者從深圳市文化廣電旅游體育局獲悉,2023年春節黃金周期間(1月21日至27日),深圳共接待游客469 25萬人次,旅游收入31 58億元,

                • 深圳機場連續多日客流量超過10萬人次 衛星廳迎來首個大客流春運
                  深圳機場連續多日客流量超過10萬

                  據深圳市春運辦統計,1月15日和16日連續兩天,深圳對外發送旅客人數都在48萬左右,春運進入客流高峰期。1月15日,深圳春運對外旅客發送量達

                • 深圳交響樂團將將舉辦兩場音樂會 以世界經典管弦樂和歌劇詠嘆調為主
                  深圳交響樂團將將舉辦兩場音樂會

                  新年音樂會是觀眾喜聞樂見的年度重要文化品牌活動,多年來已成為深圳市民跨歲迎新的例牌項目。12月30日、31日晚,深圳交響樂團將在深圳音樂

                • 深圳大力推進實施人才強市戰略 深圳市人才總量已達到663萬人
                  深圳大力推進實施人才強市戰略

                  作為來深科研人員中的一員,中山大學附屬第八醫院的助理研究員郭雅婕對深圳在人才服務方面的舉措贊不絕口:我作為基礎研究人員,很希望自己

                • 2023年故宮年票正式開售 有消費者目前仍對購買年票持觀望態度
                  2023年故宮年票正式開售 有消費

                  12月1日晚8點,2023年故宮年票正式開售。相比于去年,今年購票順暢了許多。據了解,2022年故宮年票發售時,因短時間內購買年票人數過多,曾

                • 御寒類商品消費需求有所上升 羽絨服的整體銷售額同比增長達100%
                  御寒類商品消費需求有所上升 羽

                  昨日,冷空氣到達,廣州氣溫逐步下降。據商超方面預測,隨著氣溫的逐漸下降,市民對于御寒類商品消費需求有所上升,不少廣州商超準備了有關

                • 深圳全市共排查窨井蓋約350萬個 發現存在問題的窨井蓋約3.2萬個
                  深圳全市共排查窨井蓋約350萬個

                  小井蓋、大民生。今年以來,深圳開展全市窨井蓋專項治理工作成效顯著。截至11月20日,全市共排查窨井蓋約350萬個,發現存在問題的窨井蓋約3

                • 汕汕鐵路汕頭站公布最新動態 首期工程預計將于2024年11月完成
                  汕汕鐵路汕頭站公布最新動態 首

                  備受關注的汕汕(汕頭至汕尾)鐵路汕頭站及站區工程近日傳出最新動態:項目已順利完成工程招標工作,由中鐵建設集團有限公司中標承建。目前,

                娛樂LOVE

                精彩推送

                亚洲熟妇av一区二区三区漫画| 亚洲一区二区三区免费| 亚洲美女高清一区二区三区| 国产午夜亚洲精品| 亚洲成在人线中文字幕| 亚洲午夜一区二区电影院| 久久久无码精品亚洲日韩京东传媒| 亚洲中文字幕久久精品蜜桃 | 亚洲人成人77777网站不卡| 亚洲乱人伦中文字幕无码| 国产产在线精品亚洲AAVV| 亚洲一级片免费看| 亚洲国产精品乱码一区二区| 亚洲av色福利天堂| 亚洲国产高清在线精品一区| 亚洲爆乳AAA无码专区| 青青青国产色视频在线观看国产亚洲欧洲国产综合 | 国产亚洲人成网站观看| 亚洲乱码一二三四五六区| 日韩成人精品日本亚洲| 久久久久久亚洲精品| 国产精品高清视亚洲精品| 国产午夜亚洲不卡| 亚洲天堂2016| 亚洲精品~无码抽插| 亚洲精品国产日韩| 亚洲熟妇无码另类久久久| 最新国产成人亚洲精品影院| 亚洲中文字幕在线第六区| 亚洲国产精品白丝在线观看| 亚洲欧美在线x视频| 亚洲国产精品线在线观看| 国产精品亚洲综合网站| 亚洲AV人无码激艳猛片| 亚洲国产日韩视频观看| 亚洲乱码中文字幕久久孕妇黑人| 亚洲中文字幕久在线| 亚洲一区二区三区国产精品| 亚洲伊人久久大香线蕉| 在线观看亚洲精品国产| 亚洲国产人成在线观看|