時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 科技

港科大校董會主席沈向洋:通用大模型會越來越少,行業大模型會越來越多

2024-11-18 13:23:06

本文來源:時代週報 作者:郭美婷

“講卡傷感情,沒卡沒感情。”11月17日電,今日上午,2024大灣區科學論壇開幕式和主論壇在廣州南沙國際會展中心主會場召開。香港科技大學校董會主席、美國國家工程院外籍院士、英國皇家工程院外籍院士沈向洋在會上笑談智慧時代的機遇與挑戰。

香港科技大學校董會主席、美國國家工程院外籍院士 英國皇家工程院外籍院士沈向洋,圖源:主辦方供圖

“算力是關鍵,算力是生產力。”沈向洋表示,大模型數量爆發式增長的當下,GPU算力每年以4倍的速度增長,10年後預計將增長100萬倍。在這個過程中,成為最大的贏家,去年該公司的下單量至少是15萬張。

作為大模型發展的另一關鍵要素,資料也被沈向洋頻頻提及:“GPT3用了大概2萬億Token,到GPT4時,一開始講的是12萬億的資料,但是在不斷訓練中,我們預計大概是用了20T的資料……這基本是把網際網路上能公開搜到的資料都拿了下來,洗乾淨後的資料量。”

沈向洋表示,OpenAI希望訓練出GPT5,其中的難點就在於要使用更大的資料來訓練更有效的模型。他預測,若GPT5面世,其使用的資料量大概是200T,這其中可能加入了多模態或合成的資料。

“有意思的是,網際網路經歷了40年,大家將資料放到網上,最後好像就是為了這樣一個‘ChatGPT的時刻’。”沈向洋笑言。

對於中國而言,AI大模型會沿著什麼樣的道路發展?

沈向洋認為,第一層是發展通用大模型,需要至少萬卡甚至十萬卡的算力來做這件事。一旦有了這個通用大模型後,接下來發展的就是行業大模型。這樣的大模型只需幾千張算力卡,未來每家企業都要做自己的大模型,提高效率、增強產品,如同今天所有企業都要向數字化、智慧化轉型一般。再下一層,就是個人大模型了。未來,PC、手機等都是大模型的重要載體。

“從國內的整體發展來看,是到7月底,中央網信辦批准的大模型大概有 200 個,其中只約有1/ 3是通用大模型,2/3是行業大模型。我預測未來通用大模型的數量會越來越少,佔比越來越小,而行業大模型數量會越來越多。”沈向洋表示。

他補充道,未來AI最大的超級應用就是AI智慧體,即人類提出問題,AI就能解決掉。這個超級應用一直都存在,只不過在技術上尚未突破。

AI也將給人類社會GDP帶來巨大的增量。沈向洋表示,工業革命以前,人類社會GDP增長只有0.1%~0.2%,工業革命後增長到1%~2%,資訊社會則到了3%~4%,而到了人工智慧時代,AI智慧體有望使人類社會的GDP增速變為10%~20%。但在這樣的經濟增長下,人類仍要警惕AI對社會、公司和監管造成的衝擊,AI的治理刻不容緩。

“我們今天對人工智慧的理解還是遠遠不夠的。大模型雖然被做出來,但確實不可理解、不魯棒(穩定)的,這讓人懷疑,現在一套體系是不是真的能走遠。人們認為智慧有限,似乎大模型出來之後,智慧就出來了。”沈向洋提到,去年,他在香港科技大學組織了一批科學家,正在試圖解開AI湧現出來背後的數學原理的謎題。

熱門資訊
  • 榮耀300 Pro開啟預訂 三大唯美配色享24期免息 | 2024-11-23 08:04:40
  • 事後才知道!神十八乘組創造一項世界紀錄,神舟十九號驚喜會更多 | 2024-11-23 08:13:24
  • 對話《空間計算》作者:喬布斯要是活著,不會發布Vision Pro,會直接推出蘋果眼鏡 | 2024-11-23 08:17:41
  • NASA宣佈尖端太空技術部門新主管:克萊頓-特納 | 2024-11-23 08:17:50
  • 微軟 Surface Laptop 5 和 6 韌體 1.0 更新,修復顯示和音訊問題 | 2024-11-23 08:18:34
  • 神舟十九號航天員集體亮相:才發射20天,為何都“胖”了一圈 | 2024-11-23 08:19:28
  • 超導明星跌落神壇:Ranga Dias 被控學術不端,已被解僱 | 2024-11-23 08:20:20
  • 臺積電A16工藝,最新分享 | 2024-11-23 08:21:07
  • 印度計劃2040年前建成載人環月空間站!中國快遞公司順豐控股計劃透過香港上市,籌資7.927億美元 | 2024-11-23 08:21:10
  • 華南農業大學碩士研究生髮表Nature Communications | 2024-11-23 08:21:17
  • Nature丨合計細胞數量超過170萬——構建人類神經類器官的整合細胞轉錄組譜圖 | 2024-11-23 08:22:38
  • 一家日本公司正在開發“洗人機” | 2024-11-23 08:22:43
  • 中科馭數申請基於改進的TCP傳輸協議架構的應用層訊息傳輸專利,能夠使得應用與協議棧互動訪問接收緩衝區一次性得到完整的應用層訊息 | 2024-11-23 08:26:48
  • 科氪 | 北京聯通攜手華為、中赫集團、吉特沃斯-工體元宇宙在新工體打造全球領先的5G-A立體組網超級網路 | 2024-11-23 08:27:26
  • 艾倫研究所與華盛頓大學推出OpenScholar,用小引數超越GPT-4o | 2024-11-23 08:29:18
  • 中國登月夢舟、攬月、著陸地點、登月車公佈!釋放資訊量太大 | 2024-11-23 08:40:38
  • 我國載人登月畫面“提前曝光”:月球沒有火箭,航天員怎麼返回地球 | 2024-11-23 08:40:41
  • 中國聯通1-22級崗級是怎麼定的? | 2024-11-23 08:42:17
  • 英偉達核彈來了!RTX 5090售價再次曝光:想買準備2萬預算 | 2024-11-23 08:46:15
  • 採用我國獨創技術!全球首款,正式釋出 | 2024-11-23 08:52:35
  • Enfabrica推出全球最快GPU網路介面控制器晶片,獲1.15億美元融資 | 2024-11-23 08:55:08
  • 3478億美元!馬斯克身家大選後暴漲35% | 2024-11-23 09:04:50
  • 中國載人登月的動畫演示 | 2024-11-23 09:16:13
  • Shein、Temu越南註冊風波,東南亞多國加強跨境電商監管 | 2024-11-23 09:18:24
  • IBM大中華區董事長陳旭東:“員工舉報事件”指控並不成立 | 2024-11-23 09:18:30
  • 訊息稱英偉達 RTX 5090 顯示卡 GPU 尺寸比 RTX 4090 的大 22% | 2024-11-23 09:19:12
  • 在烏鎮的三點觀察 | 2024-11-23 09:20:24
  • 載人飛行器、物流無人機亮相網際網路大會現場 | 2024-11-23 09:20:45
  • 華擎銳炫 B580 桌面顯示卡曝光:2.8GHz GPU,雙 8-pin 電源介面 | 2024-11-23 09:30:40
  • 科學家拍到銀河系外首張恆星垂死特寫圖 | 2024-11-23 10:32:48
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們