時時頭條
  • 娛樂
  • 體育
  • 財經
  • 科技
  • 旅遊
  • 軍事
  • 育兒
  • 時尚
  • 遊戲
  • 歷史
  1. 首頁
  2. 科技

OpenAI“強化微調”:CEO:今年最大驚喜

2024-12-07 09:09:32

OpenAI連續12天“王炸”的第二彈來了。不同於第一日聚焦人工智慧(AI)模型,第二日的王炸專注於服務企業等組織的一款新功能,雖然看起來不太側重於普通消費者,但據介紹它甚至可以簡易版推理模型o1 mini的效果超過本週四釋出的正式版o1、即所謂滿血o1。

美東時間12月6日週五,OpenAI在社交媒體X公佈第二日活動的主題是新功能“強化微調”(Reinforcement Fine-Tuning)。這個主題是指,企業組織將能夠透過“強化微調”微調o1 mini,滿足他們的特定需求。

OpenAI CEO Sam Altman在X發帖稱,強化微調的效果非常棒,是他今年最大的驚喜之一,期待看到大家利用這種功能的創造。

OpenAI的研究員本週五介紹,科學家、開發人員和研究人員可以根據自己的資料、而不是僅僅使用公開可用的資料,量身定製OpenAI的強大推理模型o1。不同行業的人可以使用強化學習來建立基於 o1 的專家模型,從而提高該領域的整體專業知識水平。開發者、研究者和機器學習工程師將首次能運用強化學習,打造在精通他們各自專業領域的專家模型。

OpenAI的研究員稱,強化微調並不是單單教模型模型輸出,它的運作方式是,當模型發現一個問題的時候,研究者給模型空間區仔細思考這個問題,然後評估模型給出的最終解答,運用強化學習,研究者可以強化產生正確答案的思路,抑制產生錯誤答案的思路,只需要“幾十個例子”(a few dozen examples)、甚至12個例子,模型就能以有效的新方式學習特定領域的推理。

透過強化學習,使用者可以用大模型在特定資料上訓練其他模型。這對於涉及到大量資料的複雜領域或需要專家領域知識的新研究非常有用。研究者舉例稱,最近和湯森路透合作,運用強化微調微調o1 mini,讓充當法務助理,幫助他們的法律專業人士完成大部分分析工作流。

OpenAI稱,OpenAI的定製模型平臺將支援強化學習,強化學習也是OpenAI內部用於訓練自家前沿模型的技術,如GPT-4o和o1系列模型。在OpenAi的內測中,強化微調已經在生物化學、安全、法律和醫療保健領域取得成功。OpenAI計劃,2025年初讓強化微調面向公眾釋出,目前已對企業、大學和研究院開放申請測試通道。

伯克利大學罕見遺傳病研究員 Justin Reese參與了OpenAI本週五對o1 mini模型的現場演示。演示中,研究者試圖從樣本資料池中獲取可能導致疾病的模型 ID 基因。

研究員展示了一個評估表,下圖可見,第一行是本週四OpenAI釋出的正式版o1測評表現,第二行是o1 mini的測評結果 ,第三行結果來自經過最終強化微調的o1 mini。研究員進行了三類評估,其中,top @1是測試模型給出的正確答案出現在列表最前列中的機率,top@5是正確答案出現在前五列的機率,top@max是答案出現在所有正確答案列表的機率。

如圖所示,正式版o1的測試透過率為25%,o1 mini為17%,而強化微調後的o1 mini竟然達到31%,超過了正式版o1,比正式版o1的測評結果高24%,而且相比未強化微調前,微調後的結果提高了82.3%。

據OpenAI所說,使用者可以綜合運用o1、微調和資料建立定製的小型 o1模型 o1 mini。使用者要做的就是提供資料,然後在強化微調方面,設定一個數據集和一個“評分器”,根據訓練和驗證資料集評估模型的效能,其他工作交給OpenAI。

熱門資訊
  • RTX 50桌面版只用三星GDDR7視訊記憶體!另兩大巨頭委身筆記本 | 2024-11-27 01:26:18
  • 梅賽德斯-賓士現已推出 Apple Watch 版移動應用 | 2024-11-27 04:05:49
  • 李政道骨灰歸葬蘇州,與去世28年的夫人永遠相伴,其子曾稱:父親的遺願是與母親合葬 | 2024-11-27 04:31:10
  • 改造基因、克隆無腦人,富豪在宏都拉斯打造長生島 | 2024-11-27 04:36:13
  • 全球前20科研城市一半在中國,“北上廣之外,省會城市迅速崛起” | 2024-11-27 05:13:08
  • 成渝合作+1!金鳳實驗室與天府錦城實驗室(未來醫學城)簽署合作協議 | 2024-11-27 05:19:17
  • 五家晶片巨頭,研發投入大PK | 2024-11-27 05:36:51
  • 特斯拉曬出極端場景測試影片,大秀FSD安全性 | 2024-11-27 06:52:07
  • 餘承東:Mate70對得起那四字 靠抄襲沒未來 | 2024-11-27 07:00:36
  • 晶片堆疊技術又來了,這次是美國晶片,可大幅提升效能 | 2024-11-27 07:00:40
  • SpaceX終於將星際飛船第六次測試飛行所用的助推器部件沉入水中 | 2024-11-27 07:17:12
  • 三星 3D NAND 量產提效:光刻膠用量減半,每年節省數十億韓元 | 2024-11-27 07:19:07
  • 50多位院士參會!中國工程院深地深海深空物質資源開發利用學術研討會通知(第三輪) | 2024-11-27 07:21:33
  • 2024量子科技和產業大會即將舉辦 量子計算市場加速商業化 | 2024-11-27 07:21:38
  • 華科吳豪等《AFM》:定向排汗水凝膠混合電子系統 | 2024-11-27 07:25:12
  • 近50位院士出席!這場大會,為成都產業發展注入強勁動力 | 2024-11-27 07:25:24
  • 國產首顆全電推通訊衛星“亞太6E”正式在軌交付 | 2024-11-27 07:25:27
  • 最高預售價150萬元!江淮聯手華為進軍高階車 | 2024-11-27 07:43:00
  • 工作效率比人工巡檢提高近10倍!全國首臺光伏儲能“駐塔式”無人機在新疆正式投入執行【附低空經濟產業鏈龍頭企業彙總】 | 2024-11-27 07:43:06
  • 戴爾釋出2025 財年Q3財報:營收244 億美元 同比增10% | 2024-11-27 07:43:17
  • 亞馬遜被曝啟動“登月”計劃:部署 10 萬顆二代自研晶片 | 2024-11-27 07:44:27
  • 股價暴跌,市值縮水,Cassava阿爾茨海默症藥物3期試驗失敗 | 2024-11-27 07:48:30
  • 《麻省理工科技評論》35歲以下科技創新35人亞太區報名正在進行 | 2024-11-27 08:09:26
  • 特朗普勝選後,墨西哥對比亞迪建廠計劃猶豫了 | 2024-11-27 08:19:57
  • 英特爾獲美國政府78.7億美元撥款 用於建設新工廠 | 2024-11-27 08:20:06
  • 順豐方舟量產無人機亮相:載重50公斤 能飛20公里 | 2024-11-27 08:24:33
  • 唐啟升、焦念志、戴民漢、張偲等41位兩院院士當選!中國生態學學會創始會士名單公佈! | 2024-11-27 08:27:03
  • 腦洞大開!荷蘭科學家利用基因改造過蚊子為人類接種疫苗,有效性接近90%【附基因編輯技術分析】 | 2024-11-27 08:52:29
  • 巨無霸:英偉達 RTX 4090 Ti 顯示卡再次曝光,四槽位設計 | 2024-11-27 08:55:47
  • 綠色辦公:飛利浦推出 3 款環保顯示器,最高節能 80% | 2024-11-27 09:16:30
最近發布
突發!TVB知名女星毫無預警宣佈與未婚夫分手,結束長達八年情 面對被黑,蘭姐強勢迴歸。小菲狀態好轉,發宣告。更多內幕揭曉! 中國男籃決戰日本隊,首發五人曝光,廣東隊大贏家,徐傑第一後衛 孫穎莎奪女單冠軍!採訪謙遜立足拼,劉國樑給中國選手頒獎笑開花 分析 馬威交易取消後的影響:湖人還有什麼選擇?只能等休賽期? 火箭vs猛龍前瞻:範弗裡特有望復出戰舊主,火箭欲終結六連敗 梅西轟動宏都拉斯!當地媒體:這是世紀體育盛事! 登記開啟!金中、29中、13中等校動了! 開年暴擊!南京又一家機構跑路了? TechInsights:AI PC未能提振筆記本市場 2024年僅增長5% 睡覺時突然腿抽筋,就是缺鈣?錯!還有這4個原因,別輕易忽視了 泡泡瑪特又贏麻了!此前被調侃是“境內最大的博彩公司” 再也不用扎手指!5億糖尿病患者有福了 傳《尼爾:機械紀元》續作、新《古墓麗影》今年公佈 有工作經驗的畫素畫師如何寫簡歷? 離譜!Xun被搶3條龍,JDG仍然獲勝!Peyz力挽狂瀾,WBG痛失好局 將耗死在國際空間站?59歲美滯留女宇航員求救:喪失重要身體機能 華為FreeClip耳機玫瑰金開售 開放式聆聽設計 CBA俱樂部杯-山西淘汰北控晉級4強 原帥18分 小紅書上移民的中產:曾經北京七套房, 羨慕海外一張床, 如今卻...... 不可抗力停課2天以上退一半保教費,佛山幼兒園收費新規釋出 紅棉襯醉美,2020番順醉美青餅評測 華為FreeClip耳夾耳機玫瑰金配色開售:1299元 64歲寧波老闆,跨界無數次,給員工發8億,即將擁有第三家IPO? 卡友資訊股東持股情況變動 廣州“城市合夥人”:城市與人才的雙向奔赴 有人說孫穎莎粉絲是飯圈文化的時候 卻有些人用真金白銀愛孫穎莎! 男生剪“短髮”髮型乾淨利落,試試這3款,剪完帥氣提升顏值! 7個臀部訓練最佳動作,打造迷人的蜜桃臀! 偉大的4-2!林詩棟奪冠:新科世界第1誕生、超越王楚欽,狂攬3冠 新疆完美了!新小外強於皮特森+黑根斯,承認補強大外良性競爭! 林詩棟奪男單冠軍!採訪大談不容易太謙遜,單獨拍照露出笑容! 國乒最新戰報!林詩棟第2局11-8,衝3冠王,梁靖崑救2局點仍輸球 替補奇兵!快船大將5記3分助隊贏球 哈登好幫手 爆冷!北控男籃吊打奪冠大熱門球隊,外援決定比賽的走向 官宣離任,胡明軒宣佈重要決定,廣東宏遠遺憾,杜鋒祝福 又一個賈德松!崔康熙看人很準,魯媒:卡約又要錯過中國聯賽了 劉國樑憔悴!黑眼圈很重,擋住蒯曼被提醒,孫穎莎王楚欽被裁判整 林詩棟逆轉梁靖崑奪冠,成就三冠王,綜合實力更加突出 CBA最新外援註冊資訊,遼籃4人,新疆補充新援,廣東男籃放棄萊斯 大滿貫收官獎金排名:林詩棟三冠60萬第1,孫穎莎第2王曼昱10萬第9 臺灣律師分析大S遺產劃分,S媽要錢得看汪小菲臉色,打臉光頭安排 臺媒曝大S家人鬆手,讓出撫養權給汪小菲,希望馬筱梅善待孩子 二線白酒暴雷,狼真的來了! 搭上比亞迪,自動駕駛獨角獸,利潤大增170%! 炸裂!外資吹響“加倉中國”集結號背後:科技格局重塑與資產重估 這波夢幻西遊副本積分兌換真是血虧,四賜福的山賊值得買嗎? 《星戰亡命之徒》高階美工又回到CDPR 開發《巫師4》 《哪吒2》登陸北美,首映禮現好萊塢!有觀眾哭花眼妝:特效超預期,買票靠搶 曝張蘭被封年損失近4億,麻六記絕地自救太壯觀,員工曬張蘭近況

©2024 時時頭條 版權所有

隱私政策 | 服務條款 | 聯繫我們