OpenAI新功能太强大
岁末之双十二,OpenAI再开直播之幕,虽续前日之简捷,然主题新颖,名曰:“新功能强化微调”,旨在以微量数据,轻松铸就特定领域之专家模型。此微量者,低至数十例足矣。CEO奥特曼赞曰:“其效非凡,实为吾二零二四年度之最大惊喜,亟盼世人以此构建新奇之物!”
究其效果若何?微调后之o1-mini模型,竟跃升八成分数,直逼并超越o1正式版之巅。OpenAI亦启动强化微调研究计划,开放alpha版API申请,以供开发者探索。测试之时,仅需数十至数千高质量数据,模型便能循强化学习之道,自探自学,以解繁复之任务。直播间内,网友闻之,皆目瞪口呆,未料今夜之“圣诞盲盒”,竟有如此奇景。
OpenAI之Jerry Tworek又言:“AGI非授人以鱼,实乃授人以渔。”此言深意,引人深思。
此次微调,OpenAI首纳强化学习之法。直播嘉宾,除Mark Chen、John Allard、Julie Wang三位OpenAI之研究员,更有伯克利实验室之计算生物学家Justin Reese,共演强化微调之全程。
其例,乃生物医学之任务,AI需据病例之描述,寻出相关之基因。训练数据繁复,然模型却能据此学习,渐入佳境。评分模型对答案评判,OpenAI亦备多种评分之选,且支持自定义。
强化微调之步骤,简明易行,于网页界面择训练集与验证集,再配置超参数即可。微调之中,可观模型性能之变,测试之后,亦可查模型对验证数据之输出。于OpenAI内部测试中,强化微调已在生物化学、安全、法律及医疗保健等领域崭露头角。
强化微调将于二零二五年初面世,对企业、大学及研究院已开放测试之门。观此直播,有言:“强化微调或不适用于所有任务,然于科学领域,或将带来突破性之成果。”
至于奥特曼之于Sora之发布,虽未明言,然其默认之态,已令网友心生期待。首日之o1正式发布,次日之强化微调,皆引人瞩目。有网友憾言:“GPT-4.5何在?”评论区猜测,或留于最后之日,以吊众人之胃口。
吾观此事,深感科技之进步,日新月异。OpenAI之举,实乃推动人工智能之发展,为人类带来福祉。然科技之双刃剑,亦需吾辈审慎以待,方能造福于世。强化微调之应用,或将在科学领域开启新篇章,然其潜在之风险与挑战,亦不容忽视。吾辈共探科技之道,以智慧与责任,引领未来之发展。
