国产一区二区三区四区在线观看 _欧美日韩国产高清一区_精品成人佐山爱一区二区_国产精品一卡二

二維碼
企資網(wǎng)

掃一掃關(guān)注

當前位置: 首頁 » 企業(yè)資訊 » 資訊 » 正文

ChatGPT訓練及多場景推理成本測算

放大字體  縮小字體 發(fā)布日期:2023-03-16 11:14:58    作者:馮琪詩    瀏覽次數(shù):186
導讀

金選·核心觀點行業(yè)觀點2023年3月1日,OpenAI宣布開發(fā)者可通過API將ChatGPT和Wisper模型集成到他們的應(yīng)用程序和產(chǎn)品中。本次ChatGPT API接入的模型名為GPT-3.5-turbo,只需0.2美分/千 Tokens。本文嘗試測算訓練和不

金選·核心觀點

行業(yè)觀點


2023年3月1日,OpenAI宣布開發(fā)者可通過API將ChatGPT和Wisper模型集成到他們的應(yīng)用程序和產(chǎn)品中。本次ChatGPT API接入的模型名為GPT-3.5-turbo,只需0.2美分/千 Tokens。本文嘗試測算訓練和不同推理場景之下的實際成本;未來隨著模型壓縮的持續(xù)發(fā)展,推理成本可能進一步降低,也有望大幅推動生成式模型在各個場景的大規(guī)模商用。我們的成本估算思路是:計算AI模型在進行訓練與推理時所需的浮點運算次數(shù),與AI算力集群的平均算力 (以每秒浮點運算次數(shù)計) 做比,以此估算AI模型的訓練成本與推理成本。


在通用大模型訓練方面,經(jīng)測算,使用云計算時ChatGPT的訓練成本約為170萬美元,若自建AI算力中心進行模型訓練,訓練成本有望降至約51萬美元;在大模型推理方面,使用云計算時的ChatGPT每處理1,000Tokens信息需花費約0.177美分,自建AI算力中心有望將成本降至0.053美分。


不同應(yīng)用場景中AI模型面臨的任務(wù)復雜度有所不同,我們考慮模型緩存命中率、計算集群閑置率、模型壓縮等因素,綜合估算各典型場景下模型的推理成本:1)搜索引擎場景中,以新版Bing為例,完成一次搜索的成本約為1.73美分;2)辦公軟件融合ChatGPT后可支持文字生成、文字修改等功能,完成一次用戶需求的成本約為1.70美分;3)AI客服作為對話場景應(yīng)用,有望率先實現(xiàn)B端落地。經(jīng)測算,AI客服場景解決一次用戶需求的成本約為0.08美分。


未來隨著模型壓縮技術(shù)的持續(xù)發(fā)展,推理成本可能進一步降低,也有望大幅推動生成式模型在各個場景的大規(guī)模商用。


投資邏輯


我們認為有海外場景的公司有可能率先與GPT-3.5-turbo進行對接,建議關(guān)注福昕軟件、萬興科技等海外營收占比較高的應(yīng)用公司。


風險提示
海外基礎(chǔ)軟硬件使用受限;應(yīng)用落地不及預期;行業(yè)競爭加劇風險。

 
(文/馮琪詩)
免責聲明
本文僅代表作發(fā)布者:馮琪詩個人觀點,本站未對其內(nèi)容進行核實,請讀者僅做參考,如若文中涉及有違公德、觸犯法律的內(nèi)容,一經(jīng)發(fā)現(xiàn),立即刪除,需自行承擔相應(yīng)責任。涉及到版權(quán)或其他問題,請及時聯(lián)系我們刪除處理郵件:weilaitui@qq.com。
 

Copyright ? 2016 - 2025 - 企資網(wǎng) 48903.COM All Rights Reserved 粵公網(wǎng)安備 44030702000589號

粵ICP備16078936號

微信

關(guān)注
微信

微信二維碼

WAP二維碼

客服

聯(lián)系
客服

聯(lián)系客服:

在線QQ: 303377504

客服電話: 020-82301567

E_mail郵箱: weilaitui@qq.com

微信公眾號: weishitui

客服001 客服002 客服003

工作時間:

周一至周五: 09:00 - 18:00

反饋

用戶
反饋

主站蜘蛛池模板: 国产精品久久久久不卡| 欧美日韩一区二区视频在线观看| 国产精品成av人在线视午夜片| 日韩无套无码精品| 69精品小视频| 国产精品久久91| 国内精品久久久久久久果冻传媒| 国产成人精品午夜| 精品无人区一区二区三区| 欧美日韩福利在线观看| 日本在线视频不卡| www.精品av.com| 国产精品av在线| 国产mv免费观看入口亚洲| 国产呦系列欧美呦日韩呦| 久久久精品在线视频| 欧美激情极品视频| 欧美日韩国产高清视频| 欧美在线一级va免费观看| 久久精品男人天堂| 久久99视频精品v| 伊人久久大香线蕉精品| 日本免费高清一区| 五月婷婷一区| 亚洲一区国产精品| 欧美日韩在线不卡视频| 国产精品av电影| 久久资源免费视频| 久久天天狠狠| 久久人人爽人人爽人人片av高请| 777精品久无码人妻蜜桃| 国产成人欧美在线观看| av日韩一区二区三区| 国产日韩欧美在线观看| 国产欧美在线播放| 国产精品国产精品国产专区不卡| 国产精品丝袜久久久久久消防器材| 国产日韩欧美在线播放| 国产精品久久久av久久久| 国产精品对白刺激久久久| zzijzzij亚洲日本成熟少妇|