(資料圖片)
如今的大型語言模型(LLM)可以理解世界上很多語言,甚至是一些記載較少的語言。不過,大模型處理不同語言之間時,其性能上存在很大的差異,這是由于模型成本與其所訓練的語言緊密掛鉤。
牛津大學最近進行的一項研究表明,從諸多語言模型的計費方式看,英語的輸入和輸出比其他語言的輸入和輸出要便宜得多。例如,西班牙語的成本約為英語的1.5倍,簡體中文的價格約為2倍以上,緬甸撣語在15倍以上。
成本的差異也間接導致英語使用者和世界其他語言使用者之間形成AI鴻溝。
成本差異主要是因數據標記化所帶來的。標記化就是將訓練文本分解成更小的單元,這個更小的單元就是標記(Token)。這是一個人工智能(AI)公司將用戶輸入轉換為計算成本的過程。
研究顯示,使用英語以外的語言訪問和訓練模型的成本都更高。例如中文,無論是在語法上還是在字符數量上,都有更復雜的結構,從而導致更高的標記化(Token)率。
舉例來看,基于OpenAI公司的GPT2模型,對于“國家不同,所得稅的結構是不同的,稅率和稅率等級也有很大的差異”這句話的處理來看,在簡體中文處理中運用到了66個Token,在英語處理中僅用到了24個Token,而在禪語處理中使用到了468個Token。
就每次輸出所需的費用而言,漢語的成本是英語的兩倍。所以在AI相關的費用中,英語的成本效益是最高的。
當涉及到語言模型時,設計者的主要目標是實現低成本和高效功能之間的平衡。隨著AI領域的不斷發展,科技公司必須仔細考慮語言選擇對成本和可訪問性的影響。
這種成本差異促使中國、印度等國家紛紛開發自己的母語LLM項目。
標簽:
如今的大型語言模型(LLM)可以理解世界上很多語言,甚至是一些記載較
東莞證券07月31日發布研報稱,給予首創環保(600008 SH,最新價:3元)
1、是三端穩壓模塊7805嗎???功能就是輸入大于5伏的直流電,輸出為5
Mercedes280E04 1982梅賽德斯-奔馳W123是德國制造商梅賽德斯-奔馳從197
寶虹家園是寶山區羅涇鎮最大的動遷小區,總戶數3034戶,總居住人口7966
一、五大豪華汽車品牌推薦?車是一種豪華品牌,往往也是一個人身份的象
作為最末一代的大馬力后驅奔馳C63系列,標配4 0TV8雙渦輪增壓發動機,
瑜伽、八段錦、茶藝、尤克里里、羊毛氈戳戳……近日,西城區椿樹街道總
資訊頻道為您報道新車上市、國內國際新車、國內汽車行業新聞和各地車市
奧迪RSQ8| 云墨灰 EK穿插于黑色和白色兩色之間更有些暗抑的美游離于所
1、尹施允沒有上過快樂大本營請采納。本文到此分享完畢,希望對大家有
蘭博基尼HuracanSterrato是一款由意大利汽車制造商蘭博基尼推出的高性
風從東方來,云起北外灘。7月31日上午,位于上海虹口區嘉興路街道hk311
全新標致3008渲染圖曝光。新車采用了最新的家族式外觀設計語言,并使用
天眼查App顯示,7月29日,杭州恒云管理咨詢有限公司發生工商變更,注冊
哈弗猛龍動力及配置信息公布,將搭載由1 5T+Hi4+后橋電控差速鎖組成的
截至發稿,碧桂園服務跌5 45%,報9 03港元,港市值304 6億港元。朗詩綠
企業應深入排查歷年新能源汽車安全事故情況,通過數據挖掘及關鍵零部件
江西新能源科技職業學院新能源汽車技術研究院院長張翔在接受記者采訪時
長春萬象城是華潤置地繼沈陽萬象城之后,打造的東北第2座萬象城,項目
中華老字號西單商場將啟動整體改造更新,將降低整體建筑高度,并減少營
前段時間,理想汽車的李想發文稱,理想為大量使用中國本土供應鏈而自豪
2017年7月,廣汽集團注冊成立廣汽新能源公司,開始了在新能源時代的戰
近期,蒙商銀行行長一職發生了變更:由“70后”牛冠榮接替喬俊峰出任蒙
7月26日,北京春田知韻科技有限公司成立,注冊資本100萬人民幣,法定代
在阿爾卑斯早期的品牌規劃中,阿爾卑斯車型計劃延續蔚來主品牌雙電機策
項目整體區域占地1000英畝(約405萬平方米),整體規劃將包含一個主題
燃油車啃老本,新能源無起色,上汽大眾路在何方?
近日,成都海騎科技有限公司成立,法定代表人為孫可青,注冊資本10萬人
該債券品種為私募,擬發行金額30億元,承銷商 管理人為華泰聯合證券有
試駕新哈弗H5,能否成為SUV市場新一代卷王
歐舒丹在港交所發布澄清針對歐舒丹將私有化、從香港退市的消息,公司董
吉利銀河L6即將入市,與競品驅逐艦05相比該如何選擇?
紅血絲是一種常見的皮膚問題,很多人都希望能找到藥物來消除它。哪些藥
倉鼠可以少量食用一些肉松蛋糕,但是不要過多食用,畢竟肉松蛋糕里面會
近日,AITO問界旗艦車型,也就是問界M9的信息曝光,新車有望于年內發布
緊湊型轎車別亂買1-6月銷量榜單出爐速騰第四逸動第七
越南首富的美國造車夢,這可不單是錢能解決的問題
1、是張斯斯,不過和本人好不像,那個妝畫得還沒有啊素顏好看呢。2、她
1、卞和泣玉楚人和氏得玉璞楚山中,奉而獻之厲王。2、厲王使玉人相之,
達安基因31日早間發布2023年半年度業績快報,2023年上半年實現營業總收
據美國??怂剐侣劸W站30日報道,紐約蘇富比拍賣行表示,美國已故說唱歌
改編自up主以沉沒肝光遇連載劇本《你是我的神》只是一點小腦洞,尊重原
2023年7月26日,我們從官方渠道獲悉,東風標致旗下緊湊型SUV“新款4008
江西五十鈴全新D-MAXV-CROSS正式上市,共推出4款車型,售價區間17 08萬
停辦!停課!山西省教育廳發布緊急通知從即日起到8月2日,涉師生的校內
海南扶輪實業有限公司掛牌轉讓武漢房地產開發集團股份有限公司22萬股股
分類型彩票銷售情況 6月份,樂透數字型彩票銷售145 58億元,同比增
湛江陽華置業有限公司注冊資本500萬元,主要經營房地產開發、租賃及中
近日,起亞汽車發布了旗下中型SUV新款索蘭托的官圖,同時換裝了起亞全
來源|搜狐汽車·搜狐新車日前,三菱發布全新L200皮卡官圖。外觀方面,
放低“價格姿態”,BBA上半年銷量均有上漲
其中涉及土地出讓措施主要有四條,分用途核算土地出讓金,方便企業核算
7月31日,A股零售板塊午后持續拉升走強,通程控股、中央商場午后雙雙漲
日前,吉利汽車官方發布了旗下繽瑞COOL冠軍版車型官圖。新車將在現款車
7月28日第三十一屆世界大學生夏季運動會(以下簡稱“成都大運會”)在
日前,編輯從捷途汽車官方獲悉,旗下捷途X70PRO已正式上市。新車推出7
盛通股份(002599)07月31日在投資者關系平臺上答復了投資者關心的問題。
1、因為她認為中國的女性早就改變了,但是有關題材還是在各種捍衛家庭
讓惠企政策找得到、看得懂、享得了、兌得快山西省涉企政策“一站式”綜
以下是三江購物在北京時間7月31日13:09分盤口異動快照:7月31日,三江
1、他沒有親過牛欣欣。2、因為他不愛牛欣欣。本文到此講解完畢了,希望
港府今日就2023年《施政報告》展開公眾諮詢,并將舉辦逾30場咨詢會,聽
穆迪將綠地控股集團有限公司的公司家族評級從“Caa2”下調至“Ca”;評
在馬斯克宣布將推特公司的名字變更成“X”后,該公司于28日在位于舊金
中國恒大稱,鑒于公司境外重組的最新進展,呈請人同意推遲該呈請的聆訊
海曙區HS18-01-03a地塊由保利發展以底價17 44億元競得,樓面價13200元
根據征求意見稿顯示,車公廟片區連片改造升級城市更新單元擬在03-01地
天譽置業曾分別于2022年8月16日、2022年10月31日、2023年2月6日、2023
數據顯示,截至2023年6月30日止六個月,恒隆地產有限公司及其附屬公司
??天津瑪雅水公園八一建軍節有什么活動?活動對象:現役軍人、退役軍
觀點網訊:7月31日,山川集團(建綠房地產)以底價3 82億元、樓板價約8
恒隆集團披露2023年度中期業績,截至2023年6月30日止六個月,恒隆集團
近日,蘇州凱倫置業有限公司成立,注冊資本1000萬元,經營范圍包含:房
近日,廣州富力地產股份有限公司新增3條被執行人信息,執行標的合計約1
如果想買一款奧迪中型車78萬左右車型,想必很多人在買之前,都會難以抉
盛夏時節,湖北省遠安縣舊縣鎮鹿苑村,群山環抱、溪水潺潺。溪流兩岸,
想要買一輛稱心的車型,對大多數人來說,都需要花費不少時間和精力,如
1、大家還記得我們之前特別愛看的電視劇《武林外傳》嗎?里面的佟掌柜
1、國家金融監督管理總局就《銀行保險機構操作風險管理辦法(征求意見
阿斯頓·馬丁已任命吉利控股集團CEO李東輝為其董事會成員。-更多汽車資
如果想買一款4座全尺寸SUV145萬左右車型,想必很多人在買之前,都會難
吉利繽瑞COOL冠軍版官圖公布。新車對格柵及前包圍等細節部分進行重新設
1、名稱就叫2、《窮人脾氣大》和《如果愛能早些說出來》本文到此講解完
北方導航(600435)07月31日在投資者關系平臺上答復了投資者關心的問題。
咱們只跟隨市場熱點,做市場強勢股,歡迎大家關注跟隨市場主線主線,有
項目施工現場風電機組正在緊張吊裝施工中。每日甘肅網7月29日訊(新甘
介休稅務:稅務管家護航綠色轉型建設以更精細的稅費服務,助力企業在“
廣州市黃埔區天豐路以北、天泰二路以西KXC-D8-5地塊出讓,由中國能源建
7月30日,北正街社區“咸安微家園”系統管理員在登錄后臺時收到了這樣
本期債券簡稱“23濱湖建設SCP009”,債券代碼為012382858,期限為180日
悉,此次交易包含9幅涉宅地塊,起始總價達220 23億元,現場交易會將在2
截至發稿,美的置業漲16 39%、融創中國漲13 04%、龍湖集團漲9 25%。
7月31日金融一線消息,據國家金融監督管理總局網站發布的行政處罰信息
根據廈門國貿房地產公司決議文件,任命鄭瑋為廈門國貿房地產有限公司董
記者李夢瑤完善鄉村醫療衛生體系,是全面推進健康中國建設的迫切要求,
短線拆息方面,隔夜HIBOR升36 87點子至5 59536%,是6月30日后新高,當
本期債券簡稱23金外灘SCP002,代碼012382823,期限180天,發行總額5億
太平洋百貨徐匯店于1993年開業,至今正好30個年頭。太平洋百貨淮海店和
特斯拉的新聞總是出人意表!七月初,國內10余家企業在中汽協牽頭下,簽
7月24日,我市第六屆運動會開幕式在鄉寧縣第一中學校體育場舉行。市
2023年7月25日,藍電汽車在雙福工廠正式向重慶市公安局沙坪壩公安分
2023年7月16日,央視《你好生活》第四季即將開播。作為欄目唯一指定
近日,由工業和信息化部、發展改革委、商務部、農業農村部、國家能