用大型語(yǔ)言模型預(yù)測(cè)金融市場(chǎng)
ChatGPT
佛羅里達(dá)大學(xué)金融系的兩位教授認(rèn)為,在金融行業(yè)使用先進(jìn)的LLM可以預(yù)測(cè)更準(zhǔn)確的股市結(jié)果,會(huì)有利于交易策略。在這項(xiàng)研究中,作者使用ChatGPT“使用新聞標(biāo)題的情緒分析來(lái)預(yù)測(cè)股市回報(bào)”。他們發(fā)現(xiàn),與BERT、GPT-1和GPT-2等模型相比,ChatGPT表現(xiàn)最好,只有像ChatGPT這樣更先進(jìn)的模型才能分析大量數(shù)據(jù)來(lái)成功預(yù)測(cè)股市。
ChatGPT是一種基于生成式預(yù)訓(xùn)練轉(zhuǎn)換器架構(gòu)的LLM,由人工智能研究和部署公司OpenAI于2022年11月首次推出。根據(jù)作者的說(shuō)法,“GPT架構(gòu)使用多層神經(jīng)網(wǎng)絡(luò)來(lái)對(duì)自然語(yǔ)言的結(jié)構(gòu)和模式進(jìn)行建模。使用無(wú)監(jiān)督學(xué)習(xí)方法,它在維基百科文章或網(wǎng)頁(yè)等大量文本數(shù)據(jù)上進(jìn)行預(yù)訓(xùn)練?!痹谶@項(xiàng)研究中,作者使用了從安全價(jià)格研究中心提取的數(shù)據(jù)集和RavenPack(一家創(chuàng)立于2003年的專注于新聞分析數(shù)據(jù)的提供商)數(shù)據(jù)。
作者表示,他們研究的最終結(jié)果只是強(qiáng)調(diào)了ChatGPT作為金融業(yè)基于情緒分析預(yù)測(cè)股市的工具的潛力。他們還指出,還需要進(jìn)行更多的研究。
BloombergGPT
今年3月,彭博社發(fā)布了自己名為BloombergGPT的LLM,這是一個(gè)專門為金融業(yè)開(kāi)發(fā)的500億參數(shù)LLM。根據(jù)彭博社發(fā)表的一篇研究論文,BloombergGPT由從彭博社數(shù)據(jù)源中提取的3630億個(gè)Token數(shù)據(jù)集組成,該數(shù)據(jù)集還包括來(lái)自通用數(shù)據(jù)集的3450億個(gè)Token。
研究人員在金融專用的自然語(yǔ)言處理(NLP)基準(zhǔn)上驗(yàn)證了BloombergGPT。LLM還通過(guò)彭博社自己的一套內(nèi)部基準(zhǔn)進(jìn)行了驗(yàn)證。他們發(fā)現(xiàn),與GPT-NeoX、OPT66B、BLOOM176B和GPT-3等LLM相比,BloombergGPT表現(xiàn)最好。
彭博社機(jī)器學(xué)習(xí)(ML)產(chǎn)品和研究團(tuán)隊(duì)負(fù)責(zé)人Gideon Mann表示:“ML和NLP模型的質(zhì)量取決于你輸入的數(shù)據(jù)。”“得益于彭博社40多年來(lái)精心策劃的財(cái)務(wù)文件集,我們能夠精心創(chuàng)建一個(gè)大型、干凈、特定領(lǐng)域的數(shù)據(jù)集,以訓(xùn)練最適合財(cái)務(wù)用例的LLM。我們很高興能夠使用BloombergGPT來(lái)改進(jìn)現(xiàn)有的NLP工作流程,同時(shí)也能想出新的方法來(lái)使用該模型,以服務(wù)我們的客戶?!?/p>
FinGPT公司
與基于專有知識(shí)的BloombergGPT不同,F(xiàn)inGPT是一種開(kāi)源LLM,也是專門為金融行業(yè)開(kāi)發(fā)的。FinGPT被描述為由Dragonfly和紅杉支持的加密交易應(yīng)用Finblox于2023年3月發(fā)布的人工智能金融顧問(wèn)。該組織的目標(biāo)是使金融部門的LLM民主化。
Finblox首席執(zhí)行官Peter Hoang表示:“我們的使命是為用戶提供控制其財(cái)務(wù)未來(lái)的知識(shí)和工具?!薄拔覀冎铝τ谧屆總€(gè)人都能接觸到金融知識(shí)和包容性。憑借其用戶友好的界面和個(gè)性化的建議,F(xiàn)inGPT代表著朝創(chuàng)建一個(gè)更具包容性和吸引力的金融生態(tài)系統(tǒng)邁出了重要一步?!?/p>
哥倫比亞大學(xué)和紐約大學(xué)(上海)的一個(gè)研究小組認(rèn)為,F(xiàn)inGPT可以為研究人員和用戶提供為金融行業(yè)開(kāi)發(fā)LLM所需的資源。FinGPT的數(shù)據(jù)集來(lái)自金融新聞、社交媒體、文件、趨勢(shì)和學(xué)術(shù)機(jī)構(gòu)。FinGPT采用以數(shù)據(jù)為中心的方法,并采用全??蚣堋?/p>