七位業(yè)內(nèi)人士暢談如何衡量AI帶來的業(yè)務(wù)影響力

AI正在發(fā)展轉(zhuǎn)型,無論是作為一種技術(shù)本身還是關(guān)于這種技術(shù)的使用方式。越來越多的企業(yè)把AI試水項目帶出實驗室,進(jìn)行大規(guī)模的部署,其中一些企業(yè)獲得了顯著的好處。不管圍繞AI有怎樣的不確定性,忽視AI的潛力,都會讓那些仍在以舊方式運(yùn)營業(yè)務(wù)的企業(yè)面臨潛在風(fēng)險。
不過對于很多企業(yè)組織來說,從AI中獲取價值可能是一件令人難以捉摸的事情。他們的模型可能沒有經(jīng)過調(diào)優(yōu)的,他們的訓(xùn)練數(shù)據(jù)集可能還不夠大,客戶可能會心存疑慮,除此之外還有關(guān)于偏見、道德和透明度方面的擔(dān)憂。在還沒有準(zhǔn)備就緒之前就把AI運(yùn)用于生產(chǎn)環(huán)節(jié),或者是還沒有對其進(jìn)行適當(dāng)審查之前就把AI戰(zhàn)略擴(kuò)展到下一個階段,對企業(yè)來說可能都要付出很高的代價,或者更糟糕的是,導(dǎo)致業(yè)務(wù)朝著不利的方向發(fā)展。
那么你如何得知一個AI項目是否會改變或者顛覆你的企業(yè)呢?如果沒有硬性的ROI數(shù)字,企業(yè)就必須通過某種確定的方式實現(xiàn)創(chuàng)新,下面就讓我們來看看這些IT領(lǐng)導(dǎo)者和業(yè)內(nèi)人士是如何衡量AI價值的吧:
成熟技術(shù)與突破性技術(shù)
衡量任何計劃或者技術(shù)的商業(yè)價值,并不總是一種線性計算的過程,AI當(dāng)然也不例外,尤其是考慮到成熟度和業(yè)務(wù)潛力的時候。經(jīng)過驗證和預(yù)測性的變量(例如數(shù)據(jù)挖掘、在成本和培訓(xùn)時間方面的節(jié)省、投資、促進(jìn)新用途的能力)會對決策產(chǎn)生影響,尤其是在可接受的ROI方面,但不管怎樣,對技術(shù)有一定程度信任,這一點是至關(guān)重要的,無論是新技術(shù)還是成熟的技術(shù)。
例如在美國國家航空航天局(NASA)的噴氣推進(jìn)實驗室,衡量AI項目的投資回報率,其中一個關(guān)鍵因素是技術(shù)的成熟度。
該實驗室首席技術(shù)和創(chuàng)新官Chris Mattmann表示,一些AI技術(shù)的用途已經(jīng)非常成熟,以自動化業(yè)務(wù)流程為例。
他說:“每家公司都有一些枯燥的東西,我們也有。我們對這些流程實施了自動化,例如票務(wù)處理、搜索、數(shù)據(jù)挖掘、使用AI查看合同和分包合同?!?/p>
該實驗室使用了很多商用技術(shù)做到這一點,包括DataRobot和Google Cloud。Mattmann說,為了確定一項特定的技術(shù)是否值得投資,他們會考慮該技術(shù)是否會節(jié)省成本、時間和資源。“如果技術(shù)已經(jīng)成熟了,就會體現(xiàn)出來的?!?/p>
對于那些還處于中等成熟度的技術(shù)來說,實驗室會著眼于該技術(shù)是否具有開啟新用途的能力,以及成本是多少。Mattmann說:“例如,我們要去火星的話,會有一個用于深空電信的細(xì)管道,”現(xiàn)在,他們有足夠的帶寬每天從火星向地球發(fā)送大約200張照片。
“我們發(fā)送到火星上的探測車,內(nèi)部有一種約豌豆大小的大腦,運(yùn)行的是iPhone 1處理器。我們只把那些抗輻射的東西放在太空中,這樣就可以承受深空環(huán)境。我們深知,性能良好的芯片往往是那些較舊的芯片,因此我們不會在探測車上使用高級人工智能或者是機(jī)器學(xué)習(xí)?!?/p>
不過,最初作為一種技術(shù)演示而不是探測任務(wù)核心的NASA Ingenuity火星直升機(jī),搭載了高通的Snapdragon處理器——一種AI芯片。“這證明,我們有可能使用更新的芯片來做更多AI方面的事情?!?/p>
這種AI將實現(xiàn)很多目前無法實現(xiàn)的新用例,例如Ingenuity火星直升機(jī)無需每天發(fā)回200張圖像,而是可以使用AI對這些圖像進(jìn)行分析,向地球發(fā)送一百萬條文字說明,例如,在特定方向上有一個干涸的湖床等等?!芭c今天的圖像相比,我們可以通過文本獲得更多信息?!?/p>
最后,對于最前沿的實驗性AI技術(shù)來說,衡量成功的標(biāo)準(zhǔn)就是這些技術(shù)能否用于新的科學(xué)用途,以及能否用于撰寫和發(fā)表新論文。
他說:“訓(xùn)練和建立模型都是有成本的。”
谷歌和微軟等企業(yè)可以隨時訪問海量的訓(xùn)練數(shù)據(jù),但是在NASA的噴氣推進(jìn)實驗室,數(shù)據(jù)集是很難獲取的,需要博士級專家進(jìn)行分析和標(biāo)記。
“在NASA,我們訓(xùn)練一個新的AI模型的成本,是商業(yè)行業(yè)的10到20倍,”Mattmann說。
在這里,新技術(shù)的出現(xiàn)可以讓NASA在減少人工標(biāo)記工作量的情況下打造AI模型,例如,可以利用生成式網(wǎng)絡(luò)創(chuàng)建合成訓(xùn)練數(shù)據(jù),他說。雖然是Deep Fakes,但卻是用于科學(xué)用途的。
AI衡量及其影響范圍
如果沒有一種直接的方法來衡量AI項目的業(yè)務(wù)影響時,企業(yè)會改為從相關(guān)關(guān)鍵績效指標(biāo)也就是KPI中挖掘數(shù)據(jù)。這些代理變量通常是和業(yè)務(wù)目標(biāo)相關(guān)的,可能包括客戶滿意度、上市時間、員工保留率等。
美國醫(yī)療服務(wù)提供商Atlantic Health System就是一個很好的例子。該公司高級副總裁、首席信息官Sunil Dadlani說,患者是每一個決定的核心。在許多方面,他們是通過觀察患者護(hù)理的改進(jìn)來衡量AI的投資回報情況的。他說,這些以患者為中心的指標(biāo)包括縮短住院時間、縮短治療時間、加快保險資格驗證、以及加快事先保險授權(quán)等等。
另一個項目涉及使用AI的項目,就是幫助放射科醫(yī)生檢查掃描情況,在這種情況下,衡量的KPI就是放射科醫(yī)生收到潛在異常警報的頻率。Dadlani表示:“截至2022年4月,我們有99%的放射科醫(yī)生報告說,使用AI分析了12000多項研究,觸發(fā)了近600個警報。因此,醫(yī)生就可以盡快解決潛在的嚴(yán)重問題。”
在美國第五大會計師事務(wù)所RSM,AI投資遵循兩條緊密相連的路徑:一條是幫助員工更好工作的生產(chǎn)力和分析工具,另一條是客戶方面使用的同類工具,該公司管理咨詢、業(yè)務(wù)和技術(shù)轉(zhuǎn)型團(tuán)隊的合伙人Richard Davis表示。
例如,RSM在與客戶合作的時候,可能會被要求從多個系統(tǒng)(包括會計、銷售和營銷、人力資源、物流)中提取數(shù)據(jù),并將所有內(nèi)容整合到一個面板中。Davis說,AI可以幫助他們加快這一過程,然后,AI可以用于工作流程通過這些系統(tǒng)的情況,以及可能存在哪些挑戰(zhàn)和障礙。
那么企業(yè)如何得知他們的AI是否朝著正確方向發(fā)展呢?
Davis說:“首先,我們可以非常清楚地衡量工具的使用情況,”他沒有提供RSM在AI項目投資或者是投資回報率方面的細(xì)節(jié),但他說,“隨著時間的推移,我們希望看到的是更有效地交付參與”。
他說,參與度的提升會改善生產(chǎn)力?!耙虼耍绻^去需要我們一周才能完成某件事,那么現(xiàn)在我們的目標(biāo)可能是將其縮短到一天。”
專注于商業(yè)利益
衡量AI的成功與否,可能是很主觀的。麻省理工學(xué)院的AI研究科學(xué)家、零售行業(yè)數(shù)據(jù)科學(xué)家Eugenio Zuccarelli說,評估一個AI項目就像開發(fā)AI本身一樣,是一門藝術(shù)。
Zuccarelli說,盡管如此,能夠解釋AI對業(yè)務(wù)的影響力,這一點仍然是很重要的?!癒PI不應(yīng)該圍繞模型本身設(shè)定,而應(yīng)該圍繞著業(yè)務(wù)和人員指標(biāo),這應(yīng)該是項目的最終目標(biāo)?!狈駝t,很容易選擇一個看似成功、但實際上并不能轉(zhuǎn)化為對企業(yè)產(chǎn)生有效影響的技術(shù)指標(biāo)。
Zuccarelli還曾在BMW和Telstra擔(dān)任數(shù)據(jù)科學(xué)的職位,他警告稱,不要孤立地衡量AI項目的進(jìn)展。例如,如果一個AI項目的目標(biāo)是改進(jìn)由于其他原因已經(jīng)在改進(jìn)的東西,那么需要一個控制組來確定實際上有多少改進(jìn)是由AI引發(fā)的。
具有多年金融服務(wù)行業(yè)經(jīng)驗的Vladislav Shapiro表示,AI項目其他有價值的KPI可能是,例如,減少錯誤警報或者自動刪除過多特權(quán)。他同時也是Costidity的創(chuàng)始人,一個專門從事IT安全、身份治理和管理的咨詢集團(tuán)。
最近他負(fù)責(zé)了一項由AI能驅(qū)動的安全部署,結(jié)果讓誤報率降低了三倍,很多以前需要手動的流程都實現(xiàn)了自動化。
他說:“當(dāng)你向C級高管展示這些數(shù)字的時候,他們就會明白,上述所有措施都降低了數(shù)據(jù)泄露的風(fēng)險,加強(qiáng)了問責(zé)制和治理?!?/p>
逐步地衡量成功與否
全球?qū)I(yè)服務(wù)公司Genpact的首席數(shù)字戰(zhàn)略官Sanjay Srivastava表示,自動化實現(xiàn)的成本節(jié)約,是展示AI項目經(jīng)濟(jì)效益一個最簡單、也是最清晰的方式。但同時,AI也可以促進(jìn)新的收入來源,甚至是徹底改變企業(yè)的商業(yè)模式。
例如,某家飛機(jī)發(fā)動機(jī)制造商發(fā)現(xiàn),他們通過使用AI可以更好地預(yù)測故障和改善物流,從而開始提供發(fā)動機(jī)服務(wù)。“對于最終消費(fèi)者來說,購買飛行里程要比購買發(fā)動機(jī)本身更好,這是一種新的商業(yè)模式,因為AI的賦能而改變了企業(yè)的運(yùn)營方式?!?/p>
而且,業(yè)務(wù)影響力也很明顯。
因此,為了證明那段時間投資AI是合情合理的,這家制造商需要制定一個長期的目標(biāo),然后把這個目標(biāo)轉(zhuǎn)化為可以通過其他方式衡量的若干個短期項目。
他說:“與其說‘十年后,我們將改變行業(yè)’,不如說,‘第一年,我們開始考慮需要庫存哪些零件,’你還沒有能力去顛覆這個行業(yè),你只是說,‘我們需要恰當(dāng)數(shù)量的零件’,這是一個為期一年的項目,目標(biāo)是優(yōu)化你的倉庫系統(tǒng),減少你在庫存方面的投資。”
除了供應(yīng)鏈優(yōu)化之外,其他短期進(jìn)度衡量指標(biāo)還包括客戶滿意度。
“例如,如果飛機(jī)在孟買停留了五天等待某個零件,客戶就會感覺得到?!?/p>
與戰(zhàn)略愿景保持一致
然后就是面對現(xiàn)實,一些AI項目在短期內(nèi)可能會影響利潤,但從長遠(yuǎn)來看,仍然是重要的且具有變革意義的。例如,一家企業(yè)部署了客戶服務(wù)聊天機(jī)器人,可以消除很多枯燥的任務(wù)。Gartner分析師Whit Andrews表示:“但是聊天機(jī)器人也可能是有壞處的,因為有些銷售人員很擅長于追加銷售并希望與人互動,所以企業(yè)組織可能并不希望都是機(jī)器人?!?/p>
他說,歸根結(jié)底是看你想要成為一個什么樣的企業(yè)?!澳承r候,你必須問自己你是否是這種企業(yè):如果交付搞砸了,客戶會打電話詢問貨物在哪里,然后你和客戶互動,嘗試讓他們改為每月收貨一次?!?/p>
如果這個企業(yè)組織想通過展示可衡量的ROI來推動轉(zhuǎn)型,并且擁有一個以客戶為中心的愿景,那么可能會跳過利潤上的短期回報,而轉(zhuǎn)向其他可能更有意義的指標(biāo)上。
“一個完全自動化的組織可能會更成功,因為他們的市場份額在逐漸增加,但是你可以開發(fā)你的數(shù)據(jù),這樣你就可以在恰當(dāng)?shù)臅r間觸達(dá)恰當(dāng)?shù)娜巳?。如果有什么是你可以指出并說的,從邏輯上看,這會讓我們的客戶更快樂,我們的員工更成功,那么就放開去做吧。”















 
 
 






 
 
 
 