基于深度學(xué)習(xí)的系統(tǒng)可以為數(shù)十億在線消費(fèi)者提高推薦內(nèi)容的相關(guān)性。

在過去十年中，全球電子商務(wù)的價(jià)值已飆升到數(shù)萬(wàn)億美元，為數(shù)十億消費(fèi)者提供服務(wù)。促進(jìn)在線銷售實(shí)現(xiàn)這種爆炸式增長(zhǎng)的動(dòng)力，是由推薦系統(tǒng)引擎驅(qū)動(dòng)的個(gè)性化。

推薦系統(tǒng)能夠使購(gòu)物更加個(gè)性化。在電子商務(wù)網(wǎng)站上搜索產(chǎn)品時(shí)，他們會(huì)捕捉搜索，或者單純顯示建議。互聯(lián)網(wǎng)上之所以能提供這種令人愉悅的體驗(yàn)，依托的是規(guī)模日益龐大的數(shù)據(jù)集和模型。

NVIDIA Merlin 是推薦系統(tǒng)的助推器。它能夠提高訓(xùn)練和推理速度，使各種類型的企業(yè)均能夠更好地利用數(shù)據(jù)來(lái)構(gòu)建由 NVIDIA GPU 加速的推薦系統(tǒng)。

在線交易的風(fēng)險(xiǎn)比以往更高。根據(jù) eMarketer 發(fā)布的數(shù)據(jù)，2021 年全球在線銷售額預(yù)計(jì)達(dá)到近 5 萬(wàn)億美元，比上一年增加近 17%。

在一些全球大型在線網(wǎng)站上，即使推薦內(nèi)容的相關(guān)性僅提高 1%，其銷量也會(huì)增加數(shù)十億。

投資于推薦系統(tǒng)已成為當(dāng)今互聯(lián)網(wǎng)巨頭的主要競(jìng)爭(zhēng)優(yōu)勢(shì)之一。

根據(jù) Mordor Intelligence 發(fā)布的數(shù)據(jù)，在 2026 年，推薦系統(tǒng)整體市場(chǎng)將從2020 年僅為 21.2 億美元提升至 151.3 億美元。而這家研究公司同時(shí)也表示，在推薦系統(tǒng)引擎的細(xì)分市場(chǎng)中，規(guī)模更龐大、發(fā)展更迅速的市場(chǎng)就在亞太地區(qū)。

但是，本行業(yè)所面臨的挑戰(zhàn)是，提高相關(guān)性需要更多的數(shù)據(jù)和更高的處理能力。這些數(shù)據(jù)包含數(shù)十億產(chǎn)品和消費(fèi)者檔案上數(shù)以萬(wàn)億計(jì)的用戶及產(chǎn)品交互(點(diǎn)擊、瀏覽)。

這種規(guī)模的數(shù)據(jù)可能需要數(shù)天時(shí)間來(lái)完成模型訓(xùn)練。然而，越快推出基于更多數(shù)據(jù)的新模型，其相關(guān)性也就會(huì)越高。

Merlin 的模型、方法和庫(kù)集合包括用于構(gòu)建基于深度學(xué)習(xí)的系統(tǒng)的工具，能夠處理 TB 級(jí)的數(shù)據(jù)，以便提供更精準(zhǔn)的預(yù)測(cè)并增加點(diǎn)擊量。

SNAP 利用 Merlin 和 GPU 提升推理

根據(jù) eMarketer 發(fā)布的數(shù)據(jù)，2021 年美國(guó)數(shù)字廣告收入預(yù)計(jì)達(dá)到 1911 億美元，比上一年增長(zhǎng) 25.5%。

Snap 是社交媒體應(yīng)用 Snapchat 的母公司，位于加利福尼亞州圣塔莫尼卡，日活躍用戶量已超過 3 億。該公司通過社交照片和視頻信息服務(wù)來(lái)創(chuàng)造廣告收入。

Snap 首席執(zhí)行官 Evan Spiegel 在其第三季度利潤(rùn)表中表示：“我們將繼續(xù)專注于為廣告合作伙伴提供強(qiáng)勁的業(yè)績(jī)結(jié)果，通過創(chuàng)新來(lái)擴(kuò)展平臺(tái)功能并更好地為社區(qū)服務(wù)。”

Snap 的技術(shù)障礙在于，力圖繼續(xù)開發(fā)其工作負(fù)載的高成本排名模型，并在降低成本的同時(shí)擴(kuò)展到更復(fù)雜的模型。

該公司使用 NVIDIA GPU 和 Merlin 來(lái)提升其內(nèi)容排名能力。

Snap 工程副總裁 Nima Khajehnouri 說：“Snap 使用 NVIDIA GPU 和 Merlin 軟件將機(jī)器學(xué)習(xí)推理成本效益提高了 50%，且降低 2 倍的服務(wù)延遲，其能夠?yàn)樵囼?yàn)和部署更繁重、更準(zhǔn)確的廣告和內(nèi)容排名模型，提供更大的計(jì)算空間?！?/p>

騰訊借助 Merlin HugeCTR 來(lái)推動(dòng)模型訓(xùn)練

娛樂行業(yè)巨頭騰訊是中國(guó)一家具有高額市值的大型公司，運(yùn)營(yíng)著廣受歡迎的信息服務(wù)——微信，以及支付平臺(tái)——微信支付。

其工程師需要快速對(duì)廣告推薦系統(tǒng)的模型進(jìn)行快速迭代，這會(huì)增加對(duì)訓(xùn)練性能的需求。

騰訊專家工程師孔祥挺說：“廣告業(yè)務(wù)是騰訊內(nèi)部比較重要的業(yè)務(wù)之一，而推薦系統(tǒng)則用來(lái)提高整體的廣告收入?！?/p>

問題在于，廣告推薦的準(zhǔn)確性只有通過訓(xùn)練更多的樣本數(shù)據(jù)(包括更多的樣本特征)來(lái)提高，但這會(huì)延長(zhǎng)訓(xùn)練時(shí)間，從而影響模型更新頻率。

他還說道：“作為一個(gè)推薦系統(tǒng)的訓(xùn)練框架，HugeCTR 已集成到廣告推薦訓(xùn)練系統(tǒng)中，使得模型訓(xùn)練的更新頻率更快，并通過訓(xùn)練更多的樣本來(lái)提升線上廣告效果?！?/p>

他補(bǔ)充道，模型的訓(xùn)練性能得到提升后，我們就可以訓(xùn)練更多的數(shù)據(jù)，提高模型的準(zhǔn)確率，從而增加廣告收入。

美團(tuán)借助 NVIDIA A100 GPU 降低成本

美團(tuán)的業(yè)務(wù)涵蓋 200 個(gè)服務(wù)類別，在食品、娛樂和按需服務(wù)各領(lǐng)域高度交織著。而這家中國(guó)互聯(lián)網(wǎng)巨頭擁有超過 6.67 億活躍用戶和 830 萬(wàn)活躍商家。

美團(tuán)高級(jí)技術(shù)專家黃軍表示，如果他的團(tuán)隊(duì)要大幅提升性能，通常會(huì)更傾向于訓(xùn)練更多的樣本和更復(fù)雜的模型。

黃軍也表示，美團(tuán)的問題在于，隨著模型變得越來(lái)越復(fù)雜，對(duì)訓(xùn)練框架進(jìn)行深入優(yōu)化就會(huì)變得困難。

他說道：“我們正致力于將 NVIDIA HugeCTR 集成到基于 A100 GPU 的訓(xùn)練系統(tǒng)中。成本也會(huì)大大降低。這還僅僅只是初步的優(yōu)化結(jié)果，未來(lái)還有很大的優(yōu)化空間?！?/p>

美團(tuán)最近報(bào)告說，在 2021 年第二季度的過去 12 個(gè)月中，每位交易用戶的平均交易量增加到 32.8 筆，而在 2020 年第二季度的過去 12 個(gè)月中為 25.7 筆。

原文標(biāo)題：為數(shù)十億消費(fèi)者提供服務(wù)：NVIDIA Merlin 助力網(wǎng)絡(luò)巨頭獲得點(diǎn)擊量

文章出處：【微信公眾號(hào)：NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

審核編輯：湯梓紅