91在线观看视频-91在线观看视频-91在线观看免费视频-91在线观看免费-欧美第二页-欧美第1页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

從架構(gòu)演進(jìn)和統(tǒng)一看搜索與推薦

innswaiter ? 來源:未知 ? 作者:van ? 2022-06-28 20:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

搜索與推薦的區(qū)別

1. 場景需求不同

搜索的場景故名思義,就是用戶提供想要尋找的內(nèi)容的描述,系統(tǒng)返回給用戶匹配到的結(jié)果,常見的場景如文字輸入框的搜索,圖片搜索,聽音識曲,標(biāo)簽篩選等,看似很多場景,其實(shí)只是用戶輸入內(nèi)容的形式不同。

推薦的場景我們常見的有各大App首頁的個(gè)性化推薦(如猜你喜歡/每日歌曲推薦),選擇頁面的關(guān)聯(lián)推薦(買了還買,看了還看,買了它的用戶還買等等)等,推薦的場景更加的豐富,因?yàn)闆]有用戶提供的內(nèi)容的限制,場景更具多樣性,推薦方法也多種多樣,例如基于內(nèi)容的推薦,基于用戶行為的推薦,協(xié)同過濾等等。

各大互聯(lián)網(wǎng)平臺由于服務(wù)內(nèi)容不同,平臺成熟度的不同,對搜索和推薦的偏重程度也就不盡相同,但都是缺一不可。

例如對于房地產(chǎn)應(yīng)用來說,用戶目標(biāo)明確,搜索服務(wù)會帶來更大的購買力,但關(guān)聯(lián)推薦會給用戶帶來更多的選擇,同樣也是不可缺少的。

對于短視頻平臺而言,由于用戶較難通過文字或圖片提供內(nèi)容的描述,那么自然會偏重推薦服務(wù)。

對于電商在初期肯定是搜索服務(wù)帶來了更多的購買率,當(dāng)購買率到達(dá)瓶頸時(shí),推薦帶來的購買率就是突破瓶頸和繼續(xù)發(fā)展的必要手段。

2. 輸入輸出不同


不論搜索還是推薦,實(shí)際上對于用戶來說,都是一個(gè)提供服務(wù)的黑盒,它能夠根據(jù)用戶/物品/場景等信息,從候選物品的池子中選出與用戶匹配的的物品列表。

不同的是對于搜索服務(wù),還額外提供了用戶對于自己訴求的描述信息(當(dāng)然可能描述的并不準(zhǔn)確)。

輸入的區(qū)別天然的導(dǎo)致了用戶對于結(jié)果的不同期待:

  • 個(gè)性化程度不同

    推薦系統(tǒng)更強(qiáng)調(diào)個(gè)性化,甚至更注重驚喜感。往往要在準(zhǔn)確性和多樣性之間作出權(quán)衡;搜索系統(tǒng)更強(qiáng)調(diào)相關(guān)性,如果搜索結(jié)果與用戶的目標(biāo)不符,用戶的接受程度會很差,個(gè)性化對于搜索系統(tǒng)來說既沒意義又有風(fēng)險(xiǎn)。

  • 排的更好與搜的更全

    對于推薦系統(tǒng)來說,排序更加重要,因?yàn)橹挥凶铋_始的推薦結(jié)果吸引了用戶,用戶才可能向后瀏覽。

    對于搜索系統(tǒng)來說,召回更加重要,因?yàn)橛脩魰鲃酉蚝鬄g覽,以期望找到自己的目標(biāo),但如果最終沒有找到,也就是搜的不全,就會有很差的用戶體驗(yàn)。

  • 快速滿足還是持續(xù)服務(wù)

    提到搜索系統(tǒng),往往會提到馬太效應(yīng),只有與用戶搜索的結(jié)果更為匹配的物品才會被呈現(xiàn)給用戶,讓用戶得到快速滿足,那么滿足需求的物品那么多,搜索的越準(zhǔn)確,用戶就越不會向后瀏覽,最終點(diǎn)擊的熱度就只會集中在少量的物品上。這也就是為什么廣告最初誕生在搜索系統(tǒng)中的原因。

    提到推薦系統(tǒng),往往會提到長尾效應(yīng),也就是讓用戶時(shí)刻保持新鮮感和驚喜感,考慮用戶的長期興趣,提高用戶粘性,期望留住用戶,并提供持續(xù)的服務(wù),這也就是為什么刷短視頻停不下來的原因。

  • 實(shí)時(shí)性與滯后性

    搜索的數(shù)據(jù)實(shí)時(shí)性要求是特別高的,數(shù)據(jù)常常要求秒級更新,例如一個(gè)商品已經(jīng)沒有貨了就不應(yīng)該被搜出來了。而推薦的數(shù)據(jù)很多是可以容忍天級更新的,由于推薦要考慮大量的用戶行為信息,一定是具有一定滯后性的。

搜索與推薦的聯(lián)系

1. 相同的本質(zhì)

搜索與推薦本質(zhì)上都是當(dāng)前時(shí)代信息過載的產(chǎn)物,解決的根本思路都是通過匹配(召回)、排序?yàn)橛脩粼谶^載的信息中挑選出用戶想要的信息。只是根據(jù)業(yè)務(wù)場景的不同,在召回,排序階段考慮的側(cè)重點(diǎn)不同。

2. 搜索與推薦的協(xié)同作用

  • 推薦中的搜索

    推薦服務(wù)中基于內(nèi)容的推薦實(shí)際上相當(dāng)于一種無聲的搜索,常常在實(shí)現(xiàn)時(shí)會采用搜索服務(wù)的中的倒排索引等技術(shù),例如基于內(nèi)容的推薦,常常是通過規(guī)則或推薦模型得到用戶感興趣的內(nèi)容的標(biāo)簽,然后利用搜索服務(wù)的方法進(jìn)行標(biāo)簽搜索和匹配即可得到最終的推薦列表。

  • 搜索中的推薦

    當(dāng)搜索出來符合用戶的數(shù)據(jù)量很多時(shí),需要根據(jù)推薦服務(wù)中用戶畫像等結(jié)果幫助搜索服務(wù)匹配用戶的需求。例如周一的晚上進(jìn)行搜索得到的結(jié)果列表和周五的晚上進(jìn)行搜索得到結(jié)果列表就會有所差異。

推薦與搜索常常在一個(gè)頁面中協(xié)同為用戶提供服務(wù),例如搜索引擎搜索結(jié)果頁面的關(guān)聯(lián)推薦,電商軟件搜索瀏覽頁面的相關(guān)推薦等。

架構(gòu)演進(jìn)與架構(gòu)統(tǒng)一

搜索架構(gòu)的演進(jìn)


一般而言,一個(gè)企業(yè)的搜索引擎,由于在初始階段業(yè)務(wù)線不多,提供簡單的搜索服務(wù)即可。隨著業(yè)務(wù)的不斷增多,對搜索需求的不斷抽象和統(tǒng)一,逐漸可以發(fā)展為平臺階段,提供多數(shù)據(jù)源的寫入與多業(yè)務(wù)的統(tǒng)一搜索能力,不同業(yè)務(wù)的不同需求可以靈活配置。

等到業(yè)務(wù)線不斷增多,對接業(yè)務(wù)的工作占據(jù)了大部分的開發(fā)時(shí)間時(shí),開發(fā)更加方便的運(yùn)維與管理能力,幫入業(yè)務(wù)自助接入平臺就能夠進(jìn)一步提高搜索功能開發(fā)的效率,此時(shí)搜索架構(gòu)就進(jìn)入到了運(yùn)維更為便捷的云平臺的階段。

推薦架構(gòu)的演進(jìn)

對于推薦引擎,起步階段一般會采用基于內(nèi)容的推薦方法,由于數(shù)據(jù)不足,企業(yè)初期會基于業(yè)務(wù)側(cè)提供的經(jīng)驗(yàn)規(guī)則對物品和用戶進(jìn)行標(biāo)注,然后通過在線匹配標(biāo)簽的方式進(jìn)行推薦。繼續(xù)發(fā)展,隨著業(yè)務(wù)的不斷豐富和迭代,會對推薦系統(tǒng)有更多的期望,當(dāng)不斷修改或增加經(jīng)驗(yàn)規(guī)則卻滿足不了業(yè)務(wù)需求時(shí),就需要一些基于模型的推薦方法以及個(gè)性化的推薦的服務(wù)了。再進(jìn)一步,與搜索引擎一樣,推薦引擎也需要對接多個(gè)業(yè)務(wù)線,向平臺階段發(fā)展,提供統(tǒng)一的公共服務(wù),通過配置滿足不同的業(yè)務(wù)線的需求。

架構(gòu)統(tǒng)一

從上面的介紹和架構(gòu)演進(jìn)我們可以發(fā)現(xiàn),推薦和搜索的架構(gòu)有很多可以復(fù)用的地方,因而可以進(jìn)行架構(gòu)的統(tǒng)一。

  1. 流程上的統(tǒng)一:

    不論是搜索還是推薦,都會經(jīng)歷召回-排序-重排等流程,最終得到呈現(xiàn)給用戶的物品列表,只不過流程中各個(gè)階段的目標(biāo)會不太相同。

  2. 數(shù)據(jù)與數(shù)據(jù)平臺的復(fù)用:

    被搜索的物品和被推薦的物品是統(tǒng)一的,召回排序訓(xùn)練模型時(shí)所需要的埋點(diǎn)數(shù)據(jù)/用戶行為數(shù)據(jù)等也是統(tǒng)一的,那么自然獲取數(shù)據(jù)/處理數(shù)據(jù)的平臺自然就是可以復(fù)用的。

  3. 算法與算法平臺的復(fù)用:

    搜索和推薦發(fā)展到一定階段,當(dāng)簡單的專家規(guī)則不再能夠支撐復(fù)雜的搜索和推薦需求時(shí),都會發(fā)展到基于模型進(jìn)行召回排序的階段,此時(shí)都需要根據(jù)用戶數(shù)據(jù)/物品數(shù)據(jù)/埋點(diǎn)數(shù)據(jù)進(jìn)行模型訓(xùn)練,只不過由于二者的訓(xùn)練目標(biāo)不同,訓(xùn)練的模型的參數(shù)可能會不相同,但算法平臺或者大家常說的機(jī)器學(xué)習(xí)/AI平臺是可以復(fù)用的。

  4. A/B Test實(shí)驗(yàn)平臺的復(fù)用:

    由于業(yè)務(wù)需求的不斷變化,模型的不斷更替,通過A/B Test平臺能夠通過分流的方式拿到真實(shí)的生產(chǎn)環(huán)境中的用戶反饋,以幫助企業(yè)不斷驗(yàn)證和優(yōu)化搜索和推薦策略。

  5. 配置中心的復(fù)用:

    可以通過配置中心針對不同業(yè)務(wù)和服務(wù)配置不同的搜索和推薦策略,并且提供便捷的一鍵部署能力。

所以很多公司,在業(yè)務(wù)領(lǐng)域上搜索和推薦分屬于不同的部門,但很多的公共的部分都有成熟的內(nèi)部平臺可以快速復(fù)用。

總結(jié)

本篇文章介紹了搜索和推薦的區(qū)別與聯(lián)系,架構(gòu)演進(jìn)以及架構(gòu)統(tǒng)一。我們都知道架構(gòu)是因?yàn)樾枨蟮臄U(kuò)增而不斷演進(jìn)來的,例如從服務(wù)階段發(fā)展到平臺階段,是因?yàn)橐岣叨鄻I(yè)務(wù)的對接效率;從基于內(nèi)容的推薦到復(fù)雜的融合在線用戶畫像和離線用戶畫像的個(gè)性化推薦,是因?yàn)楹唵位谝?guī)則或標(biāo)簽的推薦無法滿足用戶和業(yè)務(wù)側(cè)的需求。

所以不要在一開始被過于復(fù)雜的架構(gòu)綁住手腳,可以針對自身業(yè)務(wù)的需求進(jìn)行搜索/推薦的簡單架構(gòu)設(shè)計(jì),然后逐步演進(jìn)和優(yōu)化架構(gòu)。

來源:thoughtworks

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    驅(qū)動下代E/E架構(gòu)的神經(jīng)脈絡(luò)進(jìn)化—10BASE-T1S

    隨著“中央+區(qū)域”架構(gòu)演進(jìn),10BASE-T1S憑借其獨(dú)特優(yōu)勢,將成為驅(qū)動下代汽車電子電氣(E/E)架構(gòu)“神經(jīng)系統(tǒng)”進(jìn)化的關(guān)鍵技術(shù)。
    的頭像 發(fā)表于 07-08 18:17 ?490次閱讀
    驅(qū)動下<b class='flag-5'>一</b>代E/E<b class='flag-5'>架構(gòu)</b>的神經(jīng)脈絡(luò)進(jìn)化—10BASE-T1S

    晶體管架構(gòu)的演變過程

    芯片制程微米級進(jìn)入2納米時(shí)代,晶體管架構(gòu)經(jīng)歷了 Planar FET 到 MBCFET的四次關(guān)鍵演變。這不僅僅是形狀的變化,更是次次對物理極限的挑戰(zhàn)。
    的頭像 發(fā)表于 07-08 16:28 ?830次閱讀
    晶體管<b class='flag-5'>架構(gòu)</b>的演變過程

    開源鴻蒙統(tǒng)一互聯(lián)分論壇圓滿舉辦

    萬物互聯(lián)時(shí)代到來,物聯(lián)網(wǎng)設(shè)備數(shù)量及設(shè)備連接數(shù)高速增長,如何實(shí)現(xiàn)高效、穩(wěn)定的設(shè)備間通信,成為行業(yè)重要的研究方向。作為開源操作系統(tǒng),開源鴻蒙帶來了全新的技術(shù)架構(gòu)和解決方案,其統(tǒng)一互聯(lián)的技術(shù)底座為設(shè)備間的無縫協(xié)作提供了更高效的可能性。
    的頭像 發(fā)表于 06-05 15:33 ?444次閱讀

    動態(tài)IP技術(shù)演進(jìn)網(wǎng)絡(luò)基石到智能連接時(shí)代的創(chuàng)新引擎

    在萬物互聯(lián)的智能時(shí)代,IP地址早已突破"網(wǎng)絡(luò)身份證"的單屬性,成為支撐數(shù)字化變革的核心基礎(chǔ)設(shè)施。動態(tài)IP技術(shù)作為網(wǎng)絡(luò)資源分配的底層邏輯,正經(jīng)歷著工具性功能向智能化服務(wù)的深刻轉(zhuǎn)型。本文將從技術(shù)演進(jìn)、應(yīng)用創(chuàng)新與安全挑戰(zhàn)三個(gè)維度,
    的頭像 發(fā)表于 05-20 16:16 ?158次閱讀

    CPU到GPU:渲染技術(shù)的演進(jìn)和趨勢

    渲染技術(shù)是計(jì)算機(jī)圖形學(xué)的核心內(nèi)容之,它是將三維場景轉(zhuǎn)換為二維圖像的過程。渲染技術(shù)直在不斷演進(jìn)最初的CPU渲染到后來的GPU渲染,性能和質(zhì)量都有了顯著提升。
    的頭像 發(fā)表于 02-21 11:11 ?751次閱讀
    <b class='flag-5'>從</b>CPU到GPU:渲染技術(shù)的<b class='flag-5'>演進(jìn)</b>和趨勢

    計(jì)算機(jī)網(wǎng)絡(luò)架構(gòu)演進(jìn)

    計(jì)算機(jī)網(wǎng)絡(luò)架構(gòu)演進(jìn)見證了信息技術(shù)的飛速發(fā)展。早期的總線型網(wǎng)絡(luò)架構(gòu),通過條共享的通信線路連接各個(gè)節(jié)點(diǎn),結(jié)構(gòu)簡單且成本較低,但存在單點(diǎn)故障和傳輸效率不高的問題。隨著技術(shù)的發(fā)展,星型網(wǎng)絡(luò)
    的頭像 發(fā)表于 01-21 11:11 ?390次閱讀

    《算力芯片 高性能 CPUGPUNPU 微架構(gòu)分析》第3篇閱讀心得:GPU革命:圖形引擎到AI加速器的蛻變

    線程調(diào)度,與Hopper架構(gòu)的細(xì)粒度同步機(jī)制,使得異構(gòu)計(jì)算場景下的任務(wù)協(xié)同更加靈活。在我的分布式訓(xùn)練實(shí)踐中,這些特性顯著提升了模型收斂速度。 張量處理器的設(shè)計(jì)是本書點(diǎn)睛之筆。數(shù)學(xué)抽象來看,張量統(tǒng)一
    發(fā)表于 11-24 17:12

    特斯拉智能駕駛未來發(fā)展

    編者語:「智駕最前沿」微信公眾號后臺回復(fù):C-0587,獲取本文參考報(bào)告:《特斯拉視角,智能駕駛研究框架》pdf下載方式。 隨著自動駕駛技術(shù)的快速發(fā)展,智能駕駛已成為汽車行業(yè)技術(shù)競爭的焦點(diǎn)
    的頭像 發(fā)表于 11-16 16:49 ?1972次閱讀
    <b class='flag-5'>從</b>特斯拉<b class='flag-5'>看</b>智能駕駛未來發(fā)展

    OpenAI推出ChatGPT搜索功能

    近日,OpenAI再次邁出了重要的步,為其廣受好評的ChatGPT平臺添加了項(xiàng)全新的搜索功能。 據(jù)悉,這項(xiàng)被命名為“ChatGPT搜索”的新功能,將為用戶帶來前所未有的
    的頭像 發(fā)表于 11-04 10:34 ?685次閱讀

    谷歌取消“站點(diǎn)鏈接搜索框”,適應(yīng)新搜索需求

    近日,谷歌發(fā)布了則通知,決定取消搜索結(jié)果中的“站點(diǎn)鏈接搜索框”。這功能已經(jīng)陪伴了用戶十多年,它允許用戶在特定網(wǎng)站上進(jìn)行更深入的搜索,為許
    的頭像 發(fā)表于 10-23 11:20 ?669次閱讀

    架構(gòu)與設(shè)計(jì) 常見微服務(wù)分層架構(gòu)的區(qū)別和落地實(shí)踐

    前言 強(qiáng)調(diào)內(nèi)外隔離的六邊形架構(gòu),逐漸發(fā)展衍生出的層層遞進(jìn)、注重領(lǐng)域模型的洋蔥架構(gòu),再到和DDD完美契合的整潔架構(gòu)架構(gòu)風(fēng)格的不斷
    的頭像 發(fā)表于 10-22 15:34 ?662次閱讀
    <b class='flag-5'>架構(gòu)</b>與設(shè)計(jì) 常見微服務(wù)分層<b class='flag-5'>架構(gòu)</b>的區(qū)別和落地實(shí)踐

    任意波形發(fā)生器的基本架構(gòu)

    任意波形發(fā)生器(Arbitrary Waveform Generator,AWG)是信號發(fā)生器演進(jìn)過來的款信號源,其架構(gòu)的設(shè)計(jì)旨在提供高精度、高穩(wěn)定性和靈活可編程的波形信號輸出。
    的頭像 發(fā)表于 10-18 16:29 ?939次閱讀

    京東廣告投放平臺整潔架構(gòu)演進(jìn)之路

    作者:京東零售 趙嘉鐸 前言 去年開始京東廣告投放系統(tǒng)做了次以領(lǐng)域驅(qū)動設(shè)計(jì)為思想內(nèi)核的架構(gòu)升級,在深入理解DDD思想的同時(shí),我們基于廣告投放業(yè)務(wù)的本質(zhì)特征大膽地融入了自己的理解和改造。新
    的頭像 發(fā)表于 09-18 10:26 ?1229次閱讀
    京東廣告投放平臺整潔<b class='flag-5'>架構(gòu)</b><b class='flag-5'>演進(jìn)</b>之路

    月訪問量超2億,增速113%!360AI搜索成為全球增速最快的AI搜索引擎

    與傳統(tǒng)搜索引擎不同,作為AI原生搜索引擎的360AI搜索基于公開網(wǎng)絡(luò)、知識庫、大模型三大支柱。借助首創(chuàng)的 CoE 技術(shù)架構(gòu),360AI搜索
    的頭像 發(fā)表于 09-09 13:44 ?877次閱讀
    月訪問量超2億,增速113%!360AI<b class='flag-5'>搜索</b>成為全球增速最快的AI<b class='flag-5'>搜索</b>引擎

    統(tǒng)一多云管理平臺怎么用?

     統(tǒng)一多云管理平臺的使用主要涉及資源納管、費(fèi)用控制和智能運(yùn)維等方面。統(tǒng)一多云管理平臺是種能夠同時(shí)管理多種公有云、私有云以及傳統(tǒng)IT環(huán)境的資源,并實(shí)現(xiàn)自動化和服務(wù)化交付的工具。它為企業(yè)提供了強(qiáng)大
    的頭像 發(fā)表于 08-14 11:28 ?476次閱讀
    主站蜘蛛池模板: 免费观看一级特黄三大片视频 | 大乳妇女bd视频在线观看 | 四虎成人欧美精品在永久在线 | 老师别揉我胸啊嗯上课呢视频 | 亚洲最新在线观看 | 一级a爱片久久毛片 | 啪啪小视频网站 | 国产精品久久福利网站 | 一区二区中文字幕 | 久久澳门 | 国产精品久久久久久久久ktv | 夜夜天天操 | 午夜视频在线观看免费视频 | 视频一本大道香蕉久在线播放 | 欧美一区二区三区大片 | 色五月在线视频 | 人人爽天天碰天天躁夜夜躁 | 久久久久无码国产精品一区 | 日本一区不卡视频 | 最新色网站 | 国内精品久久久久影院免费 | 免费一级特黄特色大片在线观看 | 站长工具天天爽视频 | 天天拍夜夜操 | 亚洲аv电影天堂网 | 色尼玛亚洲综合 | 久久午夜视频 | 欧美一级特黄视频 | 免费性bbbb台湾 | 西西人体大胆高清啪啪欧洲 | 手机看片日本 | 2021天天操| 日韩毛片在线影视 | 一级欧美在线的视频 | 亚洲线精品一区二区三区 | 黄色一级一毛片 | 丁香六月婷婷精品免费观看 | 四虎国产精品免费观看 | 国产精品久久久久久久久kt | 日本高清色图 | 巨臀中文字幕一区二区翘臀 |