一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

從架構演進和統(tǒng)一看搜索與推薦

innswaiter ? 來源:未知 ? 作者:van ? 2022-06-28 20:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

搜索與推薦的區(qū)別

1. 場景需求不同

搜索的場景故名思義,就是用戶提供想要尋找的內容的描述,系統(tǒng)返回給用戶匹配到的結果,常見的場景如文字輸入框的搜索,圖片搜索,聽音識曲,標簽篩選等,看似很多場景,其實只是用戶輸入內容的形式不同。

推薦的場景我們常見的有各大App首頁的個性化推薦(如猜你喜歡/每日歌曲推薦),選擇頁面的關聯(lián)推薦(買了還買,看了還看,買了它的用戶還買等等)等,推薦的場景更加的豐富,因為沒有用戶提供的內容的限制,場景更具多樣性,推薦方法也多種多樣,例如基于內容的推薦,基于用戶行為的推薦,協(xié)同過濾等等。

各大互聯(lián)網平臺由于服務內容不同,平臺成熟度的不同,對搜索和推薦的偏重程度也就不盡相同,但都是缺一不可。

例如對于房地產應用來說,用戶目標明確,搜索服務會帶來更大的購買力,但關聯(lián)推薦會給用戶帶來更多的選擇,同樣也是不可缺少的。

對于短視頻平臺而言,由于用戶較難通過文字或圖片提供內容的描述,那么自然會偏重推薦服務。

對于電商在初期肯定是搜索服務帶來了更多的購買率,當購買率到達瓶頸時,推薦帶來的購買率就是突破瓶頸和繼續(xù)發(fā)展的必要手段。

2. 輸入輸出不同


不論搜索還是推薦,實際上對于用戶來說,都是一個提供服務的黑盒,它能夠根據(jù)用戶/物品/場景等信息,從候選物品的池子中選出與用戶匹配的的物品列表。

不同的是對于搜索服務,還額外提供了用戶對于自己訴求的描述信息(當然可能描述的并不準確)。

輸入的區(qū)別天然的導致了用戶對于結果的不同期待:

  • 個性化程度不同

    推薦系統(tǒng)更強調個性化,甚至更注重驚喜感。往往要在準確性和多樣性之間作出權衡;搜索系統(tǒng)更強調相關性,如果搜索結果與用戶的目標不符,用戶的接受程度會很差,個性化對于搜索系統(tǒng)來說既沒意義又有風險。

  • 排的更好與搜的更全

    對于推薦系統(tǒng)來說,排序更加重要,因為只有最開始的推薦結果吸引了用戶,用戶才可能向后瀏覽。

    對于搜索系統(tǒng)來說,召回更加重要,因為用戶會主動向后瀏覽,以期望找到自己的目標,但如果最終沒有找到,也就是搜的不全,就會有很差的用戶體驗。

  • 快速滿足還是持續(xù)服務

    提到搜索系統(tǒng),往往會提到馬太效應,只有與用戶搜索的結果更為匹配的物品才會被呈現(xiàn)給用戶,讓用戶得到快速滿足,那么滿足需求的物品那么多,搜索的越準確,用戶就越不會向后瀏覽,最終點擊的熱度就只會集中在少量的物品上。這也就是為什么廣告最初誕生在搜索系統(tǒng)中的原因。

    提到推薦系統(tǒng),往往會提到長尾效應,也就是讓用戶時刻保持新鮮感和驚喜感,考慮用戶的長期興趣,提高用戶粘性,期望留住用戶,并提供持續(xù)的服務,這也就是為什么刷短視頻停不下來的原因。

  • 實時性與滯后性

    搜索的數(shù)據(jù)實時性要求是特別高的,數(shù)據(jù)常常要求秒級更新,例如一個商品已經沒有貨了就不應該被搜出來了。而推薦的數(shù)據(jù)很多是可以容忍天級更新的,由于推薦要考慮大量的用戶行為信息,一定是具有一定滯后性的。

搜索與推薦的聯(lián)系

1. 相同的本質

搜索與推薦本質上都是當前時代信息過載的產物,解決的根本思路都是通過匹配(召回)、排序為用戶在過載的信息中挑選出用戶想要的信息。只是根據(jù)業(yè)務場景的不同,在召回,排序階段考慮的側重點不同。

2. 搜索與推薦的協(xié)同作用

  • 推薦中的搜索

    推薦服務中基于內容的推薦實際上相當于一種無聲的搜索,常常在實現(xiàn)時會采用搜索服務的中的倒排索引等技術,例如基于內容的推薦,常常是通過規(guī)則或推薦模型得到用戶感興趣的內容的標簽,然后利用搜索服務的方法進行標簽搜索和匹配即可得到最終的推薦列表。

  • 搜索中的推薦

    當搜索出來符合用戶的數(shù)據(jù)量很多時,需要根據(jù)推薦服務中用戶畫像等結果幫助搜索服務匹配用戶的需求。例如周一的晚上進行搜索得到的結果列表和周五的晚上進行搜索得到結果列表就會有所差異。

推薦與搜索常常在一個頁面中協(xié)同為用戶提供服務,例如搜索引擎搜索結果頁面的關聯(lián)推薦,電商軟件搜索瀏覽頁面的相關推薦等。

架構演進與架構統(tǒng)一

搜索架構的演進


一般而言,一個企業(yè)的搜索引擎,由于在初始階段業(yè)務線不多,提供簡單的搜索服務即可。隨著業(yè)務的不斷增多,對搜索需求的不斷抽象和統(tǒng)一,逐漸可以發(fā)展為平臺階段,提供多數(shù)據(jù)源的寫入與多業(yè)務的統(tǒng)一搜索能力,不同業(yè)務的不同需求可以靈活配置。

等到業(yè)務線不斷增多,對接業(yè)務的工作占據(jù)了大部分的開發(fā)時間時,開發(fā)更加方便的運維與管理能力,幫入業(yè)務自助接入平臺就能夠進一步提高搜索功能開發(fā)的效率,此時搜索架構就進入到了運維更為便捷的云平臺的階段。

推薦架構的演進

對于推薦引擎,起步階段一般會采用基于內容的推薦方法,由于數(shù)據(jù)不足,企業(yè)初期會基于業(yè)務側提供的經驗規(guī)則對物品和用戶進行標注,然后通過在線匹配標簽的方式進行推薦。繼續(xù)發(fā)展,隨著業(yè)務的不斷豐富和迭代,會對推薦系統(tǒng)有更多的期望,當不斷修改或增加經驗規(guī)則卻滿足不了業(yè)務需求時,就需要一些基于模型的推薦方法以及個性化的推薦的服務了。再進一步,與搜索引擎一樣,推薦引擎也需要對接多個業(yè)務線,向平臺階段發(fā)展,提供統(tǒng)一的公共服務,通過配置滿足不同的業(yè)務線的需求。

架構統(tǒng)一

從上面的介紹和架構演進我們可以發(fā)現(xiàn),推薦和搜索的架構有很多可以復用的地方,因而可以進行架構的統(tǒng)一。

  1. 流程上的統(tǒng)一:

    不論是搜索還是推薦,都會經歷召回-排序-重排等流程,最終得到呈現(xiàn)給用戶的物品列表,只不過流程中各個階段的目標會不太相同。

  2. 數(shù)據(jù)與數(shù)據(jù)平臺的復用:

    被搜索的物品和被推薦的物品是統(tǒng)一的,召回排序訓練模型時所需要的埋點數(shù)據(jù)/用戶行為數(shù)據(jù)等也是統(tǒng)一的,那么自然獲取數(shù)據(jù)/處理數(shù)據(jù)的平臺自然就是可以復用的。

  3. 算法與算法平臺的復用:

    搜索和推薦發(fā)展到一定階段,當簡單的專家規(guī)則不再能夠支撐復雜的搜索和推薦需求時,都會發(fā)展到基于模型進行召回排序的階段,此時都需要根據(jù)用戶數(shù)據(jù)/物品數(shù)據(jù)/埋點數(shù)據(jù)進行模型訓練,只不過由于二者的訓練目標不同,訓練的模型的參數(shù)可能會不相同,但算法平臺或者大家常說的機器學習/AI平臺是可以復用的。

  4. A/B Test實驗平臺的復用:

    由于業(yè)務需求的不斷變化,模型的不斷更替,通過A/B Test平臺能夠通過分流的方式拿到真實的生產環(huán)境中的用戶反饋,以幫助企業(yè)不斷驗證和優(yōu)化搜索和推薦策略。

  5. 配置中心的復用:

    可以通過配置中心針對不同業(yè)務和服務配置不同的搜索和推薦策略,并且提供便捷的一鍵部署能力。

所以很多公司,在業(yè)務領域上搜索和推薦分屬于不同的部門,但很多的公共的部分都有成熟的內部平臺可以快速復用。

總結

本篇文章介紹了搜索和推薦的區(qū)別與聯(lián)系,架構演進以及架構統(tǒng)一。我們都知道架構是因為需求的擴增而不斷演進來的,例如從服務階段發(fā)展到平臺階段,是因為要提高多業(yè)務的對接效率;從基于內容的推薦到復雜的融合在線用戶畫像和離線用戶畫像的個性化推薦,是因為簡單基于規(guī)則或標簽的推薦無法滿足用戶和業(yè)務側的需求。

所以不要在一開始被過于復雜的架構綁住手腳,可以針對自身業(yè)務的需求進行搜索/推薦的簡單架構設計,然后逐步演進和優(yōu)化架構。

來源:thoughtworks

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    驅動下代E/E架構的神經脈絡進化—10BASE-T1S

    隨著“中央+區(qū)域”架構演進,10BASE-T1S憑借其獨特優(yōu)勢,將成為驅動下代汽車電子電氣(E/E)架構“神經系統(tǒng)”進化的關鍵技術。
    的頭像 發(fā)表于 07-08 18:17 ?492次閱讀
    驅動下<b class='flag-5'>一</b>代E/E<b class='flag-5'>架構</b>的神經脈絡進化—10BASE-T1S

    晶體管架構的演變過程

    芯片制程微米級進入2納米時代,晶體管架構經歷了 Planar FET 到 MBCFET的四次關鍵演變。這不僅僅是形狀的變化,更是次次對物理極限的挑戰(zhàn)。
    的頭像 發(fā)表于 07-08 16:28 ?833次閱讀
    晶體管<b class='flag-5'>架構</b>的演變過程

    開源鴻蒙統(tǒng)一互聯(lián)分論壇圓滿舉辦

    萬物互聯(lián)時代到來,物聯(lián)網設備數(shù)量及設備連接數(shù)高速增長,如何實現(xiàn)高效、穩(wěn)定的設備間通信,成為行業(yè)重要的研究方向。作為開源操作系統(tǒng),開源鴻蒙帶來了全新的技術架構和解決方案,其統(tǒng)一互聯(lián)的技術底座為設備間的無縫協(xié)作提供了更高效的可能性。
    的頭像 發(fā)表于 06-05 15:33 ?444次閱讀

    動態(tài)IP技術演進網絡基石到智能連接時代的創(chuàng)新引擎

    在萬物互聯(lián)的智能時代,IP地址早已突破"網絡身份證"的單屬性,成為支撐數(shù)字化變革的核心基礎設施。動態(tài)IP技術作為網絡資源分配的底層邏輯,正經歷著工具性功能向智能化服務的深刻轉型。本文將從技術演進、應用創(chuàng)新與安全挑戰(zhàn)三個維度,
    的頭像 發(fā)表于 05-20 16:16 ?163次閱讀

    CPU到GPU:渲染技術的演進和趨勢

    渲染技術是計算機圖形學的核心內容之,它是將三維場景轉換為二維圖像的過程。渲染技術直在不斷演進,最初的CPU渲染到后來的GPU渲染,性能和質量都有了顯著提升。
    的頭像 發(fā)表于 02-21 11:11 ?751次閱讀
    <b class='flag-5'>從</b>CPU到GPU:渲染技術的<b class='flag-5'>演進</b>和趨勢

    計算機網絡架構演進

    計算機網絡架構演進見證了信息技術的飛速發(fā)展。早期的總線型網絡架構,通過條共享的通信線路連接各個節(jié)點,結構簡單且成本較低,但存在單點故障和傳輸效率不高的問題。隨著技術的發(fā)展,星型網絡
    的頭像 發(fā)表于 01-21 11:11 ?390次閱讀

    《算力芯片 高性能 CPUGPUNPU 微架構分析》第3篇閱讀心得:GPU革命:圖形引擎到AI加速器的蛻變

    線程調度,與Hopper架構的細粒度同步機制,使得異構計算場景下的任務協(xié)同更加靈活。在我的分布式訓練實踐中,這些特性顯著提升了模型收斂速度。 張量處理器的設計是本書點睛之筆。數(shù)學抽象來看,張量統(tǒng)一
    發(fā)表于 11-24 17:12

    特斯拉智能駕駛未來發(fā)展

    編者語:「智駕最前沿」微信公眾號后臺回復:C-0587,獲取本文參考報告:《特斯拉視角,智能駕駛研究框架》pdf下載方式。 隨著自動駕駛技術的快速發(fā)展,智能駕駛已成為汽車行業(yè)技術競爭的焦點
    的頭像 發(fā)表于 11-16 16:49 ?1973次閱讀
    <b class='flag-5'>從</b>特斯拉<b class='flag-5'>看</b>智能駕駛未來發(fā)展

    OpenAI推出ChatGPT搜索功能

    近日,OpenAI再次邁出了重要的步,為其廣受好評的ChatGPT平臺添加了項全新的搜索功能。 據(jù)悉,這項被命名為“ChatGPT搜索”的新功能,將為用戶帶來前所未有的
    的頭像 發(fā)表于 11-04 10:34 ?685次閱讀

    谷歌取消“站點鏈接搜索框”,適應新搜索需求

    近日,谷歌發(fā)布了則通知,決定取消搜索結果中的“站點鏈接搜索框”。這功能已經陪伴了用戶十多年,它允許用戶在特定網站上進行更深入的搜索,為許
    的頭像 發(fā)表于 10-23 11:20 ?669次閱讀

    架構與設計 常見微服務分層架構的區(qū)別和落地實踐

    前言 強調內外隔離的六邊形架構,逐漸發(fā)展衍生出的層層遞進、注重領域模型的洋蔥架構,再到和DDD完美契合的整潔架構。架構風格的不斷
    的頭像 發(fā)表于 10-22 15:34 ?662次閱讀
    <b class='flag-5'>架構</b>與設計 常見微服務分層<b class='flag-5'>架構</b>的區(qū)別和落地實踐

    任意波形發(fā)生器的基本架構

    任意波形發(fā)生器(Arbitrary Waveform Generator,AWG)是信號發(fā)生器演進過來的款信號源,其架構的設計旨在提供高精度、高穩(wěn)定性和靈活可編程的波形信號輸出。
    的頭像 發(fā)表于 10-18 16:29 ?940次閱讀

    京東廣告投放平臺整潔架構演進之路

    作者:京東零售 趙嘉鐸 前言 去年開始京東廣告投放系統(tǒng)做了次以領域驅動設計為思想內核的架構升級,在深入理解DDD思想的同時,我們基于廣告投放業(yè)務的本質特征大膽地融入了自己的理解和改造。新
    的頭像 發(fā)表于 09-18 10:26 ?1229次閱讀
    京東廣告投放平臺整潔<b class='flag-5'>架構</b><b class='flag-5'>演進</b>之路

    月訪問量超2億,增速113%!360AI搜索成為全球增速最快的AI搜索引擎

    與傳統(tǒng)搜索引擎不同,作為AI原生搜索引擎的360AI搜索基于公開網絡、知識庫、大模型三大支柱。借助首創(chuàng)的 CoE 技術架構,360AI搜索
    的頭像 發(fā)表于 09-09 13:44 ?877次閱讀
    月訪問量超2億,增速113%!360AI<b class='flag-5'>搜索</b>成為全球增速最快的AI<b class='flag-5'>搜索</b>引擎

    統(tǒng)一多云管理平臺怎么用?

     統(tǒng)一多云管理平臺的使用主要涉及資源納管、費用控制和智能運維等方面。統(tǒng)一多云管理平臺是種能夠同時管理多種公有云、私有云以及傳統(tǒng)IT環(huán)境的資源,并實現(xiàn)自動化和服務化交付的工具。它為企業(yè)提供了強大
    的頭像 發(fā)表于 08-14 11:28 ?476次閱讀