發(fā)布日期: 9/11/2019 10:08:51 AM 點擊量: 1499
搜索引擎,通常指的是收集了因特網(wǎng)上幾千萬到幾十億個網(wǎng)頁并對網(wǎng)頁中的每一個詞(即關鍵詞)進行索引,建立索引數(shù)據(jù)庫的全文搜索引擎,但是搜索引擎也是有原理的您知道嗎?來跟著慈溪網(wǎng)站建設一起來了解下搜索引擎原理都是什么吧!當用戶查找某個關鍵詞的時候,所有在頁面內(nèi)容中包含了該關鍵詞的網(wǎng)頁都將作為搜索結(jié)果被搜出來。在經(jīng)過復雜的算法進行排序后,這些結(jié)果將按照與搜索關鍵詞的相關度高低,依次排列。根據(jù)自己的優(yōu)化程度,獲得相應的名次。
原理概述
在搜索引擎的后臺,有一些用于搜集網(wǎng)頁信息的程序。所收集的信息一般是能表明網(wǎng)站內(nèi)容(包括網(wǎng)頁本身、網(wǎng)頁的URL地址、構成網(wǎng)頁的代碼以及進出網(wǎng)頁的連接)的關鍵詞或者短語。接著將這些信息的索引存放到數(shù)據(jù)庫中。
搜索引擎的系統(tǒng)架構和運行方式吸收了信息檢索系統(tǒng)設計中許多有價值的經(jīng)驗,也針對萬維網(wǎng)數(shù)據(jù)和用戶的特點進行了許多修改,如右圖所示的搜索引擎系統(tǒng)架構。其核心的文檔處理和查詢處理過程與傳統(tǒng)信息檢索系統(tǒng)的運行原理基本類似,但其所處理的數(shù)據(jù)對象即萬維網(wǎng)數(shù)據(jù)的繁雜特性決定了搜索引擎系統(tǒng)必須進行系統(tǒng)結(jié)構的調(diào)整,以適應處理數(shù)據(jù)和用戶查詢的需要。
爬行和抓取
搜索引擎派出一個能夠在網(wǎng)上發(fā)現(xiàn)新網(wǎng)頁并抓文件的程序,這個程序通常稱之為蜘蛛(Spider)。寧波網(wǎng)站建設搜索引擎從已知的數(shù)據(jù)庫出發(fā),就像正常用戶的瀏覽器一樣訪問這些網(wǎng)頁并抓取文件。搜索引擎通過這些爬蟲去爬互聯(lián)網(wǎng)上的外鏈,從這個網(wǎng)站爬到另一個網(wǎng)站,去跟蹤網(wǎng)頁中的鏈接,訪問更多的網(wǎng)頁,這個過程就叫爬行。這些新的網(wǎng)址會被存入數(shù)據(jù)庫等待搜索。所以跟蹤網(wǎng)頁鏈接是搜索引擎蜘蛛(Spider)發(fā)現(xiàn)新網(wǎng)址的最基本的方法,所以反向鏈接成為搜索引擎優(yōu)化的最基本因素之一。搜索引擎抓取的頁面文件與用戶瀏覽器得到的完全一樣,抓取的文件存入數(shù)據(jù)庫。
建立索引
蜘蛛抓取的頁面文件分解、分析,并以巨大表格的形式存入數(shù)據(jù)庫,這個過程即是索引(index).在索引數(shù)據(jù)庫中,網(wǎng)頁文字內(nèi)容,關鍵詞出現(xiàn)的位置、字體、顏色、加粗、斜體等相關信息都有相應記錄。
搜索詞處理
用戶在搜索引擎界面輸入關鍵詞,單擊“搜索”按鈕后,搜索引擎程序即對搜索詞進行處理,如中文特有的分詞處理,去除停止詞,判斷是否需要啟動整合搜索,判斷是否有拼寫錯誤或錯別字等情況。搜索詞的處理必須十分快速。
排序
對搜索詞處理后,搜索引擎程序便開始工作,從索引數(shù)據(jù)庫中找出所有包含搜索詞的網(wǎng)頁,并且根據(jù)排名算法計算出哪些網(wǎng)頁應該排在前面,然后按照一定格式返回到“搜索”頁面。
再好的搜索引擎也無法與人相比,這就是為什么網(wǎng)站要進行搜索引擎優(yōu)化。余姚網(wǎng)站建設沒有SEO的幫助,搜索引擎常常并不能正確的返回最相關、最權威、最有用的信息。
數(shù)據(jù)結(jié)構
搜索引擎的核心數(shù)據(jù)結(jié)構為倒排文件(也稱倒排索引),倒排索引是指用記錄的非主屬性值(也叫副鍵)來查找記錄而組織的文件叫倒排文件,即次索引。倒排文件中包括了所有副鍵值,并列出了與之有關的所有記錄主鍵值,主要用于復雜查詢。慈溪微信營銷與傳統(tǒng)的SQL查詢不同,在搜索引擎收集完數(shù)據(jù)的預處理階段,搜索引擎往往需要一種高效的數(shù)據(jù)結(jié)構來對外提供檢索服務。而現(xiàn)行最有效的數(shù)據(jù)結(jié)構就是“倒排文件”。倒排文件簡單一點可以定義為“用文檔的關鍵詞作為索引,文檔作為索引目標的一種結(jié)構(類似于普通書籍中,索引是關鍵詞,書的頁面是索引目標)。