在網(wǎng)站建設(shè)的網(wǎng)站結(jié)構(gòu)分析之前，要理解搜索引擎蜘蛛是擬人化的算法而已。算法就是按部就班的執(zhí)行事先設(shè)計(jì)的抓取策略，所以良好的網(wǎng)站結(jié)構(gòu)具備引導(dǎo)、分配權(quán)重、提高抓取效率等作用，只有內(nèi)部框架搭建好之后，內(nèi)容的布局才能井然有序，蜘蛛才能有序爬行。
       一邏輯上全部爬行:
          1、網(wǎng)站結(jié)構(gòu)優(yōu)化
          網(wǎng)站物理結(jié)構(gòu)，即基于內(nèi)容聚合的目錄及文件位置決定的結(jié)構(gòu)。目前的主流思維就是網(wǎng)站扁平化設(shè)計(jì)，即平行結(jié)構(gòu)。
          主要實(shí)現(xiàn)方式：
          A、簡(jiǎn)單的上下頁(yè)操作；
          B、在A的基礎(chǔ)上增加頁(yè)面的選擇性；
          C、目前主流的列表頁(yè)設(shè)計(jì)方式交流性比較合理
  
         頁(yè)的扁平化設(shè)計(jì)，頁(yè)一般是權(quán)重高的頁(yè)面，也是蜘蛛先訪問(wèn)的頁(yè)面。所以在頁(yè)鏈接對(duì)于頁(yè)面的“重要性”有一定的影響，但往往一個(gè)網(wǎng)站的頁(yè)面成千上萬(wàn)，頁(yè)的鏈接數(shù)理論上維持-100-150是合理的，所以將想要頻道頁(yè)，詳細(xì)頁(yè)在頁(yè)留下鏈接，實(shí)現(xiàn)邏輯上頁(yè)扁平化設(shè)計(jì)。同樣適用頻道頁(yè)等聚合屬性的頁(yè)面。
         那么問(wèn)題來(lái)了，面對(duì)數(shù)量巨大頁(yè)面，如何保證都可以實(shí)現(xiàn)被爬行抓取？
         樹型結(jié)構(gòu)的輔助，就是為了解決扁平化帶來(lái)的不足，在導(dǎo)航欄，面包屑導(dǎo)航等設(shè)計(jì)頁(yè)面層思維，輔助蜘蛛對(duì)網(wǎng)站結(jié)構(gòu)的理解。
         總體上扁平化+樹型結(jié)構(gòu)才是合理的網(wǎng)站結(jié)構(gòu)優(yōu)化策略組合。
        2、鏈接結(jié)構(gòu)優(yōu)化
        兩種蜘蛛抓取不到的頁(yè)面：網(wǎng)站本身不希望被收錄的頁(yè)面；沒(méi)有鏈接到達(dá)的頁(yè)面，即孤島頁(yè)面。對(duì)于沒(méi)有被頁(yè)推薦的頁(yè)面，可以再內(nèi)鏈上補(bǔ)充。合理的內(nèi)鏈就是一個(gè)四通八達(dá)、井然有序的交通系統(tǒng)，蜘蛛就是來(lái)往的車輛。社會(huì)化、描文本、設(shè)置鏈接入口等。
        3、Domain結(jié)構(gòu)優(yōu)化
        主要是二域名和二目錄的選擇策略。沒(méi)有的好與不好，只有適應(yīng)當(dāng)前發(fā)展的核心才是第重要的。所以要根據(jù)自身特點(diǎn)選擇合理的Domain策略。
       二、重要性的主導(dǎo)
       對(duì)于搜索引擎來(lái)說(shuō)，什么樣的頁(yè)面會(huì)被認(rèn)為“更重要”？有句話是這么說(shuō)的：每一個(gè)鏈接都是一個(gè)投票，意思是：頁(yè)面的所有鏈接都是投票。在搜索引擎看來(lái)：獲得更多內(nèi)部投票的網(wǎng)頁(yè)來(lái)說(shuō)更加重要。 
      三、網(wǎng)頁(yè)的標(biāo)簽：關(guān)鍵詞
       搜索引擎在分析頁(yè)面的內(nèi)容是優(yōu)先從TDK入手，即title\description\keyword；之后就是H標(biāo)簽、ALT標(biāo)簽；后是TF-IDF，即詞頻-文件頻率。從這三個(gè)關(guān)聯(lián)度定義頁(yè)面的“標(biāo)簽”，即抓取時(shí)頁(yè)面定義的關(guān)鍵詞。
      如果要了解更多的信息 搜索 深圳市獨(dú)占網(wǎng)絡(luò)科技有限公司 或者 http://www.ykfic.cn  在線咨詢了解