亚洲欧美日韩中文字幕一区二区三区,亚洲国产欧美一区三区成人,2021久久精品国产99国产精品,欧美日韩国产精品自在自线 ,国产成人精品久久

  • 鄭州軟件開發(fā)

    |

    鄭州網(wǎng)站建設(shè)

    |

    鄭州網(wǎng)站制作

    |

    APP開發(fā)

    |
  • 鄭州軟件開發(fā)電話: 15937160052
  • 網(wǎng)站建設(shè)之日志分析重要性
  • 發(fā)表日期：2016-08-14   瀏覽：2290   關(guān)鍵詞： 鄭州網(wǎng)站建設(shè)
  • 第一部分日志文件分析

    一般我們可以通過ftp或者連接服務(wù)器，找一個(gè)名為logfiles的文件夾，里面有很多個(gè)文件，可能大家有的人看不懂，不過沒關(guān)系，咱們可以借助第三方工具愛站，愛站工具包—日志分析—選擇文件—開始分析，可以清楚清楚的看到有哪些搜索引擎哪一天來爬取過我們的哪些頁面。在這咱們需要注意的幾個(gè)事項(xiàng)：

    ①如果你網(wǎng)站內(nèi)容經(jīng)常不更新，那么蜘蛛來的頻次會(huì)越來越少

    ②如果蜘蛛不來你的網(wǎng)站爬取了，那么很可能你網(wǎng)站被k了，網(wǎng)站被k也有多種原因（可能是網(wǎng)站被掛木馬，也有可能是站長(zhǎng)自己操作問題，后續(xù)在我的文章中會(huì)給大家詳細(xì)介紹）；

    ③搜索引擎爬取的時(shí)候空間打不開，也會(huì)導(dǎo)致搜索引擎爬取頻率比較少

    ④是死鏈接，圖片，動(dòng)畫太多，也會(huì)導(dǎo)致搜索引擎爬取頻率過少或者不爬，因?yàn)樗阉饕媸琼樦溄优廊〉�，同時(shí)也無法抓取圖片和動(dòng)畫，死鏈接太多，蜘蛛爬不下去了，就主動(dòng)放棄不再爬取

    ⑤如果Roberts設(shè)置禁止全站被蜘蛛或機(jī)器人爬取，那么蜘蛛或機(jī)器人也不會(huì)再爬取

    第二部分Roberts協(xié)議

    通常在根目錄下，會(huì)有一個(gè)Roberts協(xié)議，Roberts協(xié)議是鑒于保護(hù)自己的網(wǎng)絡(luò)隱私去寫的一個(gè)協(xié)議，簡(jiǎn)單的理解：這個(gè)協(xié)議就是告訴蜘蛛或機(jī)器人你是否有權(quán)限爬取我的網(wǎng)站，以及你不可以爬取我的網(wǎng)站那一部分內(nèi)容。咱們截取百度的Roberts協(xié)議中的一段來看一下，如圖所示：網(wǎng)站建設(shè)之日志分析篇

    咱們可以來看一下，在Roberts協(xié)議中，*這個(gè)符號(hào)表示“所有”的意思，user-agent：yisouspider咱們就可以理解為百度允許一搜來抓取它的東西，Disallow是不允許的意思，那下面這句：Disallow/baidu意思就是不允許抓取baidu這個(gè)文件下的所有內(nèi)容，其他的同樣。最后一句：

    “User-agent: *

    Disallow: /”

    上面這句代碼的意思就是：除了我上面所列舉出來的這些蜘蛛或機(jī)器人，其他的蜘蛛或機(jī)器人都不允許抓取我網(wǎng)站上的任何東西，違者可以追究法律責(zé)任。一般一個(gè)蜘蛛或機(jī)器人去爬取一個(gè)網(wǎng)站，首先就要爬取網(wǎng)站Roberts文件，然后遵守協(xié)議去爬行。
  • 相關(guān)新聞
      • 如何搭建景區(qū)網(wǎng)站建設(shè)？
      搭建一個(gè)景區(qū)網(wǎng)站建設(shè)的很有必要的，因?yàn)樽隽司W(wǎng)站可以增加客戶對(duì)旅游景點(diǎn)的信任，還有一方面是能讓旅游企業(yè)獲得更多
      日期：2022-09-02 瀏覽：2627
      鄭州建網(wǎng)站細(xì)節(jié)分析說明
      鄭州建網(wǎng)站要重視產(chǎn)品介紹和展示，作為網(wǎng)站建設(shè)，其最重要的一個(gè)特點(diǎn)就是能夠較好的進(jìn)行產(chǎn)品的推廣和宣傳
      日期：2021-12-26 瀏覽：3451
  • 一個(gè)企業(yè)的成長(zhǎng)，從無到有，從一個(gè)人到一群人，從一種元素到元素集合；或多或少、都要有品牌意識(shí)的存在……