亚洲欧美日韩中文字幕一区二区三区,亚洲国产欧美一区三区成人,2021久久精品国产99国产精品,欧美日韩国产精品自在自线 ,国产成人精品久久

  • 鄭州軟件開發(fā)

    |

    鄭州網(wǎng)站建設(shè)

    |

    鄭州網(wǎng)站制作

    |

    APP開發(fā)

    |
  • 鄭州軟件開發(fā)電話: 15937160052
  • 網(wǎng)站建設(shè)如何分析日志文件？
  • 發(fā)表日期：2016-09-06   瀏覽：2781   關(guān)鍵詞： 鄭州網(wǎng)站建設(shè)
  • 第一部分日志文件分析

    一般我們可以通過(guò)ftp或者連接服務(wù)器，找一個(gè)名為logfiles的文件夾，里面有很多個(gè)文件，可能大家有的人看不懂，不過(guò)沒(méi)關(guān)系，咱們可以借助第三方工具愛站，愛站工具包—日志分析—選擇文件—開始分析，可以清楚清楚的看到有哪些搜索引擎哪一天來(lái)爬取過(guò)我們的哪些頁(yè)面。在這咱們需要注意的幾個(gè)事項(xiàng)：

    ①如果你網(wǎng)站內(nèi)容經(jīng)常不更新，那么蜘蛛來(lái)的頻次會(huì)越來(lái)越少

    ②如果蜘蛛不來(lái)你的網(wǎng)站爬取了，那么很可能你網(wǎng)站被k了，網(wǎng)站被k也有多種原因（可能是網(wǎng)站被掛木馬，也有可能是站長(zhǎng)自己操作問(wèn)題，后續(xù)在我的文章中會(huì)給大家詳細(xì)介紹）；

    ③搜索引擎爬取的時(shí)候空間打不開，也會(huì)導(dǎo)致搜索引擎爬取頻率比較少

    ④是死鏈接，圖片，動(dòng)畫太多，也會(huì)導(dǎo)致搜索引擎爬取頻率過(guò)少或者不爬，因?yàn)樗阉饕媸琼樦溄优廊〉模瑫r(shí)也無(wú)法抓取圖片和動(dòng)畫，死鏈接太多，蜘蛛爬不下去了，就主動(dòng)放棄不再爬取

    ⑤如果Roberts設(shè)置禁止全站被蜘蛛或機(jī)器人爬取，那么蜘蛛或機(jī)器人也不會(huì)再爬取

    第二部分Roberts協(xié)議

    通常在根目錄下，會(huì)有一個(gè)Roberts協(xié)議，Roberts協(xié)議是鑒于保護(hù)自己的網(wǎng)絡(luò)隱私去寫的一個(gè)協(xié)議，簡(jiǎn)單的理解：這個(gè)協(xié)議就是告訴蜘蛛或機(jī)器人你是否有權(quán)限爬取我的網(wǎng)站，以及你不可以爬取我的網(wǎng)站那一部分內(nèi)容。咱們截取百度的Roberts協(xié)議中的一段來(lái)看一下，如圖所示：網(wǎng)站建設(shè)之日志分析篇

    咱們可以來(lái)看一下，在Roberts協(xié)議中，*這個(gè)符號(hào)表示“所有”的意思，user-agent：yisouspider咱們就可以理解為百度允許一搜來(lái)抓取它的東西，Disallow是不允許的意思，那下面這句：Disallow/baidu意思就是不允許抓取baidu這個(gè)文件下的所有內(nèi)容，其他的同樣。最后一句：

    “User-agent: *

    Disallow: /”

    上面這句代碼的意思就是：除了我上面所列舉出來(lái)的這些蜘蛛或機(jī)器人，其他的蜘蛛或機(jī)器人都不允許抓取我網(wǎng)站上的任何東西，違者可以追究法律責(zé)任。一般一個(gè)蜘蛛或機(jī)器人去爬取一個(gè)網(wǎng)站，首先就要爬取網(wǎng)站Roberts文件，然后遵守協(xié)議去爬行。
  • 相關(guān)新聞
      • 如何搭建景區(qū)網(wǎng)站建設(shè)？
      搭建一個(gè)景區(qū)網(wǎng)站建設(shè)的很有必要的，因?yàn)樽隽司W(wǎng)站可以增加客戶對(duì)旅游景點(diǎn)的信任，還有一方面是能讓旅游企業(yè)獲得更多
      日期：2022-09-02 瀏覽：2627
      鄭州建網(wǎng)站細(xì)節(jié)分析說(shuō)明
      鄭州建網(wǎng)站要重視產(chǎn)品介紹和展示，作為網(wǎng)站建設(shè)，其最重要的一個(gè)特點(diǎn)就是能夠較好的進(jìn)行產(chǎn)品的推廣和宣傳
      日期：2021-12-26 瀏覽：3451
  • 一個(gè)企業(yè)的成長(zhǎng)，從無(wú)到有，從一個(gè)人到一群人，從一種元素到元素集合；或多或少、都要有品牌意識(shí)的存在……