东莞式服务

                        0755-21010815 13726728778

                        網站seo優化之robots寫法說明教程-深圳時代達信

                        來源:深圳時代達信 瀏覽:933 時間:2017-11-27 10:17:08

                        網站seo優化之robots寫法說明教程-深圳時代達信

                          robots協議能夠保護我們的一些文件不暴露在搜索引擎之下,從而有效的控制蜘蛛的爬取路徑,為我們站長做好seo創造必要的條件。尤其是我們的網站剛剛創建,有些內容還不完善,暫時還不想被搜索引擎收錄時。

                          robots.txt文件是網站的一個純文本文件,它是給搜索引擎蜘蛛看的。搜索引擎蜘蛛爬行道我們的網站首先就是抓取這個文件,根據里面的內容來決定對網站文件訪問的范圍。

                          robots.txt文件應該放在網站根目錄下。

                          在一個站點上只能有一個"/robots.txt"文件,而且文件名的每個字母要求全部是小寫。

                        網站seo優化之robots寫法說明教程

                          robots.txt文件用法舉例

                          例1.禁止所有搜索引擎訪問網站的任何部分

                          下載該robots.txt文件User-agent:*

                          Disallow:/

                          例2.允許所有的robot訪問

                          (或者也可以建一個空文件"/robots.txt"file)

                          User-agent:*

                          Disallow:

                          例3.禁止某個搜索引擎的訪問

                          User-agent:BadBot

                          Disallow:/

                          例4.允許某個搜索引擎的訪問

                          User-agent:baiduspider

                          Disallow:

                          User-agent:*

                          Disallow:/

                          一個簡單例子

                          在這個例子中,該網站有三個目錄對搜索引擎的訪問做了限制,即搜索引擎不會訪問這三個目錄。

                          需要注意的是對每一個目錄必須分開聲明,而不要寫成"Disallow:/cgi-bin//tmp/"。

                          User-agent:后的*具有特殊的含義,代表"anyrobot",所以在該文件中不能有"Disallow:

                          /tmp/*"or"Disallow:*.gif"這樣的記錄出現.

                          User-agent:*

                          Disallow:/cgi-bin/

                          Disallow:/tmp/

                          Disallow:/~joe/

                           

                        欄目最新信息

                        地址 · ADDRESS

                        地址:深圳市龍華區和平路32號鴻華中心1309

                        郵箱:bank@shidaidaxin.com

                        點擊查看更多案例

                        聯系 · CALL TEL

                        0755-21010815

                        非工作時間請撥打:13726728778

                        業務QQ: 871 978 666    售后/投訴QQ: 871 808 666

                        危機公關公司輿情公關公司
                        ? 2019 時代達信(深圳)科技有限公司 版權所有   粵ICP備17064298號-1  網站地圖

                        东莞式服务