<noframes id="h9jpd"><address id="h9jpd"><nobr id="h9jpd"></nobr></address>

<form id="h9jpd"><nobr id="h9jpd"><th id="h9jpd"></th></nobr></form>

<form id="h9jpd"><th id="h9jpd"><th id="h9jpd"></th></th></form>

    <noframes id="h9jpd"><span id="h9jpd"><span id="h9jpd"></span></span>
    <span id="h9jpd"><span id="h9jpd"><track id="h9jpd"></track></span></span>

    <noframes id="h9jpd"><form id="h9jpd"></form>
    <form id="h9jpd"><th id="h9jpd"></th></form>
    咨詢,就免費贈送域名與服務器,咨詢熱線:18923197528當前位置: 主頁 > 網站優化 > SEO技術 >
    推薦內容
    聯系我們
    QQ:835763446
    電話咨詢:18923197528
    E-mail:1261182346@qq.com
    地址:佛山市禪城區江灣三路28號 佛山軟件產業園8號樓6樓

    robots.txt使用時的注意事項

    文章來源:http://www.fsyiteng.cn 文章作者:佛山SEO/網站建設 2021-01-30

     robots.txt文件同時也有一定的風險,里面的隱私文檔最好不要寫在里面,否則的話容易給攻擊者指明了網站的目錄結構和私密數據所在的位置。設置訪問權限,對您的隱私內容實施密碼保護,這樣,攻擊者便無從進入。

      1)robots.txt必須放置在站點的根目錄下,而且文件名必須全部小寫。

      2)不要在robots.txt文件中設置所有的文件都可以被搜索蜘蛛抓取。

      3)為安全考慮,建議很重要的文件夾不要寫在robots.txt文件中。

      常見搜索引擎蜘蛛Robots名字:

      百度Baiduspider :http://www.baidu.com

      360搜索360Spider:https://www.so.com/

      SOSOSosospider:https://www.sogou.com/

      有道YoudaoBot/YodaoBot:http://www.yodao.com/

      搜狗Sogou News Spider:https://www.sogou.com/

      MSNmsnbot/msnbot-media:http://www.msn.com/zh-cn

      谷歌Googlebot :http://www.google.com

      雅虎Inktomi Slurp :http://www.yahoo.com

      必應MSNBOT :http://search.msn.com

    日韩新片_久久中文字幕免费高清_漂亮人妻被中出中文字幕_寡妇的批日起又紧水又多_狐妖小红娘在线观看_亚洲美女网