中文字幕在线中乱码,青青青国产最新视频在线观看,无遮挡免费一级毛片视频,激情国产原创在线观看

robots/爬蟲協議

2013年06月06日10:14 | 中國發展門戶網 www.chinagate.cn | 給編輯寫信 字號：T|T
關鍵詞： 搜狗 搜索引擎 輸入法 抓取 robots 超級短信 微軟 隱私 用戶信息 音頻
robots協議也稱爬蟲協議，網站通過robots協議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取。robots協議是國際互聯網界通行的道德規范，其目的是保護網站數據和敏感信息、確保用戶個人信息和隱私不被侵犯。
返回頂部文章來源： 中國發展門戶網