曰批免费视频播放免费,一区二区三区四区无码日韩,无码不卡免费v片在线观看,久久婷婷人人澡人人9797

robots/爬蟲協議

2013年06月06日10:14 | 中國發展門戶網 www.chinagate.cn | 給編輯寫信 字號:T|T
關鍵詞: 搜狗 搜索引擎 輸入法 抓取 robots 超級短信 微軟 隱私 用戶信息 音頻
robots協議也稱爬蟲協議,網站通過robots協議告訴搜索引擎哪些頁面可以抓取,哪些頁面不能抓取。robots協議是國際互聯網界通行的道德規范,其目的是保護網站數據和敏感信息、確保用戶個人信息和隱私不被侵犯。
返回頂部文章來源: 中國發展門戶網