为什么我的网站内一些不设链接的私密性网页,也会被百度收录?
发布日期:2011-07-24 11:26:07 阅读:
-
Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。
-
网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。
-
百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:
A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化
B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容
-
如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过投诉中心反馈给我们进行解决。
北京小喷泉科技是一家专业的网络技术服务提供商,设有天津、长沙分公司,提供大型行业网站SEO项目诊断推广、企业SEO优化、网络营销推广和SEO构架下的网站建设服务,帮助企业打造创新的互联网品牌经营模式与有效的网络营销方法,创造更大的品牌势能!利用互联网营销手法,多平台,多样化进行品牌营销宣传,打造企业正面形象,诚挚为您服务,小喷泉科技欢迎您的到来,联系电话:4006661278。
责任编辑:小喷泉科技
版权所有:https://xiaopenquan.com/wenti/234.html 转载请注明出处