。有些网站对搜索引擎不友好, 阻碍了蜘蛛爬行和抓取网页, 这种情况被称为蜘蛛陷阱。常见的蜘蛛陷阱主要有Flash (如果要使用Flash, 必须对首页和html版本之间加一个超链接。这个超链接要加在Flash文件之外的HTML代码中, 有了这个超链接之后, 搜索引擎才可以抓取后面的HTML页面) 、Session ID的使用 (Session ID使用时, 用户每次访问网站都会生成一个唯一的Session ID, 放在URL的最后面, 那么同一个页面的URL也将不同, 这种现象是不合理的, 因此建议跟踪用户访问使用cookies代替Session ID) 、各种跳转 (搜索引擎对除了301之外的跳转都很敏感, 如302跳转、Flash跳转、Java Script跳转、如使用跳转, 建议使用搜索引擎推荐的301跳转) 、框架结构 (Frame) 的使用 (搜索引擎无法读取使用框架设计的网页HTML代码, 只能读取调用该网页的HTML代码, 如果你还使用框架结构, 请赶紧换掉) 、javascript链接 (有些网站为了实现所谓的酷炫效果, 使用javascript生成导航系统, 但搜索引擎根本无法抓取javascript里的文字, 建议使用CSS (层叠样式表) 去实现网页酷炫效果) 。
文章源自张俊SEM-https://www.zhangjunsem.com/24708.html
声明：转载此文是出于传递更多学习交流目的。若有来源标注错误或侵犯了您的合法权益，请作者持权属证明与本网联系，我们将及时更正、删除，谢谢。本站部分图文来源于网络，仅供学习交流，发表作品观点仅代表作者本人，本站仅提供信息存储空间服务，不承担连带责任。如有侵权，请及时联系管理员删除。
评论