当前位置:首页 > 其它 > 正文内容

建立符合搜索抓取习惯的网站

鸥啼网5年前 (2020-07-14)其它270

1、简单明了的网站结构

Spider抓取相当于对web这个有向图进行遍历,那么一个简单明了结构层次分明的网站肯定是它所喜欢的,并尽量保证spider的可读性。

(1)树型结构最优的结构即“首页—频道—详情页”;

(2)扁平首页到详情页的层次尽量少,既对抓取友好又可以很好的传递权重。

(3)网状保证每个页面都至少有一个文本链接指向,可以使网站尽可能全面的被抓取收录,内链建设同样对排序能够产生积极作用。

(4)导航为每个页面加一个导航方便用户知晓所在路径。

(5)子域与目录的选择相信有大批的站长对此有疑问,在我们看来,当内容较少并且内容相关度较高时建议以目录形式来实现,有利于权重的继承与收敛;当内容量较多并且与主站相关度略差时建议再以子域的形式来实现。

2、简洁美观的url规则

(1)唯一性网站中同一内容页只与唯一一个url相对应,过多形式的url将分散该页面的权重,并且目标url在系统中有被滤重的风险;

(2)简洁性动态参数尽量少,保证url尽量短;

(3)美观性使得用户及机器能够通过url即可判断出页面内容的主旨;

我们推荐如下形式的url:url尽量短且易读使得用户能够快速理解,例如使用拼音作为目录名称;同一内容在系统中只产生唯一的url与之对应,去掉无意义的参数;如果无法保证url的唯一性,尽量使不同形式的url301到目标url;防止用户输错的备用域名301至主域名。

3、其他注意事项

(1)不要忽略倒霉的robots文件,默认情况下部分系统robots是封禁搜索引擎抓取的,当网站建立后及时查看并书写合适的robots文件,网站日常维护过程中也要注意定期检查;

(2)建立网站sitemap文件、死链文件,并及时通过百度站长平台进行提交;

(3)部分电商网站存在地域跳转问题,有货无货建议统一做成一个页面,在页面中标识有无货即可,不要此地区无货即返回一个无效页面,由于spider出口的有限性将造成正常页面无法收录。

(4)合理利用站长平台提供的robots、sitemap、索引量、抓取压力、死链提交、网站改版等工具。

扫描二维码推送至手机访问。

网站部分内容来自网络转载,如有侵权请联系我们删除。


本文链接:https://www.ourtrade.net/1291.html

“建立符合搜索抓取习惯的网站” 的相关文章

导致你的网站销售业绩下降的10大原因

导致你的网站销售业绩下降的10大原因

在线零售业不是一个简单好玩儿的游戏,但是最新的研究和分析可能会帮助你了解企业销售业绩下降和客户流失的问题所在。 在过去的三年时间里,Qubit公司从超过400家网站收集了用户反馈和投诉信息,并根据这些数据总结出了导致网站销售业绩下降的十大主要问题。作为一个消费者,他们对于零售网站,以及网站的用户友...

亚马逊新手卖家如何操作FBA?如何在后台实现FBA发货?

亚马逊新手卖家如何操作FBA?如何在后台实现FBA发货?

亚马逊新手卖家如何操作FBA?如何在后台实现FBA发货? 很多亚马逊新手卖家问乔帮主,要不要做FBA?该如何在后台实现FBA发货?今天乔帮主手把手教大家如何实操FBA。 (注:转发请注明出处。)   1.打开卖家后台,鼠标移到INVENTORY,点击Manage FBA...

东南亚市场“诱惑”大,第一电商Lazada抛来橄榄枝接不接?

东南亚市场“诱惑”大,第一电商Lazada抛来橄榄枝接不接?

继中国、印度之后,东南亚将成亚洲最具有诱惑力的电商市场。雨果网了解到,东盟的六大主要经济体:新加坡、马来西亚、印尼、泰国、菲律宾和越南,加起来的 网络网络零售总额到2018年将达345亿美元。2013年该值仅为70亿美元。此外,东盟地区还是世界上最大的智能手机市场之一,移动客户端交易额占据全...

Pinterest如何更好推广

Pinterest如何更好推广

Pinterest.com是美国的一家创办于2011年的正迅速成长为受世界瞩目的图片视觉社交网站。Pin(图钉)+Interest(兴趣),把自 己感兴趣的东西用图钉钉在钉板(PinBoard)上。如今该网站Alexa全球排名已经到了54位,平均每位用户每月在网站上逗留98分钟,这一时长在...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。