「网站怎么禁止收录」网站首页大量重复收录，我们该如何解决

网站首页大量重复收录，我们该如何解决

对于SEO运营而言 ，每时每刻都会发生着各种问题
，有的时候如果你不认真与细心可能问题发生很久我们都没有办法进行合理的处理。

特别是关于首页重复收录的问题，如果你的首页并没有布局关键词排名 ，亦或是不重要
，我们很难发现这些细节性的问题 。

那么，网站首页大量重复收录 ，我们该如何解决？

根据以往SEO诊断的经验
，蝙蝠侠IT，将通过如下内容阐述：

1、首页翻页

对于网站首页而言 ，我们在做SEO的过程中
，经常有一些CMS系统会自带翻页等相关功能，一般而言会造成大量的重复性首页的展现
。

通常的展现形式如：domain/page_*.html

如果你的网站首页底部附带分页展现的话 ，基于首页权重的优势 ，理论上搜索引擎收录这些翻页的首页就很可能出现
，并且概率极高。

而这个时候，我们在选择如何处理这个问题的时候 ，我认为需要一份为二
，比如：

①如果你首页只做品牌词排名，我建议不需要考量重复性收录的问题 。

②如果你首页做了一些行业关键词排名 ，这个时候我们需要处理一下重复性翻页问题
。

通常我们针对翻页造成首页大量重复收录的解决办法主要包括：

①合理的使用Canioncal标签
，标注首页的唯一性。

②利用nofollow去禁止分页的爬行，这样有利于用户体验 ，但不利于百度蜘蛛爬行 。

③如果你是操作谷歌seo
，我们认为你可以采用dofollow，noindex策略
。（目前 ，百度貌似并不支持。）

从目前来看
，相对合理化的处理方式就是用Canonical标注，但是有的时候效果也不理想 ，如果想完全杜绝 ，可以不展现
，并且屏蔽抓取 。

2 、动态参数

你是否偶尔会遇到这样一个问题，突然有一天在查询自己品牌词的时候 ，发现首页收录了大量动态参数的页面
，这让人很苦恼，通常主要表现如下三个方面：

①随机动态参数

你可能经常会看到这样的动态参数 ，比如：domain/？_aaa=0.987等等这样形态的链接
，很多时候可能是一些网站流量统计来路的计算
。

②恶意做外链

所谓的恶意外链，我们在早期黑帽SEO策略中 ，可能提到过类似的案例
，比如：

domian/?https://domain_123*.html

这样的链接形式，其中主要的目的就是为自己的第三方网址进行外链建设与推广。

③服务器配置问题

如果你的网站具有一定的访问量 ，经常可能会遭遇CC攻击等相关问题
，这个时候有的SEO小伙伴可能会配置一些安全防护措施，比如：安全狗 。

如果你配置不当 ，可能就会产生这样的情况：网站首页域名后缀出现domain/?WebShieldDRSessionVerify这样的问题 。

而针对上述三种情况 ，我们统一给出的解决方案目前只能是在robots.txt中
，屏蔽动态参数
。

而对于已经收录的大量首页网址，可以不用处理。

3
、首页首选域

造成网站首页重复性收录的问题 ，首选域是一个老生常谈的话题
，简单理解，你的首页展现有不同的版本 ，比如：index.html的收录和独立域名的展现 。

而面对多个网站首选域造成重复性收录的问题
，我们认为你可能需要进行有效的301重定向
。

总结：对于网站首页大量重复性收录的问题，仍然有诸多细节需要讨论 ，而上述内容
，仅供参考！

文章被百度收录了别人都看得到了，怎么可以不让收录

感谢邀请 ，回答你的问题之前
，还是有个问题先要问问你。

别人做网站都是希望自己的文章能被收录，反而你是不想文章被收录 。

那么我想问问你 ，你是想做一个隐私的网站吗 ，只有通过网站链接进入你网站才能看到文章的那种吗？还是说不想别人看到你网站的任何内容
，包括从网站地址进入你网站都看不到的那种？

回答一：如果是不想别人通过搜索看到你的文章
。

如果不想让别人搜索关键词查询到你的文章页面，那么你可以给你网站的robots设置里面添加一个禁止抓取条件 ，告诉蜘蛛你的文章页面不需要抓取
，看下你的文章发布之后是在那么文件夹里面，然后把这个文件夹的路径写到robots里面 ，并且用上禁止抓取的标签来告诉蜘蛛就行了。这种做法可以让你写的文章不在被蜘蛛抓取
，自然也就不会收录，但这仅仅是针对的文章页面 ，其他的页面还是会收录的 。

回答二：不想让任何人看到你网站的内容
，做一个隐私站
。

如果你是想做一个隐私站，类似于小时候写的日记那种 ，那么教你一个方法
，robots全面禁止蜘蛛的抓取，其次通过重定向设置把网站的主域名跳转到其他的网站或者错误的链接 ，然后再自己自定义设置一个链接重定向到你官网中 ，这样别人即使知道你网站的域名也进入不到你的网站
，因为他们知道的那个域名已经被重定向到其他的地方了，而你自己通过自定义设置的域名就可以直接进入到自己的网站里面。（这个方法虽然我没有去用过 ，但是理论上应该是可以实现的）

如何禁止搜索引擎收录网站内容

robots.txt方法编辑代码如下:User-agent: *Disallow: /网页代码方法在网站首页代码之间
，加入代码，此标记禁止搜索引擎抓取网站并显示网页快照 。在网站首页代码之间 ，加入即可禁止百度搜索引擎抓取网站并显示网页快照
。在网站首页代码之间
，加入即可禁止谷歌搜索引擎抓取网站并显示网页快照。

如何不让搜索引擎收录网站

禁止被搜索引擎收录内容，可以使用robots文件进行屏蔽 。
格式：User-agent:*Disallow:网址 文件对抓取网络的搜索引擎漫游器（称为漫游器）进行限制 。
这些漫游器是自动的 ，在其访问网页前会查看是否存在防止其访问特定网页的 文件
。
仅当您的网站包含不希望搜索引擎编入索引的内容时
，才需要使用 文件。
如果您希望搜索引擎将网站上的所有内容编入索引，则不需要 文件（甚至连空文件也不需要） 。
更多内容请访问：

如何禁止百度收录自己的网站

你不提交就不会收录了 如果已经提交了 就在根目录加个robot.txt文件 禁止蜘蛛爬取所有内容就行了 robots.txt文件格式可以网上搜