内容导航：
一、网站不被收录的原因有哪些
网站不收录最容易忽视的地方404抓取错误
如果搜索引擎无法搜索任何网页 ，则无法抓取它们 ，确保所有网页可以轻松地被搜索引擎抓取很重要。从而使网站轻松编入牵引 。
网站外部缺乏高质量外链
网站的高质量外链对网站排名仍然是有作用的，网站缺少外链或者优质外链太少 ，也会影响网站不收录的原因之一 。到高权重平台发布相关外链可以吸引蜘蛛 ，可以增加网站收录速度的。
重复内容过多
如果网站重复内容过多，则会导致搜索引擎混乱，而不会对往网站进行牵引 。如果多个网址反弹到相同额度内容则会创建一个重复的问题导致网站无法获取收录的主要原因 。
框架太多
网页中使用框架太多 ，目前很多主流搜索引擎很讨厌框架。
网站存在安全问题
网站被挂了黑链 ，植入了恶意代码，严重影响了安全 ，搜索引擎会做出判断 ，导致网站不收录或者收录减少。
二 、新网站如何快速被收录
网站不被收录的原因提高网站收录2个技巧（补充）周收1000+实战说明
收录一直是影响大家的问题 、下面我们以实战的态度、来给大家分享2点影响收录的因素！希望兄弟们早日收录！之前我还讲过一些影响收录的因素，下面分享的内容是除却之前因素外 、其他因素！目前新域名秒收 、周收1000+没什么大问题！说明：域名为备案域名！
上图为逆冬的好兄弟所做的一个网站、纯新域名的情况下、收录大家也可以自己查看！周收1000+根本无压力 、时间为2周左右！
网站模板确实可以影响收录 、之前说【泛目录】的时候讲过、很大一部分人不信 ，现在再次验证 ，【模板确实可以影响收录】，那么什么样的模板才好呢？
我们可以使用（不泛滥）模板去做网站（稀缺性） 、如果自己有条件 、可以自己原创模板、切图 、写HTML 、套后台、然后批量使用！
当很多人还在纠结于内容原创 、伪原创好的时候 、此站便给出了答案 。影响收录的内容仅占很少的一部分、之前我也说过 、影响网站收录的 、其实就是蜘蛛频次+网站整体质量 。
这里再给大家分享一点、内容聚合或是页面聚合比较好收录。不过页面聚合优于内容聚合、无论从网站收录的角度 、还是排名的角度都是这样 。
比如我前几天分析的【58同城】的列表页 、其实就是页面聚合！聚合页的排名大家可以自行查看（以下为之前分享的58文章、想看的可以看下）
文件
大部分的网站收录问题都是因为被文件拦截导致的 。
是一个纯文本文件 ，在这个文件中网站管理者可以声明该网站中不想被robots访问的部分 ，或者指定搜索引擎只收录指定的内容。
当一个搜索机器人（有的叫搜索蜘蛛）访问一个站点时，它会首先检查该站点根目录下是否存在 ，如果存在 ，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，那么搜索机器人就沿着链接抓取 。
格式：
1. User-agent：
用于指定搜索引擎的名称，如谷歌为User-agent: Googlebot ，*代表所有搜索引擎
：
表示禁止蜘蛛访问的文件
User-agent: *
Disallow:
表明：允许所有搜索引擎访问网站下的所有内容 。
User-agent: *
Disallow: /
表明：禁止所有搜索引擎对网站下所有网页的访问。
User-agent: *
Disallow: /cgi-bin/
表明：禁止所有搜索引擎进入网站的cgi-bin目录及其下所有子目录 。需要注意的是对每一个目录必须分开声明 。
User-agent: Roverdog
Disallow: /
表明：禁止Roverdog访问网站上的任何文件。
User-agent: Googlebot
Disallow:
表明：禁止Google的Googlebot访问其网站下的文件 。
3.注释
以”# ”开头的行 ，均被视为注解内容，注释需要单独成一行
Disallow: bob #comment是错误的
行
Allow行还未普遍使用 ，对于网站地图 ，直接写为Sitemap: http://www./
编辑模式：
在UNIX模式下编辑你的文件并以ASCII码格式上传 。显然并非所有的FTP客户端软件都能够天衣无缝地将文件格式转换为UNIX命令行终端，所以在编辑文件时 ，一定要确保你的文本编辑器是在UNIX模式下。
或者使用工具如爱站工具生成robots,直接粘贴复制到网站后台。
检测robots是否生效：
在百度站长后台检测robots
二 robots和nofollow的区别是什么
robots只用于站内链接 。禁止蜘蛛抓取进行收录；
nofollow的链接蜘蛛依然可以收录 ，但是不会传递权重，一般用于站外链接或者是公司电话 ，地址的页面有助于网址权重的集中 。
三 网站误封robots后的处理
1.解封robots ，然后到百度站长后台检测并更新Robots。
2.在百度站长后台抓取检测，此时显示抓取失败 ，通常更改完robots不会立即生效 ，需要等待几天，可以多点击抓取几次，触发蜘蛛抓取站点 。
3.在百度站长后台抓取频次 ，申请抓取频次上调 。
4.百度反馈中心 ，反馈是因为误操作导致了这种情况的发生。
5.百度站长后台链接提交处，设置数据主动推送（实时） 。
6.更新sitemap网站地图 ，重新提交百度 ，每天手工提交一次 。
四.新站robots的设置
对于已经上线但是还没有设置好的新站在robots中用
User-agent：*
Disallow:/
来禁止蜘蛛进行访问
meta标签
meta robots 标签是页面head部分meta标签的一种，用于指令搜索引擎禁止索引（收录）本页内容。
meta robots 标签的写法：
标签的意义：禁止所有搜索引擎索引本页面 ，禁止跟踪本页面上的链接 。
Noindex：搜索引擎不索引此网页（可以抓取 ，但不出现在搜索结果中） 。
Nofollow： 搜索引擎不继续通过此网页的链接索引搜索其它的网页。
= ”robots”content= ”noindex ” >
标签的意义：禁止索引本页面，但允许蜘蛛跟踪页面上的链接 ，也可以传递权重 。
使用了noindex meta robots标签的页面会被抓取 ，但不会被索引，也就是说页面URL不会出现在搜索结果中 ，这一点与robots文件不同 。
meta robots 标签的作用：
1 、不想让网站被收录使用meta robots 标签 ，禁止搜索引擎索引本页，同时禁止跟踪页面上的链接。
2 、禁止索引本页面，但是允许蜘蛛跟踪页面链接 ，也可以传递权重。
meta robots标签很多搜索引擎是不支持的 ，只有少数搜索引擎能够识别并按给定的值抓取 。因此还是推荐用文件来限制抓取.
有违规记录的域名
有些站长会选择购买有一定注册年份的域名，但是需要注意这些域名是否曾经被搜索引擎惩罚过 ，如果这样 ，网站也是非常难收录的 。
建议对于这种情况，站长可以查看一下网站日志 ，如果蜘蛛未爬取 ，只需要去站长后天提交即可。如果蜘蛛有爬取记录，但是没有收录 ，就可能是域名的问题 。当然也不排除网站自身存在一定的问题 。例如镜像网站等。
如何让网站收录
熊账号后台提交 ：熊账号对于原创文章的收录要求较高 ，但是通常首页的收录是非常快的，一般第二天就可以看到效果 。而且熊掌号会显示不收录的原因 ，方便站长进行整改 。
天级收录是针对最新更新的网页。周级收录是对于历史网页 。
但是网站提交之后站长仍然需要定期对网站进行更新 ，否则即使收录，蜘蛛也不会给予网站很好的评价，不利于后期排名 。
站长后台提交 ：这种方法也可以达到很快收录的目的 ，但是如果不收录 ，站长无从得知不收录的原因，只能够自己查找。
站长后台可以只提交一个链接 ，也可以提交网站地图 。这点比较方便 。
发布外链：
通常新网站不会有很高的权重 ，如果不提交入口，蜘蛛难以发现。在高权重的网站发布外链不仅可以吸引蜘蛛 ，还会有大量高权重的蜘蛛 ，更有利于网站的排名提升。
通常新站的收录在1个月内达到90%是一个比较良好的状态 。
————————————————————————————————
微信公众号：SEO教程干货
我把所有SEO干货集中做了分类明确的目录 。相信我，这是68万人次的选择。
微信公众号搜索：SEO教程干货 。百度SEO|谷歌SEO|营销学
微信公众号回复：“外链“ ，图文讲解 ，一步步教你 10种最详细外链发布方法
回复：“流量”，教你如何在网站中布局流量大杀器 ，实现流量阶梯式上涨的SEO指南
回复：“百度工具” ，14种百度SEO工具汇总
本人写的其他内容传送门：
搜索引擎的工作原理是什么 ？
怎样为一个新网站确定 SEO 关键词？
新网站如何被快速收录
三、如何找出网站不收录的罪魁祸首
网站不收录最容易忽视的地方搜索引擎是否知道页面的存在搜索引擎要收录该页面，必须知道有这个页面 。如果蜘蛛都不知道页面，谈何收录？这里主要分为两点：搜索引擎找不到网页入口和不让搜索引擎抓取。1 、搜索引擎找不到页面入口很多时候不是你更新了文章搜索引擎就要来抓取收录的 ，要怎么让蜘蛛知道你的更新呢?除了有规律的更新 ，可以向百度站长平台主动提交URL或者是提交站点地图，也可以让搜索引擎被动收集 ，这就是通过外链让蜘蛛知道你的网页 ，还有很多时候蜘蛛来到了你的网站，却找不到你更新的链接 ，因为网站的链接结构做得太复杂或是内链结构差 ，以致搜索引擎在抓取时间类不会爬到网站深处的页面，这也造成蜘蛛不知道该页面的存在 。所以不管怎么样 ，第一步我们要保证页面能被蜘蛛看到 ，关于这一点可以通过查看网站日志来判断蜘蛛是否来访过 。2.不让搜索引擎抓取很多网站有意无意的直接在robots文件屏蔽了百度或网站部分页面，却整天在找原因为什么蜘蛛不来抓取我的页面 ，这能怪百度吗?你都不让别人进门了 ，百度是怎么收录你的网页?所以有必要时常去检查一下网站robots文件是否正常。蜘蛛是否正常抓取1 、网站正常访问都知道，蜘蛛抓取页面要从域名到DNS服务器再到网站空间，所以其中任何一个环节出现问题 ，蜘蛛都不能正常的抓取 ，首先域名需要备案，然后域名解析要正常 ，如果解析出现问题 ，域名是不能访问网站ip地址的，这个时候网站打不开 ，蜘蛛抓取不了页面 。2、服务器稳定如果服务器比较卡或者不稳定 ，会直接影响蜘蛛抓取，蜘蛛不能很好的去抓取页面或由于加载慢只抓取到网页一半 ，这就很大程度上影响了网站的收录 。蜘蛛收录标准是否达到1 、行业不同标准也不同这个是显而易见的 ，新闻类网站肯定比一般企业站容易收录，而对于医疗 、博彩、成人用品等网站 ，标准肯定是更加严格 ，所以对于不同的行业，百度给予的收录标准也是不一样的。2 、不同的网站标准不同百度有一个优先抓取的原则，对于绝大多数用户喜欢 ，权重高的网站收录得要快 ，就像新浪网 、腾讯网收录得肯定要比一般网站要快，为什么?因为信任 ，这类网站本身就有其严格的过滤系统 ，在此类网站公布的内容百度基本是直接抓了就收，搜索引擎是互联网与用户的桥梁 ，它的目的就是给用户提供有价值的内容 ，你能为它提供良好的内容，它当然也会对你更好 ，这是互利的 。所以搜索引擎不是做慈善 ，你的网站能给它什么?3、内容的质量度蜘蛛爬行频繁，就不收录 ，或者收录了隔几天查看又没收录 。主要有两点：一是网站内容大量采集或者是提供无任何价值内容 ，二是网站还处于新站，百度对其有个考核期，收录较慢。网站不收录解决方法1 ，分析网站日志 ，看是否有被蜘蛛爬过1、如果页面未被蜘蛛爬行页面未被Baiduspider爬行，那么你可以适当的给该页面做一些外链来引导蜘蛛过来爬行 ，也可以给搜索引擎提交该页面。那么我们就可以进行以下操作：2 、页面爬行了未收录当页面长时间都不被百度收录的话 ，那么就要适当的给该页面增加一些附加价值或者对该页面进行重新的进行修改 。你可以对文本新增一些图片，视频或者内容 ，也可以对标题进行再次编辑 。总之 ，要让Baiduspider再次过来爬行的时候，返回的状态码不是一个无变化的状态吗 ，这样你的页面被收录的几率就大大的提升了。希望我的回答能帮到你 。龙术SEO
四 、网站首页不收录有哪些情况
网站不被收录的原因网站首页不收录有哪些情况 ，是不是跟服务器有关？大家帮忙解答下谢谢跟服务器是有一点关系，但是关系不是很大 ，而且还要看你的站内和站外优化得如何 ，不能过多也不能过少 。
服务器只是一方面，还有很多地方需要注意的。
不过我个人觉得降权的可能性最大 。
捷易通官方网站安溪铁观音 铁观音价格 铁观音
五、网站内页不收录怎么办呢
网站不收录最容易忽视的地方网站收录首页，说明蜘蛛是有光顾到你的网站的 ，它也认为你的网站是一个合格的 、健康的网站 。但它并没有收录你的内页 ，无非就是2个原因，1 、它没有去到你的内页 ，看不到你内页里面的东西。2、去到你的内页 ，发现你内页的质量不高，所以不带走你这个页面的信息 。以下有详解及解决方案：
一 、蜘蛛无法达到内页的情况
如果你网站有这些情况 ，蜘蛛可能是无法或者不会去到你的内页 。当中禁止了蜘蛛的进入内页可能你公司做前台的技术 ，对SEO并不是很了解，对robots文件的写法也不懂 ，是在网上抄袭别人的文件 ，然后上传的，这当中 ，它就有可能禁止了蜘蛛在内页的爬行。所以我们首先要检查一下robots文件 。
二 、蜘蛛达到你的内页 ，不带走内容
蜘蛛达到一个页面，不带走内容也有2种情况，第一个是页面没内容 ，第二个是页面内容没新意 。有人说 ，我页面上有图片，有文字明明就有内容的。那你要看看你的页面源代码当中在meta里面是不是加上了no
follow的属性 ，如果有 ，蜘蛛是不会索引这个页面的内容的，页面自然等于是没有内容了。
至于内容没有新意 ，这点也是很常见的 ，不少人认为，新站 ，我应该多放上一些内容 ，让网站看起来充实点，而忽视了内容的质量 。对于非原创性的内容 ，蜘蛛本来就是很反感的 ，加之又是新站，本来就没有什么信任度，要是你的内容大都是复制的 ，蜘蛛肯定就不再收录你的内页了 。接下来该怎么做 ，我想你已经知道了。
